【IT168 资讯】听完了大牛们对Oracle以及其他数据库的性能优化和数据库开发之后,我们国产数据库在大数据量方面的性能和解决方案是怎样的呢?接下来的演讲主题是国产数据库在DM针对大数据量环境下分析型应用的支持方案,演讲的嘉宾是达梦公司副总经理兼CTO:周淳。
▲达梦公司副总经理兼CTO:周淳
在会上周淳介绍了一个实际的案例:数据源与入库。数据入库时间不确定,短到每天入库,长到可半个月入库。每次入库数据量较大。数据源为文本、excel等。
▲对性能的理解
大表查询的特点:
核心表单数据量48亿条
IO消耗巨大
单纯的数据扫描都十分耗时
针对性的采用列存储表
列数存储高压缩比,有效降低IO
对连接查询更有效
本案例更新事务很少,对列存储压缩数据的更新开销可以避免。
复杂查询的特点:
分析、统计型查询
体现在大规模的连接查询、子查询、联合查询、数据分组与排序、临时结果集与临时表等。
索引调优 方式不适用
数据库级查询优化与性能支持
优化器
执行器
▲查询与优化:分析与优化