技术开发 频道

DM针对大数据量环境下分析型应用的支持

  【IT168 资讯】听完了大牛们对Oracle以及其他数据库的性能优化和数据库开发之后,我们国产数据库在大数据量方面的性能和解决方案是怎样的呢?接下来的演讲主题是国产数据库在DM针对大数据量环境下分析型应用的支持方案,演讲的嘉宾是达梦公司副总经理兼CTO:周淳。

Oracle:栓锁竞争与Latch优化实

  ▲点击进入专题

DM针对大数据量环境下分析型应用的支持

  ▲达梦公司副总经理兼CTO:周淳

  在会上周淳介绍了一个实际的案例:数据源与入库。数据入库时间不确定,短到每天入库,长到可半个月入库。每次入库数据量较大。数据源为文本、excel等。

DM针对大数据量环境下分析型应用的支持

  ▲对性能的理解

  大表查询的特点:

  核心表单数据量48亿条

  IO消耗巨大

  单纯的数据扫描都十分耗时

  针对性的采用列存储表

  列数存储高压缩比,有效降低IO

  对连接查询更有效

  本案例更新事务很少,对列存储压缩数据的更新开销可以避免。

  复杂查询的特点:

  分析、统计型查询

  体现在大规模的连接查询、子查询、联合查询、数据分组与排序、临时结果集与临时表等。

  索引调优 方式不适用

  数据库级查询优化与性能支持

  优化器

  执行器

DM针对大数据量环境下分析型应用的支持
▲查询与优化:分析与优化

0
相关文章