行列混合存储

    一般情况下,如果表的字段比较多(大宽表),查询中涉及到的列不很多的情况下,适合列存储。如果表的字段个数比较少,查询大部分字段,那么选择行存储比较好。

    列存储方式如图1所示。

    图 1 列存储示意图

    在大宽表、数据量比较大的场景中,查询经常关注某些列,行存储引擎查询性能比较差。例如气象局的场景,单表有200~800个列,查询经常访问10个列,在类似这样的场景下,向量化执行技术和列存储引擎可以极大的提升性能和减少存储空间。

    行存表和列存表各有优劣,建议根据实际情况选择。

    • 行存表

    行存表和列存表的选择原则如下:

    • 更新频繁程度

      数据如果频繁更新,选择行存表。

    • 表的列数

      表的列数很多,选择列存表。

    • 压缩率

      列存表比行存表压缩率高。但高压缩率会消耗更多的CPU资源。