基于HBase的列存储压缩策略的选择优化

• 作者: 孙靖超 芦天亮
• 来源期刊: 计算机应用研究
• 关键词: 列存储 数据压缩 HBase 压缩策略选择方法
• 年，卷（期）: 2019,（5）
• 所属期刊栏目: 软件技术研究
• 页码范围: 1419-1423
• 页数: 5页
• 分类号: TP274
• 语种: 中文
• DOI: 10.19734/j.issn.1001-3695.2017.12.0841

摘要

为解决现有列存储数据库压缩策略在压缩过程中遇到的数据离散程度大、分类粒度小、配套分类算法缺陷导致的学习成本高、压缩效率难以保证的问题,提出了一种基于排序的列区混合压缩策略.首先根据HBase特点设计了一种对各列数据进行排序的方法加强数据紧密度,然后根据数据特点分别使用混级区压缩策略和混级列压缩策略进行压缩策略推荐,在TPC-DS标准数据集上与前人策略进行比较.实验结果显示,该方法在压缩率、压缩/解压时间方面均有优异的表现,从而证明了其有效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	芦天亮	中国人民公安大学信息技术与网络安全学院	44	78	5.0	7.0
2	孙靖超	中国人民公安大学信息技术与网络安全学院	4	13	2.0	3.0