基于HDStore模型的混合分布式大数据存储技术

• 作者: 冯志杰
• 来源期刊: 无线电工程
• 学科: 工学
• 关键词: JS-Model HDStore SSD 混合存储
• 年，卷（期）: 2020,（4）
• 所属期刊栏目: 专题技术与工程应用
• 页码范围: 335-342
• 页数: 8页
• 分类号: TP311
• 字数: 6579字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-3106.2020.04.015

摘要

针对大规模RDF数据的存储管理,提出了一种基于SSD和HDD的混合分布式数据存储方案HDStore.单个的固定大小的Journal-File采用只追加模式把数据项存储在SSD上,以支持RDF三元组数据在构建数据索引过程中的快速读写操作,对应的多个Segment-File存储在HDD上,针对大规模数据索引项进行持久化存储.利用SSD随机写性能高于HDD写性能这一特点,在索引分片Sharding置换出内存时,通过索引分片在SSD缓存上的一系列的build,split,move,merge数据操作,优化了系统I/O性能并控制硬件成本效果.试验结果表明,HDStore数据存储方案的加载、查询性能,优于传统的HDD存储方案,价格成本优于SSD存储方案.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	冯志杰	中国电子科技集团公司第五十四研究所	1	0	0.0	0.0