基于 HDFS 的创新知识云平台存储架构的研究与设计

• 作者: 霍振奇 马建红
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: 创新知识 HDFS 小文件存储 单点故障
• 年，卷（期）: 2016,（3）
• 所属期刊栏目: 数据工程
• 页码范围: 62-66
• 页数: 5页
• 分类号: TP311
• 字数: 5117字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2016.03.013

摘要

针对现有存储结构无法满足海量创新知识带来的存储及服务需求的问题，提出一种改进的 HDFS（Hadoop Distributed File System）分布式存储系统并应用到创新知识云平台。首先引入包文件及分布式索引服务，改进 HDFS 小文件存储的效率问题，然后通过优化 HDFS 的命名空间备份及故障恢复服务，实现可用性更强、资源利用率更高的 HDFS 高可用架构。通过系统的设计和实现证明优化工作大大降低了命名节点的内存压力，提高了集群的可用性，并且改进的 HDFS 存储系统可以满足创新知识云平台的存储需求。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	马建红	河北工业大学计算机科学与软件学院	41	483	11.0	21.0
2	霍振奇	河北工业大学计算机科学与软件学院	1	8	1.0	1.0