基本信息来源于合作网站,原文需代理用户跳转至来源网站获取       
摘要:
从Hadoop分布式文件系统的架构出发,对NameNode节点存在的单点问题进行了分析与研究。在这个前提下,针对单点内存瓶颈问题,提出了一个小文件归并算法。此算法以Hadoop为基础,利用Hadoop分布式文件系统的特点,将归并后生成的大文件序列化到Hadoop分布式文件系统,很好地解决了小文件过多时NameNode单点内存瓶颈问题,并提高了系统的性能和可靠性。
推荐文章
分布式内存文件系统的发展
分布式内存文件系统
吞吐量
访问延迟
负载平衡
分布式嵌入式文件系统的设计
嵌入式
分布式文件系统
RPC
布局管理
容错管理
Cumulus:一个基于网络编码的分布式文件系统
网络编码
分布式文件系统
冗余容错
Hadoop
网络资源利用率
基于PKI的分布式安全文件系统
分布式安全文件系统
PIG
权限控制
内容分析
关键词云
关键词热度
相关文献总数  
(/次)
(/年)
文献信息
篇名 基于Hadoop分布式文件系统的单点问题的研究
来源期刊 软件工程师 学科 工学
关键词 Hadoop 小文件归并 分布式文件系统
年,卷(期) 2014,(12) 所属期刊栏目
研究方向 页码范围 9-10,6
页数 3页 分类号 TP393.0
字数 3301字 语种 中文
DOI
五维指标
作者信息
序号 姓名 单位 发文数 被引次数 H指数 G指数
1 宋继红 14 81 5.0 8.0
2 郝得智 2 10 2.0 2.0
3 李梦楠 1 7 1.0 1.0
传播情况
(/次)
(/年)
引文网络
引文网络
二级参考文献  (0)
共引文献  (0)
参考文献  (0)
节点文献
引证文献  (7)
同被引文献  (0)
二级引证文献  (0)
2014(0)
  • 参考文献(0)
  • 二级参考文献(0)
  • 引证文献(0)
  • 二级引证文献(0)
2015(1)
  • 引证文献(1)
  • 二级引证文献(0)
2016(3)
  • 引证文献(3)
  • 二级引证文献(0)
2017(1)
  • 引证文献(1)
  • 二级引证文献(0)
2018(2)
  • 引证文献(2)
  • 二级引证文献(0)
研究主题发展历程
节点文献
Hadoop
小文件归并
分布式文件系统
研究起点
研究来源
研究分支
研究去脉
引文网络交叉学科
相关学者/机构
期刊影响力
软件工程
月刊
2096-1472
21-1603/TP
大16开
辽宁省沈阳市浑南新区新秀街2号
8-198
1985
chi
出版文献量(篇)
5636
总下载数(次)
15
论文1v1指导