基本信息来源于合作网站,原文需代理用户跳转至来源网站获取       
摘要:
针对大规模能源数据系统的存储与快速检索需求,提出了一种基于HDFS/Hadoop开源平台的云存储架构及多级索引目录体系,以及此架构下的基于多级索引表的mDHT算法,并完成了算法的MapReduce编程实现.基于上述算法完成的4800万条数据的仿真实验表明:在数据量达到1200万~4800万条时,采用多级索引表的mDHT算法较常规的MS SQL Server实现和HDFS/Hive方法在检索性能方面有质的飞跃;与单级索引表检索方法比较,在数据查找时间上也有24.5%~57.8%的显著降低.文中提出的基于多级索引表的DHT算法为构建基于云存储架构的海量数据快速搜索引擎提供了一个关键技术.
推荐文章
基于云存储的密文数据检索方法研究与实现
云存储
倒排索引
元数据
密文数据检索
基于Solr的数据检索技术研究
大数据
智能交通
Solr
索引
基于期限的多请求数据检索问题研究
无线数据广播
数据检索
多请求
访问延迟
期限丢失率
检索序列
HotRank:热度敏感的非结构化数据检索排名算法
非结构化数据
检索
排名
热度
内容分析
关键词云
关键词热度
相关文献总数  
(/次)
(/年)
文献信息
篇名 基于HDFS开源架构与多级索引表的海量数据检索mDHT算法
来源期刊 计算机科学 学科 工学
关键词 大规模数据处理 云存储 多级索引表 查找算法 MapReduce
年,卷(期) 2013,(2) 所属期刊栏目 软件与数据库技术
研究方向 页码范围 195-199,234
页数 6页 分类号 TP393
字数 6575字 语种 中文
DOI
五维指标
作者信息
序号 姓名 单位 发文数 被引次数 H指数 G指数
1 汤羽 9 57 4.0 7.0
2 范爱华 3 24 3.0 3.0
3 王英杰 2 11 2.0 2.0
4 姚远哲 5 32 3.0 5.0
传播情况
(/次)
(/年)
引文网络
引文网络
二级参考文献  (4)
共引文献  (83)
参考文献  (7)
节点文献
引证文献  (8)
同被引文献  (26)
二级引证文献  (43)
1979(1)
  • 参考文献(1)
  • 二级参考文献(0)
1996(1)
  • 参考文献(1)
  • 二级参考文献(0)
1997(1)
  • 参考文献(1)
  • 二级参考文献(0)
2006(1)
  • 参考文献(1)
  • 二级参考文献(0)
2007(1)
  • 参考文献(0)
  • 二级参考文献(1)
2008(3)
  • 参考文献(1)
  • 二级参考文献(2)
2009(2)
  • 参考文献(1)
  • 二级参考文献(1)
2010(1)
  • 参考文献(1)
  • 二级参考文献(0)
2013(0)
  • 参考文献(0)
  • 二级参考文献(0)
  • 引证文献(0)
  • 二级引证文献(0)
2014(1)
  • 引证文献(1)
  • 二级引证文献(0)
2015(9)
  • 引证文献(4)
  • 二级引证文献(5)
2016(9)
  • 引证文献(1)
  • 二级引证文献(8)
2017(17)
  • 引证文献(1)
  • 二级引证文献(16)
2018(6)
  • 引证文献(0)
  • 二级引证文献(6)
2019(8)
  • 引证文献(1)
  • 二级引证文献(7)
2020(1)
  • 引证文献(0)
  • 二级引证文献(1)
研究主题发展历程
节点文献
大规模数据处理
云存储
多级索引表
查找算法
MapReduce
研究起点
研究来源
研究分支
研究去脉
引文网络交叉学科
相关学者/机构
期刊影响力
计算机科学
月刊
1002-137X
50-1075/TP
大16开
重庆市渝北区洪湖西路18号
78-68
1974
chi
出版文献量(篇)
18527
总下载数(次)
68
论文1v1指导