基于Hadoop的海量MP3文件存储架构

• 作者: 孙莉莉 杨扬 赵晓永 陈宇
• 来源期刊: 计算机应用
• 学科: 工学
• 关键词: Hadoop MP3 小文件 富元数据 存储架构
• 年，卷（期）: 2012,（6）
• 所属期刊栏目: 计算机软件技术
• 页码范围: 1724-1726
• 分类号: TP311
• 字数: 3085字
• 语种: 中文
• DOI: 10.3724/SP.J.1087.2012.01724

摘要

MP3作为数字音乐时代的事实标准,数量已相当巨大,用户的访问需求也与日俱增,有效存储和管理海量的MP3文件,为用户提供良好的体验,越来越引起人们的关注.Hadoop的出现,提供了一种新的思路.但由于Hadoop自身并不适合海量小文件处理,提出一种基于Hadoop的海量MP3文件存储架构,充分利用MP3文件自身包含的丰富描述信息,通过预处理模块的归类算法,将小文件归并到Sequence File中,同时引入高效的索引机制,很好地解决了小文件过多时NameNode内存瓶颈问题.实验证明,该架构能达到良好的效果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杨扬	北京科技大学计算机与通信工程学院	183	2049	21.0	36.0
2	陈宇	北京科技大学计算机与通信工程学院	4	103	3.0	4.0
3	赵晓永	北京科技大学计算机与通信工程学院	8	94	4.0	8.0
4	孙莉莉	北京科技大学计算机与通信工程学院	4	81	3.0	4.0