基于 Hadoop平台的并行特征匹配算法研究

• 作者: 张伟 李宝禄
• 来源期刊: 计算机应用研究
• 关键词: 分布式文件系统 大数据 特征匹配 并行扫描
• 年，卷（期）: 2014,（11）
• 页码范围: 3320-3323
• 页数: 4页
• 分类号: TP301.6
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2014.11.027

摘要

很多大企业采用Hadoop分布式文件系统来存储海量数据，而传统的病毒扫描主要针对单机系统环境。研究如何并行化病毒扫描中的核心特征匹配算法来处理分布式海量数据。在Hadoop平台下，基于MapReduce并行编程模型来实现大数据高效的病毒扫描，特别是针对Hadoop处理海量小文件效率低的问题，通过将小文件合并，再利用索引来提高海量小文件的处理效率。实验结果表明，提出的并行特征匹配算法可以显著降低处理时间，适用于大数据的病毒扫描。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张伟	北京信息科技大学计算机学院	84	416	10.0	18.0
5	李宝禄	北京信息科技大学计算机学院	1	8	1.0	1.0