基于层叠隐马模型的屏蔽关键词研究

• 作者: 陶非凡
• 来源期刊: 计算机技术与发展
• 学科: 工学
• 关键词: 屏蔽 概率 层叠隐马尔可夫模型 分词
• 年，卷（期）: 2014,（11）
• 所属期刊栏目: 安 全 与 防 范
• 页码范围: 167-169,174
• 页数: 4页
• 分类号: TP31
• 字数: 2430字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-629X.2014.11.042

摘要

信息时代给人们的生活带来巨大改善，但同时也伴随一系列问题的产生，其中如何对网络中产生的大数据量的言论信息进行过滤的问题是研究的一大难点。传统的屏蔽法效率较低而且不够准确，因此文中提出了一种新的关键词屏蔽技术。主要采用二元语法模型结合层叠隐马可夫分词技术，首先运用二元语法模型在大量语料中得到普通词和关键词的构成概率，建立一个有普通词和关键词分类的词典，再结合层叠隐马可夫模型对具体句子进行分词处理，对分词后的结果计算其关键词屏蔽概率，最终得到一个科学的屏蔽概率，可以大大提高关键词屏蔽的准确性。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陶非凡	上海海事大学信息工程学院	1	1	1.0	1.0