命名实体识别在无效文本过滤中的应用 ——过滤影视作品中的无效评论

• 作者: 张曙 李耕 李骏亮
• 来源期刊: 电子技术
• 学科: 工学
• 关键词: 命名实体识别 条件随机场 无效评论过滤 文本处理 语义角色标注
• 年，卷（期）: 2017,（9）
• 所属期刊栏目: 电子技术设计与应用
• 页码范围: 56-60,49
• 页数: 6页
• 分类号: TP391.12
• 字数: 5192字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2013.01.001

摘要

文章基于自然语言处理中的命名实体识别和语义角色标注方法,提出了一种视频网站电视剧无效评论过滤的方法.首先通过爬虫获得足够的视频网站电视剧评论、分集简介和基本演职人员的信息;其次,使用基于条件随机场的命名实体识别方法对简介进行命名实体提取,使用语义角色标注的方法对简介进行剧情相关词的提取;最后,通过使用前两步建立的关键词词典、情感分析技术与评论长度判断相结合的方法进行无效评论的过滤.实验结果表明,视频网站电视剧的无效评论大约占总评论数的13%左右,这种方法可以有效的过滤掉视频网站电视剧中大部分无效评论.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张曙	中国科学技术大学苏州研究院软件学院	18	128	4.0	11.0
2	李骏亮	中国科学技术大学苏州研究院软件学院	1	0	0.0	0.0
3	李耕	中国科学技术大学苏州研究院软件学院	1	0	0.0	0.0