基于隐马尔科夫和主成分分析的电网数据词典构建

• 作者: 于钊 侯宇程 叶宽 孙致远 秦欢 门业堃
• 来源期刊: 电力大数据
• 学科: 工学
• 关键词: 文本分类 分词 隐马尔可夫 技术监督
• 年，卷（期）: 2019,（1）
• 所属期刊栏目: 大数据专题
• 页码范围: 16-21
• 页数: 6页
• 分类号: TN92
• 字数: 6114字
• 语种: 中文

摘要

电网企业拥有海量采用中文记录的非结构化文本信息,其中包含有大量重要的可靠性统计信息.但依靠人工对其进行挖掘不仅效率低而且准确性因人而异.如何高效、准确、智能地挖掘电网企业设备缺陷文本中重要的可靠性统计信息是目前亟待解决的问题.文章基于改式隐式马尔科夫算法对通过全过程技术监督工作采集的非结构化文本数据进行分句分词,制定研究非结构化数据的结构化表达规则.利用主成分分析、词向量以及深度神经网络等的自然语言处理算法对现有的问题描述文本中的同名词、同义词以及近义词等的语义相似度进行计算,并采用K阶近邻算法对降维后的词向量进行分类聚类.上述工作解决了缺陷文本句子成分难以划分、数字量无法精确提取等问题,形成一份国网系统运检专业领域的数据词典库,为电网领域的非结构化数据挖掘提供了新技术,为今后技术监督工作的展开具有重要意义和贡献.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	秦欢	国网北京市电力公司电力科学研究院	3	5	2.0	2.0
2	门业堃	国网北京市电力公司电力科学研究院	4	3	1.0	1.0
3	侯宇程	国网北京市电力公司电力科学研究院	3	3	1.0	1.0
4	叶宽	国网北京市电力公司电力科学研究院	6	17	3.0	3.0
5	于钊	国网北京市电力公司电力科学研究院	3	3	1.0	1.0
6	孙致远	国网北京市电力公司电力科学研究院	1	3	1.0	1.0