深度自编码器在数据异常检测中的应用研究

• 作者: 严群 周雄图 姚剑敏 张常华 张永爱 郭太良
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 数据异常检测 自编码网络 深度自编码网络 曲线下面积(AUC)
• 年，卷（期）: 2020,（17）
• 所属期刊栏目: 大数据与云计算
• 页码范围: 93-99
• 页数: 7页
• 分类号: TP39
• 字数: 7246字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1908-0298

摘要

针对自编码器网络(AE)需要正常数据进行训练的局限性,结合主成分分析方法,将AE的每次重建输出与输入数据进行求差,隔离出异常数据部分,即将输入数据分为正常与异常部分,正常部分由AE重建输出,异常部分由近端法进行优化输出,最后采用交替方向乘子法训练整个模型并达到预定训练次数再输出结果,实现了一种基于深度自编码网络(DAE)模型的无监督数据异常检测方法.在7个真实数据集与8种机器学习模型和AE模型进行了对比实验,结果表明,DAE模型无需输入正常数据就可以有效进行模型训练,且可以防止模型的过拟合,其综合表现高于传统机器学习模型和AE模型,AUC值在4个数据集中达到最优.在mnist数据集中,DAE模型的AUC值相比于孤立森林(IF)方法提高了10.93％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	姚剑敏	福州大学物理与信息工程学院	86	238	8.0	10.0
3	郭太良	福州大学物理与信息工程学院	302	1102	15.0	21.0
4	张永爱	福州大学物理与信息工程学院	57	199	8.0	11.0
5	周雄图	福州大学物理与信息工程学院	26	67	5.0	7.0
6	严群	福州大学物理与信息工程学院	10	1	1.0	1.0
8	张常华	福州大学物理与信息工程学院	1	0	0.0	0.0