基于多尺度卷积神经网络的舌象点刺识别模型建立与验证

• 作者: 彭成东 汪莉 蒋冬梅 杨诺 陈仁明 董昌武
• 来源期刊: 数字中医药（英文版）
• 关键词: 点刺识别提取 舌象特征 实例分割 卷积神经网络 中医舌诊系统 人工智能
• 年，卷（期）: 2022,（1）
• 页码范围: 49-58
• 页数: 10页
• 语种: 中文
• DOI: 10.1016/j.dcmed.2022.03.005

摘要

目的 舌象中点刺所生的部位、颜色、分布的疏密可以推测邪热所在脏腑及其轻重.本研究聚焦于人工智能的图像分析方法研究中医点刺舌识别.方法 基于图像深度学习和实例分割原理,设计了舌象点刺识别与提取模型.该模型包括多尺度特征图生成模块、候选区域搜索模块和目标区域识别模块.首先使用深度卷积网络分别建立多尺度低、高抽象度的特征图谱,再在特征图上进行目标候选框生成算法和优选策略以精选出高质量目标候选区域,最后使用分类网络对目标区域分类、计算目标区域像素,最终得到舌象表面点刺的区域分割.在无辅助光源条件下手机拍摄的不同规格舌象,使用该方法进行实验.结果 实验结果表明,该点刺识别受试者工作特征曲线下的面积(AUC)值为92.40％,精确度为84.30％,灵敏度为88.20％,特异度为94.19％,召回率为88.20％,区域像素准确率指标像素精度(PA)为73.00％,均像素精度(mPA)为73.00％,交并比(IoU)为60.00％,均交并比(mIoU)为56.00％.结论 本研究结果表明该模型适用于中医舌诊系统应用.基于多尺度卷积神经网络的点刺舌识别,有助于提高点刺分类和点刺区域像素的精准提取,为中医智能舌诊提供一种切实可行的方法.