基于文字识别与页面布局的APP控件识别算法

• 作者: 丁世举 侯津 顾乃杰 黄章进
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 图形用户界面 自动化测试 控件识别 文字识别 页面布局
• 年，卷（期）: 2019,（6）
• 所属期刊栏目: 体系结构与软件技术
• 页码范围: 89-95
• 页数: 7页
• 分类号: TP391
• 字数: 7113字
• 语种: 中文
• DOI: 10.19678/j.issn.1000-3428.0050835

摘要

在移动应用的开发周期中,使用图形用户界面(GUI)自动化测试技术可提高APP的开发测试效率.针对基于录制回放的GUI自动化测试方法存在不适用黑盒测试场景或识别正确率较低等不足,提出基于图像文字识别和应用页面布局的控件识别算法.根据移动应用的页面布局结构和手势操作坐标精确识别控件,采用控件树遍历的方式解决遍历过程中的页面布局重叠问题.分别在Android和iOS 2个平台进行实验,结果表明,与基于坐标和源代码的控件识别算法相比,该控件识别算法具有更高的正确率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	黄章进	中国科学技术大学计算机科学与技术学院	14	46	5.0	6.0
3	顾乃杰	中国科学技术大学计算机科学与技术学院	83	347	9.0	12.0
9	丁世举	中国科学技术大学计算机科学与技术学院	3	1	1.0	1.0
13	侯津	中国科学技术大学计算机科学与技术学院	2	1	1.0	1.0