基于手绘轮廓图的移动端图像检索

• 作者: 张旭东 林融 缪永伟 陈佳舟 鲍陈
• 来源期刊: 计算机辅助设计与图形学学报
• 学科: 工学
• 关键词: 图像检索 深度学习 手绘轮廓 图像分类 CoreML
• 年，卷（期）: 2019,（1）
• 所属期刊栏目: 图像与视觉
• 页码范围: 56-64
• 页数: 9页
• 分类号: TP391.41
• 字数: 4792字
• 语种: 中文
• DOI: 10.3724/SP.J.1089.2019.17337

摘要

针对传统利用图像特征信息进行图像检索中难以从语义层次上理解图像相似性的问题,基于深度学习框架,提出一种结合类别分类和精确特征匹配的基于手绘轮廓图的移动端图像检索方法.首先在预处理阶段建立具有输入层、隐藏层以及Softmax输出层的神经网络分类模型,并利用训练数据集对模型进行训练,使其不断优化网络结构权值,实现输入图像的分类预测并提取分类图像标签;然后利用VGG16模型与ResNet50模型分别提取各个分类图像集下的精确特征,得到精确特征向量;最后将归一化并经组合后的特征向量与各个分类图像标签建立映射关系,实现移动端图像检索.采用移动端-服务器架构,用户在移动端输入手绘轮廓图后,系统进行自动预处理并与图像服务器实现交互,图像服务器进行分类预测和精确特征匹配得到检索结果,移动端展示最终检索结果.基于Keras深度学习开发框架,结合VGG16模型与ResNet50模型,实验结果表明,该方法能够根据手绘轮廓图高效、便捷地检索得到目标图像.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	缪永伟	浙江理工大学信息学院	42	212	8.0	11.0
3	张旭东	浙江工业大学计算机科学与技术学院	23	66	4.0	7.0
4	陈佳舟	浙江工业大学计算机科学与技术学院	21	45	4.0	5.0
7	鲍陈	浙江工业大学计算机科学与技术学院	4	1	1.0	1.0
8	林融	浙江工业大学计算机科学与技术学院	1	0	0.0	0.0