首页 期刊 图学学报 基于深度学习中间层卷积特征的图像标注 【正文】

基于深度学习中间层卷积特征的图像标注

作者:于宁; 宋海玉; 孙东洋; 王鹏杰; 姚金鑫 大连民族大学计算机科学与工程学院; 辽宁大连116600; 安迅达盛医疗科技有限公司; 北京100020
深度学习   图像标注   卷积   正例均值向量   特征向量  

摘要:针对基于深度特征的图像标注模型训练复杂、时空开销大的不足,提出一种由深度学习中间层特征表示图像视觉特征、由正例样本均值向量表示语义概念的图像标注方法。首先,通过预训练深度学习模型的中间层直接输出卷积结果作为低层视觉特征,并采用稀疏编码方式表示图像;然后,采用正例均值向量法为每个文本词汇构造视觉特征向量,从而构造出文本词汇的视觉特征向量库;最后,计算测试图像与所有文本词汇的视觉特征向量相似度,并取相似度最大的若干词汇作为标注词。多个数据集上的实验证明了所提出方法的有效性,就F1值而言,该方法在IAPR TC-12数据集上的标注性能比采用端到端深度特征的2PKNN和JEC分别提高32%和60%。

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

学术咨询 免费咨询 杂志订阅