欢迎访问广东工业大学数据挖掘与信息检索实验室!

一种基于图文匹配的多层次图像特征融合方法

作者:DMIR    发表时间:2018-08-13    浏览量:167


发明人:郝志峰;李俊峰;蔡瑞初;温雯;王丽娟;陈炳丰

申请时间:2018年8月13日

专利申请号:201810915359.X

申请状态:实质审查


说明:本发明公布了一种基于图文匹配的多层次图像特征融合方法,通过使用预训练网络中的多层特征作为图像的多层次总预训练特征,并且在图文匹配的学习目标指导下,利用多层感知机(Multi?Layer Perceptron)有监督地融合和降维图像的多层次总预训练特征,生成融合图像特征。从而能够充分地利用更多有用的、不同层次的预训练特征,并从中归纳出对图文匹配任务有用的特征和去除无用的特征,减少了噪声特征的干扰。然后即可利用融合图像特征和文本特征在特征空间上的余弦相似度来进行图文匹配。