近日,国际顶级会议ACM Multimedia2018公布录用结果,厦门大学媒体分析与计算实验室(MAC)3篇论文入选,在国内研究组名列前茅。ACM Multimedia是计算机学科多媒体领域的顶级会议,被中国计算机学会(CCF)列为A类会议。与其他理工科学科不同,在全国学科评估中,唯有“计算机科学与技术”一级学科将CCF推荐的A类国际会议计入成果评估。ACM Multimedia有着严苛的录用标准,2018年的有效投稿量达757篇,Oral录取率不到8.5%,Poster录取率约为19%。MAC实验室团队在纪荣嵘教授带领下率先于2017年实现厦门大学ACM Multimedia论文零的突破,开创了厦门大学信息学院“一流学科”的研究成果得到国际同行认可的先河。被ACM Multimedia2018录用的这3篇论文的相关信息如下:

题目:Dense Auto-Encoder Hashing for Robust Cross-Modality Retrieval

作者:Hong Liu, Mingbao Lin(共同一作), Shengchuan Zhang, Yongjian Wu, Feiyue Huang, Rongrong Ji(通讯作者).

本文提出了一种模态缺失情况下的快速哈希检索算法。近年来跨模态(文本、图像、视频、音频等)哈希检索技术得到了广泛的关注,但普遍考虑的都是模态完整情况下的训练方式,而实际应用中更多的是存在大量模态缺失的情况。本文考虑了模态部分缺失的状态下(文本模态和图片模态)进行鲁棒性二值化编码的学习,论文首先提出了Dense Auto-encoder Network研究不同模态间的关联性,进行缺失模态补全的完整性学习,同时引入变纷哈希技术,利用局部敏感哈希对数据的label进行二值化编码,引导哈希函数的学习,将各个模态的二值化编码映射到一个共同空间中。该方法能够做到在某种模态100%缺失的情况下依旧能够学习到具有鲁邦的哈希特征。所提方法在各个数据集上的验证结果表明该算法明显优于其他方法。

刘弘,厦门大学智能科学与技术系2016级博士研究生,导师纪荣嵘教授,已以第一作者在TPAMI(CCF一区)、TIP(CCF二区)、CVPR(CCF-A类)、AAAI(CCF-A类)、IJCAI(CCF-A类)等期刊会议发表多篇论文。


题目:Supervised Online Hashing via Hadamard Codebook Learning

作者:Mingbao Lin, Rongrong Ji(通讯作者), Hong Liu, Yongjian Wu.

该论文提出了一种在线哈希学习技术。对于具有时序性的数据,哈希模型需要随着新数据的获得而进行动态的更新同时保留以往数据的特征分布,且对模型更新的时间又具有很高的要求。本文利用Hadamard矩阵,将每一个类别分别随机给予一个Hadamard编码,采用LSH方法将其进一步映射到所需的比特位空间,学习更为鲁棒性的哈希编码机制。相对于已有的方法,本文提出的方案能够使得数据类别可以动态的增加,通过实验证明,本方案每次只需要一个样例即可进行哈希函数的动态更新,而以往的方法往往需要一对带有相似性标注信息的数据,或者需要收集到一定量的数据,才能进行哈希哈数的更新。在公开的三个数据集上测试表明,所提方法在时间和性能上都取得了不错的性能表现。该论文获得了Oral Presentation的优异结果。

林明宝,厦门大学智能科学与技术系2016级硕士研究生,导师纪荣嵘,已以第一作者在ACM Multimedia (CCF-A类)发表论文两篇。


题目:PVNet: A Joint Convolutional Network of Point Cloud and Multi-View for 3D Shape Recognition

作者:Haoxuan You, Yifan Feng, Rongrong Ji, Yue Gao(通讯作者)

近年来,3D物体的识别广泛地吸引了多媒体及计算机视觉领域的注意力。深度学习模型在各种领域中发挥着巨大的作用。其中基于点云或多视图的3D表示的方法用于深度学习模型中在识别任务中有着显著的效果。但是目前并没有将这两者合在一起去做3D识别的网络,这两种表示的数据是可以互补的。在这篇文章中作者提出了点云-多视图网络,第一个将点云和多视图结合在一起去做3D的识别。同时作者也提出了一种嵌入注意力融合机制,该方案可以从多视图数据中使用高层特征来从点云数据建模不同结构特征的内在相关性和可辨别性。最终,这种可辨别的描述符被作为软注意力掩模来进一步细化3D形状的结构特征。所提的方法在Modelnet40数据库上的分类和检索实验结果都明显优于其他方法。该论文获得了Oral Presentation的优异结果。

丰一帆,厦门大学智能科学系2018级硕士推免生,导师纪荣嵘教授。已以第一作者在CVPR(CCF-A类)发表论文一篇。