【论文标题】Unsupervised Natural Language Inference via Decoupled Multimodal Contrastive Learning 【作者团队】Wanyun Cui, Guangyu Zheng, Wei Wang 【发表时间】2020/10/16 【论文链接】https://arxiv.org/pdf/2010.08200.pdf

【推荐理由】本文发表于EMNLP2020,文章提出仅通过与任务无关的多模态预训练模型来解决自然语言推理问题,而无需任何来自推理标签的监督信息。

虽然最近多模态自监督学习的研究能够对视觉和文本进行联合编码学习,但它们对不同模式的编码是耦合的。因此,当单独编码纯文本时,它们不能包含视觉信息。基于此,文章提出了多模态对齐对比解耦学习(MACD)网络。MACD通过对比学习,强制解耦后的文本编码器来表示视觉信息。因此,即使对于纯文本推理,它也嵌入了视觉知识。

内容中包含的图片若涉及版权问题,请及时与我们联系删除