近日，我中心自然语言处理研究组完成的论文Multi-Modal Neural Machine Translation with Deep Semantic Interactions被信息科学重要期刊Information Sciences期刊录用。Information Sciences是CCF-B类期刊、中科院SCI期刊分区2020年01月最新升级版一区期刊，2019年影响因子为5.91。
论文由中心苏劲松副教授，2018级硕士研究生陈锦昌，2020级硕士研究生蒋辉合作完成。本文主要致力于多模态神经机器翻译任务下，如何更好地进行图片和文本的语义信息交互。本文在两个方面进行了改进：① 使用Bi-Attention得到语义互相补充的文本和图片表示。② 解码端装配一个Co-Attention模块，先基于文本关注图像信息，最后再基于得到的图像信息重新关注文本表示。多个标准数据集的结果证明了本文工作的有效性。
