计算机研究与发展

作者：张莹莹,钱胜胜,方全,徐常胜,

关键词：多模态知识图谱, 医疗问答系统, 注意力机制, 信息检索, 深度学习,

随着网络的普及，越来越多人遇到身体不适时，会选择在网站上搜索相关症状.随着在线医疗问答网站的出现，如春雨医生、寻医问药等，患者可以便捷地医生交流.现有的问答系统方法，聚焦于词级别的交互与语义信息，却很少考虑在回答问题时，回答者还利用了与问答本身无直接联系的常识.在实际生活中，除了病人的表述，医生还需要额外知识来诊断病人.提出了一个基于多模态知识感知注意力机制的医疗问答方法，它可以有效地利用多模态医疗知识图谱来构建基于知识图谱的问答对之间的交互.该模型首先学习知识图谱中实体的多模态表示；然后从多模态知识图谱中与问答对相关联的实体的路径来推测出回答该问题时的逻辑，并刻画问答对之间的交互关系.此外，该模型还提出了一种注意力机制来判别连接问答对的不同路径之间的重要性.构建了一个大规模的多模态医疗知识图谱和一个医疗问答数据集，实验结果表明:该方法比当前最好的方法准确度提升了2%以上.

来源：2020年第5期

《计算机研究与发展》期刊编辑部

查看计算机研究与发展杂志2020年第5期