大数据时代,垂直领域的智能助手为人们提供了高效的信息检索方式。而“互联网+旅游”的新型旅游方式,使得旅游领域用户迫切希望能有一个智能助手帮助自己完成旅游相关的各种任务,如知识问答、景点推荐和路径规划。对话系统可以通过与用户的多轮交流,逐步明确用户需求,完成多种任务。知识图谱中包含了丰富的实体关系及属性,可以有效作为对话系统的知识来源,结合知识图谱的对话系统成为当下研究热点。本文针对旅游领域的任务特点,引入多模态知识图谱,并利用管道式方法构建了一个旅游领域的多模态对话系统。本文主要展开的工作如下:（1）为了解决多模态异构知识图谱融合需要大规模标注数据,人工工作量较大的问题,本文提出了基于对比学习的自监督多模态实体对齐模型MEA。MEA结合了对比学习不需标注数据的优势,同时引入了多模态信息,利用实体之间的视觉相似度为实体对齐任务构建伪标注数据,模拟有监督学习过程,二者结合,进一步提高了实体对齐的准确率。在DBP15K数据集的无监督实体对齐任务上,MEA模型的Hits@1分数平均有6.3%的提升。（2）本文设计了包含意图理解、槽填充、视觉特征识别、约束条件获取在内的多模态、多角度的语言理解算法。同时引入经MEA模型知识融合后的多模态旅游知识图谱,采用基于知识图谱属性名称的槽位扩充方法,构建了适用于旅游领域的细粒度语义槽,进一步提高了多模态语言理解算法的性能。（3）本文构建了基于多模态旅游知识图谱的旅游对话系统。为了充分满足用户旅游过程中的各种需求,本文设计了路径规划、景点推荐以及信息助手等多个模块,为游客完成多种与旅游相关的任务。多方面的实验证明了对话系统的有效性。