自20世纪90年代以来,基于韩礼德的系统功能语言学、语篇分析的研究得到扩展,开始关注除文本之外的其他因素。语言是沟通交流的重要工具,但它并不是唯一的工具。随着越来越多的非语言模态应用于信息交流,语言的主导地位也随之受到了挑战。换句话说,话语分析已经从原来的单模态分析转向多模态分析。本研究就是从认知视角出发,应用多模态理论分析图画书的翻译问题。多模态理论认为语言是一种社会符号,意义不仅可以通过语言模态传达,而且可以通过其他非语言模态传达,因此这些非语言模态和语言模态一样具有同等的意义建构能力。在图画书中,有文字和图画两种模态存在,是语言文本和非语言的视觉文本的综合体,因此图画书属于多模态性质。因此在图画书翻译过程中,文字模态和非语言的视觉模态之间的相互作用很值得研究,这两种模态之间的关系如何,又是如何影响译者的翻译过程的。首先,本研究旨在解释译者的原文阅读理解过程,以期从认知视角对多模态文本翻译的原文理解阶段提供一些启示。其次,本研究通过介绍并比较两种不同的多媒体学习理论模型,即多媒体认知学习理论和图文整合认知理论,探究了多模态文本的译者在翻译过程中如何处理两种不同的模态并从中获取信息从而决定采用何种翻译策略的。通过研究本文认为,作为多模态文本,图画书的译者在翻译过程中既需要处理语言模态又需要处理非语言模态(图画),而这两种不同模态之间是相互影响的,译者最终的翻译策略选择是基于这两种模态的相互关系中做出的。而文字和图画之间的关关系存在三种情况,详述、扩展和加强。为了实现译文内容最大程度的连贯,针对不同的图文关系译者应该采取不同的翻译策略,实现语言文本和图画内容的契合。通常情况下,面对多模态之间的关系译者常采用的翻译策略有“压缩(或省略)”、“增添(或补充)”以及“转化”。因此,在以后的图画书翻译过程中,译者必须予以图画足够的重视,不能只翻译文字不顾及图画,当图文关系不契合时,译者应该积极采取相应的翻译策略实现译文内容的连贯一致。