如今,技术进步使得信息沟通方式愈发多样,翻译活动也由此变得更为复杂。在翻译过程中,尤其在电影字幕翻译过程中,译者除需考虑语言内容外,还需考虑其他内容沟通方式,如画面(视觉模态)、声音(听觉模态)等,这些模态在呈现电影的含义方面,有时起着不亚于语言模态的重要作用。本文旨在进一步探讨Dicerto(2018)的多模态动态文本分析框架,并分析多模态理论在字幕翻译中的作用。通过自建语料库分析对比电影《寻梦环游记》英文与中文字幕的多模态关系,并以80名国内中学生为研究对象进行观众接受研究实验,本文基于实证证据认为,字幕翻译的最终目的,是在译文中重建出新的与电影画面的关联关系。本文的小型语料库分析表明,在电影《寻梦环游记》的文字与画面关系中,互补性的关系要多于对等性的关系,即电影里文字含义的传达,更多地依靠视觉信息来补充。电影中的字幕和画面在很大程度上是互补的关系。在观众接受实验中,本文提出了六个假设,涉及观众对字幕电影的理解、认知负荷以及对字幕与画面一致性的感知共三个方面。实验发现,在目标字幕中增加“apposition”(同位)关系,即增加一些额外的描述性信息,不仅能增进观众对电影的理解,而且不会增加观众的认知负荷,也不会影响观众对字幕与画面一致性的感知。此外,在目标字幕中减少“exophora”(外指)关系,即减少一些指代性的信息,并不会阻碍观众对字幕内容的理解,但也不会显著减轻观众的认知负荷,或影响其对字幕画面一致性的感知。字幕翻译所面向的,是不同于原语境的受众,译者可改变电影中原有的字幕多模态关系及推断含义,从而实现观众与字幕之间的最佳关联性。