通过广告宣传产品是在有限时间内迅速提升品牌认知度、增加价值的有效方式,这一研究主题让越来越多的学者投身于这一领域进行研究。从语言学角度出发,有研究发现,隐喻在广告研究中起着至关重要的作用。广告隐喻能让信息更具吸引力和创造性,改变消费者想法,甚至可以增强其购买意愿。但这一领域的研究仍然颇具争议,如不同模态在广告中的交互作用研究仍有不足。在关联理论、多模态隐喻理论以及多模态隐喻构建下的概念整合模型指导下,本论文采用包含三个部分的行为实验,探究语言参照和图像隐喻之间的交互作用,其中研究重点为文字参照如何影响广告隐喻加工。本实验的第一部分旨在研究哪一模态将会被先加工。其结果表明:在同等条件下,识别图片隐喻的速度明显快于识别文字隐喻的速度。本实验的第二部分主要研究在相同广告图片隐喻中,添加和不添加文字参照产生的效果差异。结果表明,尽管不添加文字参照的图片隐喻广告反应时更短,但添加文字参照更有助于被试理解和喜爱广告内容。本实验的第三部分通过对比三种不同类型的广告隐喻,研究不同的文字参照如何影响广告图片隐喻的加工。结果显示含有本义文字参照的广告图片隐喻获得了最积极的认知效果。此外,中等新颖性条件下,含有本义文字参照的图片隐喻广告,在认知和情感两个方面加工效果为最佳。较以前的研究,本文引入新颖度测量对图片隐喻进行分析,得到更为精确的结果。这一研究不仅丰富认知语言学和广告学现有的多模态隐喻理论框架,还为广告主和制造商,在图片隐喻和各类语言参照设计方面为多模态广告找到了有效的择优文图匹配方案,有助于广告公司在市场竞争中占有一席之地。