论文部分内容阅读
随着现代技术的发展,人们使用的交际模态和交际媒体发生了很大变化。人类交际不再是语言独尊的局面,而是由多种模态来共同完成的,包括空间、手势、凝视、身势、移动、音乐、三维事物、口语、书面语、图像、图表等(Baldry&Thibault,2006; O’Hallaran,2004)。这种运用听觉、视觉、触觉等多种感觉,运用语言、图像、声音、动作等多种符号资源进行交际的现象就是多模态话语(张德禄,2009a:24)。近二十年来,国内外许多学者一直密切关注多模态话语分析研究,他们从语言学领域或者语言学之外的其它很多领域对其进行研究。但是,在众多语言学学派的研究方法中,由韩礼德所创立的系统功能语言学所提出的‘社会符号’视角成为主流的研究方法。但是目前多模态话语研究还处于初级阶段,在中国更是如此。大多数的多模态话语研究主要是以Kress和van Leeuwen的视觉语法为理论依据,集中对二维静态多模态语篇进行研究,例如对图画,图形,图表的研究等等。只有极少数的研究是关于动态多模态语篇或者三维静态语篇的,例如对课堂教学,电影,建筑的研究等等。20世纪90年代以来,系统功能符号学者(Lemke,1998; Baldry,2000; Kress&Van Leeuwen,2001; O’Hallaran,2005a,2005b; Martinec&Salway,2005; Baldry&Thibault,2006)开始关注多模态话语中模态间的关系和语法整合问题。尽管目前国内对多模态话语中的不同模态间关系的研究越来越多,但是这些研究仍然存在一些缺陷,缺乏完整性和系统性。大多数的研究集中在对静态多模态话语中模态间的关系的研究上,而对于动态多模态话语中模态间的关系的研究却很少。所以,对动态多模态话语中模态间的协同研究对于多模态话语分析研究的理论,框架和研究方法的完善和发展来说,都有着重要的意义。汉语电视天气预报是一种典型的动态多模态话语。然而,无论是从语言学的研究角度还是从多模态话语分析的研究角度,目前还没有关于汉语电视天气预报的研究。当然,也没有关于汉语电视天气预报多模态话语的模态协同研究和适用于这类动态多模态话语的系统的理论框架的研究。所以,本文关于汉语电视天气预报语篇类型的动态多模态话语的模态协同研究具有重要的意义。它能完善和发展多模态话语分析研究的理论框架和研究方法并且填补多模态话语分析研究在此领域的空白。张德禄(2009a)基于系统功能语言学理论,结合Lim(2004:220-246)在研究图画与语言形成的多模态话语时提供的综合性多符号模式框架,提出了由文化层面、语境层面、内容层面和表达层面四个层面组成的多模态话语分析综合理论框架。为了便于分析电视天气预报语篇,我们参照这个综合理论框架,设计出了动态多模态话语分析框架。并且,我们在互联网上搜集了28篇CCTV1晚间电视天气预报的视频作为研究的语料。此外,我们还基于张德禄(2010c)提出的对录像等动态多模态语篇进行切分三个标准:(1)语篇结构(2)经验意义(3)前景化的事物和特征探讨了视频录像等动态多模态话语的转写方法。通过这种切分方法可以把动态多模态语篇切分成不同层次的分析单位:‘阶段’、‘情节’和‘事件’。为了便于研究电视天气预报多模态话语体裁的语言典型符号分布特征和语料库中不同类型的模态协同关系的研究,‘事件’被定义为最小的动态多模态话语分析的意义单位。本文基于已经探讨的动态多模态话语分析框架和研究方法对28篇CCTV1晚间电视天气预报进行多模态话语分析从而可以发现电视天气预报多模态话语中的模态协同关系和不同模态之间的配合和协同的基本原则。这项研究可以分为两个阶段,第一阶段分析是第二阶段分析的基础,同时后者有效地弥补了前者的不足。在第一阶段,本文采取定量研究和定性研究相结合的研究方法,对已经被以‘事件’为最小意义单位的进行转写的28篇CCTV1晚间电视天气预报动态多模态语篇进行多模态话语分析,旨在探明该体裁中的典型符号分布特征和不同模态间的协同关系的分布特征。在第二阶段,本文基于第一阶段的研究结果,在动态多模态话语分析理论框架内,探讨在电视天气预报多模态话语中的模态协同规律和原则,即不同的模态是怎样相互作用、相互配合来实现话语意义和它为什么会是这样。根据这两个阶段的分析,本研究得出以下结论:第一、在电视天气预报多模态话语中,因需在不同的阶段实现不同的交际目标而选择各类不同的交际模态。在不同的交际阶段为实现不同的交际目标而采用的不同多模态话语交际模式可以分为三种类型:提示开始结束型、提供信息型和求取注意型。其中提示开始结束型又包括提示开始型和提示结束型;提供信息型包括导入型、提供进行中转入提供暂停型和提供进行中转入提供结束型。第二、通过探讨听觉模态和视觉模态之间的协同关系发现,由语言媒体所形成的听觉模态是主模态,视觉模态对听觉模态进行补缺、强化,二者形成互补或者非互补关系。听觉模态和身体媒体所形成的视觉模态之间的协同关系包括强化类型的互补关系和非强化类型的互补关系。听觉模态和非身体媒体所形成的视觉模态之间的协同关系包括强化类型的互补关系、非强化类型的互补关系和情景交互类型的非互补关系。第三、在听觉模态和视觉模态所形成的模态协同关系中互补关系占有最高的比例。互补关系在听觉模态和身体媒体所形成的视觉模态所形成的协同关系中所占的比例是78.64%,在听觉模态和非身体媒体所形成的视觉模态之间的协同关系中所占的比例是77.04%。在听觉模态和非身体媒体所形成的视觉模态之间的协同关系中,情景交互类型的非互补关系所占的比例次之,是22.96%。在听觉模态和非身体媒体所形成的视觉模态之间的协同关系中,无效的视觉模态所占的比例最少,是21.37%。第四、在整个交际过程中,听觉模态是主模态,主导交际进程,始终处于前景化的位置。这是因为听觉模态是线性模态,只能根据时间向前推进,这符合信息获取循序渐进的特点,同时对一些特殊的信息进行突出、强化或者弱化;进行前景化或者背景化。当听觉模态和视觉模态所形成的模态关系为互补关系时,视觉模态处于前景化的位置。当听觉模态和视觉模态之间的协同关系是强化类型的互补关系时,身体媒体所形成的视觉模态或者非身体媒体所形成的视觉模态处于前景化的位置。当听觉模态和视觉模态之间的协同关系是非强化类型的互补关系时,身体媒体所形成的视觉模态和非身体媒体所形成的视觉模态都处于前景化的位置。当听觉模态和非身体媒体所形成的视觉模态之间的协同关系为情景交互类型的非互补关系时,视觉模态处于背景化的位置。总之,本文探讨了动态多模态话语分析框架和动态多模态话语的转写等研究方法;并且研究了CCTV1晚间电视天气预报多模态话语中的模态协同关系的分布特征;此外,还研究了在CCTV1晚间电视天气预报多模态话语中的模态协同规律和原则,即不同的模态是怎样相互作用、相互配合来实现话语意义和它为什么会是这样。它不仅在理论和应用上丰富了和发展了多模态话语分析研究,还为动态多模态话语分析的研究提供了新的视角。