论文部分内容阅读
摘要：在信息科技快速发展的背景下，语言不再是社会交际的唯一渠道。人们能够通过图表、图像、书面语、音乐、移动、手势、空间等多种模特，来实现信息的交流与传播。对此，本文将TED演讲为语篇媒介，应用多模态分析框架与系统框架，探究多模态语篇的协同关系。从而为多模态语篇的应用与发展，提供全新的发展渠道和依据。
关键词：TED演讲;多模态语篇;模态协同
引言
科技的发展与应用，促使语言交流的形态与方式发生转变，从而建构出全新的社会交际形态。而多模态话语主要指通过“触觉”、“视觉”、“听觉”等多种感官，以“动作”、“声音”、“图像”、“语言”等符号资源来进行社会交际的现象。将多模态分析框架与系统框架纳入到语篇分析中，能够切实探究出不同模态的协同关系和内涵，提高语言交际的时效性与有效性。然而要实现既定的研究目的，还需要拥有相应的理论基础。
一、多模态语篇分析的理论基础
首先是多模态分析框架。多模态话语是融入多种感官，以“语言”、“动作”、“声音”等多种形式，实现语言交流与文化交流的特殊状态。Lim与Martin在功能语言与画面语言研究中，从“表达”、“内容”、“语境”等层面提出了多模态分析框架，并使多模态语篇中的不同模态，清晰地呈现在研究者的面前。其次是系统框架。胡壮麟先生将语类语篇划分为“音响/色彩”、“图表”、“图像”、“点句”等基本类型，并指出点句的功能是帮助演讲者更好地“突出重点”、“组织思路”。而图像的功能是将信息完整地呈现在观众面前，使其加深对演讲信息的理解和认识。而图表能够通过帮助受众更好地分析和理解演讲信息。至于音响/色彩，则拥有较强的劝诱功能，使受众能够融入到演讲者所营造的氛围中。
二、TED的多模态话语
TED是美国著名的非盈利机构，其宗旨是“呈现值得推广与传播的想法与创意”，在诞生以来，便获得美国社会各界的欢迎和推崇。其中TED是由“设计”、“娱乐”、“科技”三个单词构成，并结合社会发展特点，延伸自身所涵盖的领域。在传播形式上，TED主要以演讲者语言展示与PPT表达的方式，为观众提供演讲。因此在演讲的表现形式和呈现方式上，TED演讲拥有较为鲜明的模态化特征，譬如“动作”、“表情”、“音效”、“图表”等。而在现代科技健康发展的背景下，TED的受众除电视观众外，还包括大量的网络观众，使演讲的广度與宽度得到了极大的延伸。而在内容层面上，TED演讲属于典型的学术演讲，通常包括设想“提出环节”、“描述环节”及“畅想环节”等环节。刘娜（2020）从系统框架的角度出发，将演讲划分为语式、语旨、语场等部分。因此我们可以根据其研究成果将TED演讲语篇划分为：（1）语旨：观众及演讲者;（2）语场：演讲的主要内容;（3）语式：演讲的传播方式与展现形式。其中TED语式包括身体媒介（“移动”、“姿势”、“手势”、“眼神”、“表情”）、语言媒介（严谨而幽默的英语口语）、其他媒介（“场地布局”、“PPT”）等。
三、TED多模态语篇的模态协同
为探究TED多模态语篇的协同关系，我们需要从听觉模态与场地布局的角度出发，循序渐进地探究听觉模态与演讲者视觉模态、听觉模态与ppt视觉模态的协同关系。首先是场地布局与听觉模态。（1）场地布局。通常来讲TED演讲场地的布局较为鲜明简单，除TED标志、LED显示屏、演讲者区域外，并无其他装饰性元素。这样演讲者便能在讲台布局与环境营造的烘托下，成为台下观众的视觉中心，能够使观众的注意力集中到演讲者的身上。（2）听觉模态。听觉模态属于典型的线性模态，能够通过时间的推移，呈现出更多、更全面的信息。然而在听觉模态的建构上，TED能够通过场地布局的方式，烘托和渲染演讲者的声音，使声音形成一种围绕观众的音域，进而为演讲者呈现更多的语言信息。其次是模态间的模态协同。（1）听觉模态与演讲者视觉模态。演讲者在演讲的过程中，需要通过视觉模态来强化或补充自己的话语，使语篇所呈现的内涵得到更有效、更全面地呈现和展示。由于听觉模态是信息呈现的载体。因此演讲者的手势和动作，通常在声音模态或信息呈现中发挥除相应的辅助作用。根据相关的语篇分析，我们可以将演讲者的手势划分为以下两大功能。其一是借助手势描绘所传达信息的概念或形态。譬如演讲者用多个短语阐述化学工具箱制作的过程时，话语和动作的同落同起，使观众在脑海中形成相应的制作画面。其二是强调节奏，演讲者的“手臂摆动”、“抬起幅度”，能够帮助自己更好地把握语言的“快慢”、“节奏”及“语调”，使语言更加铿锵有力。（2）听觉模态与ppt视觉模态。TED演讲语篇拥有较强的专业性和学术性特征。而要想全面而通俗地传达信息，就需要借助“图形”、“音效”及“表格”的方式，深化观众对声音模态的理解。因此，在某种程度上，ppt模态的功能价值集中体现在对声音模态内涵及内容的描述与生活上，譬如ppt上的“点句”能够补充声音模态没有阐述的内容，使观众能够对演讲者所谈及的内容或事件，有更深入地理解和认识。而图像与点句的有机结合，又能强化演讲者所演讲的内容，加深观众对声音模态所呈现内容的理解。总而言之，在多模态协同分析的过程中，我们能发现声音模态是TED演讲的主模态，贯穿栏目的始终。而PPT和演讲者的视觉模态是对听觉模态的描述、强化及补充，可以通过协同交互的方式，提升听觉模态的信息传播质量与效率。
四、结语
在探究TED演讲多模态语篇中的模态协同时，我们需要结合分析框架与系统框架两大理论成果，通过明确TED演讲语篇的多模态“特征”、“结构”等方式，更好地从听觉模态、场地布局与视觉模态等角度出发，明确视觉模态在听觉模态中的价值，探究两者的协同关系，从而为学者及专家更好地探究多模态要素的协同价值，提供支持。
参考文献
[1]刘睿，张德禄.通过自我评价提升多模态语篇构建能力的行动研究——以英语专业学生口头报告为例[J].中国外语教育，2016，903：29-36+95.
[2]刘娜.及物性视角下环境类TED演讲的生态话语分析[J].湖北第二师范学院学报，2020，3707：18-23.
[3]刘娣.TED视频辅助大学英语视听说多模态教学模式探析[J].科技视界，2019，24：115-116.
作者简介：杨亚萍（1980.12.1-），女，汉，北京科技大学硕士研究生，石家庄铁道大学讲师，研究方向为概念隐喻，多模态。
基金项目：基于TED语料库的言语-手势多模态隐喻的概念整合研究，河北省教育厅项目，SQ201175）.
（石家庄铁道大学 河北 石家庄 050043）
关键词：TED演讲;多模态语篇;模态协同
引言
科技的发展与应用，促使语言交流的形态与方式发生转变，从而建构出全新的社会交际形态。而多模态话语主要指通过“触觉”、“视觉”、“听觉”等多种感官，以“动作”、“声音”、“图像”、“语言”等符号资源来进行社会交际的现象。将多模态分析框架与系统框架纳入到语篇分析中，能够切实探究出不同模态的协同关系和内涵，提高语言交际的时效性与有效性。然而要实现既定的研究目的，还需要拥有相应的理论基础。
一、多模态语篇分析的理论基础
首先是多模态分析框架。多模态话语是融入多种感官，以“语言”、“动作”、“声音”等多种形式，实现语言交流与文化交流的特殊状态。Lim与Martin在功能语言与画面语言研究中，从“表达”、“内容”、“语境”等层面提出了多模态分析框架，并使多模态语篇中的不同模态，清晰地呈现在研究者的面前。其次是系统框架。胡壮麟先生将语类语篇划分为“音响/色彩”、“图表”、“图像”、“点句”等基本类型，并指出点句的功能是帮助演讲者更好地“突出重点”、“组织思路”。而图像的功能是将信息完整地呈现在观众面前，使其加深对演讲信息的理解和认识。而图表能够通过帮助受众更好地分析和理解演讲信息。至于音响/色彩，则拥有较强的劝诱功能，使受众能够融入到演讲者所营造的氛围中。
二、TED的多模态话语
TED是美国著名的非盈利机构，其宗旨是“呈现值得推广与传播的想法与创意”，在诞生以来，便获得美国社会各界的欢迎和推崇。其中TED是由“设计”、“娱乐”、“科技”三个单词构成，并结合社会发展特点，延伸自身所涵盖的领域。在传播形式上，TED主要以演讲者语言展示与PPT表达的方式，为观众提供演讲。因此在演讲的表现形式和呈现方式上，TED演讲拥有较为鲜明的模态化特征，譬如“动作”、“表情”、“音效”、“图表”等。而在现代科技健康发展的背景下，TED的受众除电视观众外，还包括大量的网络观众，使演讲的广度與宽度得到了极大的延伸。而在内容层面上，TED演讲属于典型的学术演讲，通常包括设想“提出环节”、“描述环节”及“畅想环节”等环节。刘娜（2020）从系统框架的角度出发，将演讲划分为语式、语旨、语场等部分。因此我们可以根据其研究成果将TED演讲语篇划分为：（1）语旨：观众及演讲者;（2）语场：演讲的主要内容;（3）语式：演讲的传播方式与展现形式。其中TED语式包括身体媒介（“移动”、“姿势”、“手势”、“眼神”、“表情”）、语言媒介（严谨而幽默的英语口语）、其他媒介（“场地布局”、“PPT”）等。
三、TED多模态语篇的模态协同
为探究TED多模态语篇的协同关系，我们需要从听觉模态与场地布局的角度出发，循序渐进地探究听觉模态与演讲者视觉模态、听觉模态与ppt视觉模态的协同关系。首先是场地布局与听觉模态。（1）场地布局。通常来讲TED演讲场地的布局较为鲜明简单，除TED标志、LED显示屏、演讲者区域外，并无其他装饰性元素。这样演讲者便能在讲台布局与环境营造的烘托下，成为台下观众的视觉中心，能够使观众的注意力集中到演讲者的身上。（2）听觉模态。听觉模态属于典型的线性模态，能够通过时间的推移，呈现出更多、更全面的信息。然而在听觉模态的建构上，TED能够通过场地布局的方式，烘托和渲染演讲者的声音，使声音形成一种围绕观众的音域，进而为演讲者呈现更多的语言信息。其次是模态间的模态协同。（1）听觉模态与演讲者视觉模态。演讲者在演讲的过程中，需要通过视觉模态来强化或补充自己的话语，使语篇所呈现的内涵得到更有效、更全面地呈现和展示。由于听觉模态是信息呈现的载体。因此演讲者的手势和动作，通常在声音模态或信息呈现中发挥除相应的辅助作用。根据相关的语篇分析，我们可以将演讲者的手势划分为以下两大功能。其一是借助手势描绘所传达信息的概念或形态。譬如演讲者用多个短语阐述化学工具箱制作的过程时，话语和动作的同落同起，使观众在脑海中形成相应的制作画面。其二是强调节奏，演讲者的“手臂摆动”、“抬起幅度”，能够帮助自己更好地把握语言的“快慢”、“节奏”及“语调”，使语言更加铿锵有力。（2）听觉模态与ppt视觉模态。TED演讲语篇拥有较强的专业性和学术性特征。而要想全面而通俗地传达信息，就需要借助“图形”、“音效”及“表格”的方式，深化观众对声音模态的理解。因此，在某种程度上，ppt模态的功能价值集中体现在对声音模态内涵及内容的描述与生活上，譬如ppt上的“点句”能够补充声音模态没有阐述的内容，使观众能够对演讲者所谈及的内容或事件，有更深入地理解和认识。而图像与点句的有机结合，又能强化演讲者所演讲的内容，加深观众对声音模态所呈现内容的理解。总而言之，在多模态协同分析的过程中，我们能发现声音模态是TED演讲的主模态，贯穿栏目的始终。而PPT和演讲者的视觉模态是对听觉模态的描述、强化及补充，可以通过协同交互的方式，提升听觉模态的信息传播质量与效率。
四、结语
在探究TED演讲多模态语篇中的模态协同时，我们需要结合分析框架与系统框架两大理论成果，通过明确TED演讲语篇的多模态“特征”、“结构”等方式，更好地从听觉模态、场地布局与视觉模态等角度出发，明确视觉模态在听觉模态中的价值，探究两者的协同关系，从而为学者及专家更好地探究多模态要素的协同价值，提供支持。
参考文献
[1]刘睿，张德禄.通过自我评价提升多模态语篇构建能力的行动研究——以英语专业学生口头报告为例[J].中国外语教育，2016，903：29-36+95.
[2]刘娜.及物性视角下环境类TED演讲的生态话语分析[J].湖北第二师范学院学报，2020，3707：18-23.
[3]刘娣.TED视频辅助大学英语视听说多模态教学模式探析[J].科技视界，2019，24：115-116.
作者简介：杨亚萍（1980.12.1-），女，汉，北京科技大学硕士研究生，石家庄铁道大学讲师，研究方向为概念隐喻，多模态。
基金项目：基于TED语料库的言语-手势多模态隐喻的概念整合研究，河北省教育厅项目，SQ201175）.
（石家庄铁道大学 河北 石家庄 050043）