图片新闻意义建构的多模态话语分析
第３２卷第１０期 ２０１０年１０月 宜春学院学报 Ｊｏｕｒｎａｌ ｏｆ Ｙｉｃｈｕｎ ＣｏＵｅｇｅ ＶｏＬ ３２，Ｎｏ．１０ ０ｃｔ．２０１０
图片新闻意义建构的多模态话语分析
杨丽姜，朱嫣然 杨阴妾，禾嫡然
（浙江师范大学外国语学院，浙江金华３２１００４）
摘要：图片新闻作为一种多模态话语，英印刷版式和图片与语言一样，对意义建构起着至关重要的作用。 以往对新闻话语的研究大多聚焦在文本层面，印刷版式和图像作为意义建构的重要手段没有引起足够的关注，从 多模态角度研究新闻话语意义建构的文献则更少。为此，我们试以新中国成立６ｏ周年国庆庆典的图片新闻为语 料，从文本、印刷版式、视觉图像三种模态探讨图片新闻的意义建构，旨在说明图像和印刷版式与文本一样可以 建构新闻意义。 关键词：多模态话语分析；意义建构；文本；印刷版式；视觉图像 中图分类号：Ｇ２ｏ６文献标识码：Ａ文章编号：１６７１—３８０Ｘ（２０１０）１０—０１２９一ｏ３
Ｍｅａｎｉｎｇ Ｃｏｎｓｔｒｕｃｔｉｏｎ ｏｆ Ｐｈｏｔｏ Ｎｅｗｓ：Ａ Ｍｕｌｔｌｍｏｄａｌ￣ｕｒｓｅ Ａｎａｌｙｓｉｓ Ａｐｐｒｏａｃｈ ＹＡＮＧ Ｌｉ—ｊｉａｎｇ，ＺＨＵ Ｙａｎ—ｌａＢ （Ｃｏｌｌｅｇｅ ｏｆ￣ｒｅｉｇｎ Ｌａｎｇｕａｇｅｓ，Ｚｈｅ．ｉｉａｎｇ Ｎｏｒｍａｌ Ｕｎｉｖｅｒｓ ；Ｊｉｎｈｕａ ３２１００４，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：Ｔｙｐｏｇｒａｐｈｙ，ｖｉｓｕａｌ ｉｍａｇｅ，ａｓ ｗｅｌｌ ａｓ ｔｅｘｔ，ｐｌａｙ ｃｒｕｃｉａｌ ｒｏｌｅｓ ｉｎ ｍｅａｎｉｎｇ ｃｏｎｓｔｒｕｃｔｉｏｎ ｏｆ ｎｅｗｓ．Ｔｈｅ ｐｒｅｖｉｏｕｓ ｓｔｕｄｉｅｓ ａｂｏｕｔ ｎｅｗｓ ｄｉｓｃｏｕｒｓｅ ｆｏｃｕｓ ｍａｉｎｌｙ ｏｎ ｔｅｘｔ ａｎａｌｙｓｉｓ．Ｌｉｔｔｌｅ ａｔｔｅｎｔｉｏｎ ｈａｓ ｂｅｅｎ ｐａｉｄ ｔｏ ｔｈｅ ｎｅｗｓ ｔｙｐｏｇｒａｐｈｙ ａｎｄ ｖｉｓｕａｌ ｉｍａｇｅ，ａｎｄ ｔｈｅｒｅ ｉｓ ｌｅｓｓ ｗｏｒｋ ｏｎ ｍｕｈｉｍｏｄａｌ ａｎａｌｙｓｉｓ ｏｆ ｎｅｗｓ ｄｉｓｃｏｕｒｓｅ．Ｂａｓｅｄ Ｏ１＇１ ａ ｐｉｅｃｅ ｏｆ ｐｈｏｔｏ ｎｅｗｓ ｏｆ ｔｈｅ ６０ｔｈ Ａｎｎｉｖｅｒｓａｒｙ ｏｆ Ｃｌｌｉｎａ售Ｎａｔｉｏｎａｌ Ｄａｙ Ｃｅｌｅｂｌａ－ ｔｉｏｎ，ｗｅ ａｔｔｅｍｐｔｓ ｔｏ ｓｔｕｄｙ ｈｏｗ ｔｈｅ ｍｅａｎｉｎｇｓ ｏｆ ｐｈｏｔｏ ｎｅｗｓ ｃｏｎｓｔｒｕｃｔ ｆｒｏｍ ｔｈｒｅｅ ｍｏｄｅｓ：ｔｅｘｔ，ｔｙｐｏｇｒａｐｈｙ ａｎｄ ｖｉｓｕａｌ ｉｍａｇｅ．Ｔｈｅ ｆｉｎｄ－ ｉｎｇｓ ｓｈｏｗ ｔｈａｔ，ｌｉｋｅ ｔｅｘｔ，ｔｙｐｏｇｒａｐｈｙ ａｎｄ ｖｉｓｕａｌ ｉｍａｇｅ ｃａｎ ｃｏｎｔｒｉｂｕｔｅ ｇｒｅａｔｌｙ ｔｏ ｔｈｅ ｍｅａｎｉｎｇ ｃｏｎｓｔｒｕｃｔｉｏｎ ｏｆ ｎｅｗｓ． Ｋｅｙ ｗｏｒｄｓ：ｍｕｈｉｍｏｄａｌ ｄｉｓｃｏｕｒｓｅ ａｎａｌｙｓｉｓ；ｍｅａｎｉｎｇ ｃｏｎｓｔｒｕｃｔｉｏｎ；ｔｅｘｔ；ｔｙｐｏｇｒａｐｈｙ；ｖｉｓｕａｌ ｉｍａｇｅ
随着现代化技术的发展，新闻不再仅限于文字形式， 而是配之以图片，并为之选择恰当的版面，即以多模态的 形式出现。这样不但可以吸引读者的眼球，而且有助于新 闻意义的建构。多模态话语分析是近年来出现的一种比较 前沿的迅速发展的话语研究方向。这一研究路径认为文本 和交互中的意义建构依赖于多模态符号资源的相互作用， 除语言外，其它模态如图像、声音、颜色等在意义建构中 同样起作用¨］（聊）。多模态话语分析理论能很好地解读图片 新闻的制作及图片新闻话语意义的建构，也是分析新闻话 语的一种新的尝试。 一、多模态话语分析 多模态话语分析指对一个语篇或一个交际事件的几个 或所有不同符号模态（如文本、图象、印刷版式）的分析。 在多模态话语分析产生之前，有关话语分析的研究大多都 局限于语言系统，忽视了图象、声音、颜色等意义资源。 多模态话语分析很大程度上克服了此局限，它将语言和其 他相关的意义资源整合起来，不仅看到语言系统在意义交 换中发挥的作用，而且可以看到其他符号系统在这个过程 中产生的效果，从而使话语意义的解读更全面、准确。 Ｋｒｅｓｓ和Ｌｅｅｕｗｅｎ开创了多模态话语分析这一研究领域，他 们系统地解释了视觉语法，建立了视觉交流基于社会符号 学的多模态分析基础 “）。随之，有关多模态话语分析 的研究不断涌现。比如，Ｂｈａｔｉａ等探讨了多模态视角下个人 身份的建构和运用多模态分析方法研究课堂中的互动行 为…（Ｈ２９－１６０）ｏ Ｊｅｓ Ｍｏｙａ ＧＩｌｉｉａｌＴＯ＆Ｍａｒｉａ Ｊｅｓｆｓ Ｐｉｎａｒ Ｓａｎｚ 探讨了书面语言、口头语言及视觉图像如何创造并建构意 义 ］‘ 鲫Ｉ１ 。王红阳以Ｋｒｅｓｓ＆ｖａｎ Ｌｅｅｕｗｅｎ的视觉语法 为框架，从多模态角度分析了广告语篇互动意义的建构和 体现［ ㈣。－３４），还对诗人卡明斯的诗“１（ａ”从语言和印 刷版式（ｔｙｐｏｇｒａｐｈｙ）两个方面做了多方位的功能解读，证 实了从不同角度分析和欣赏诗歌的可行性【６】（ ）。韦琴 红从多模态视角分析媒体语篇，说明了其它符号系统和语 言一样具有多功能性＂】（ｎ ”。文献检索与分析表明，国 外多模态话语分析的研究已很成熟，国内还处于起步阶段， 且相关研究大多基于语言层面，涉及印刷版式、视觉图片
收稿日期：２０１０—０８—０８ 作者简介：杨丽姜（１９８５一），女，江西新余人，浙江师范大学外国语学院在读硕士研究生，主要从事话语分析研究。 ・１２９・
第１Ｏ期 宜春学院学报（社会科学） 第３２卷 等模态的不多。本文以一则中国成立６０周年国庆庆典的图 片新闻为例，试图从分析文本、印刷版式及视觉图像三种 模态如何建构并体现新闻意义。 二、图片新闻的意义建构 新闻话语（包括文字、图片、声音等）是对真实事件 的再现，并非对世界完全客观的反映，而是利用新闻的制 作手段与编辑技术，使用程式化的规则，对社会现象进行 局部反映和解释，是一种典型的编码（ｅｎｃｏｄｉｎｇ）过 程 脚）。本文语料即ＤＡＹ ＯＦ ＧＬＯＲＹ—Ｎｅｗ Ｃｈｉｎａ ｓｈｏｗｓ ｉｔｓ ｐｒｉｄｅ ｔｏ ｔｈｅ ｗｏｄｄ源于Ｃｈｉｎａ Ｄａｉｌｙ。这是一则庆祝中华人 民共和国成立６ｏ周年国庆庆典阅兵仪式之前，国家主席胡 锦涛检阅受阅部队时的图片新闻。由于版面有限，图片详 见２００９年１Ｏ月２日Ｃｈｉｎａ Ｄａｉｒｙ头版。此新闻主要以文本、 印刷版式和视觉图像三种模态建构并体现新闻意义。 （一）文本 Ｈａｌｌｉｄａｙ归纳概括了语言的普遍特征，把语言的纯理功 能（ｍｅｔａｆｕｎｃｔｉｏｎ）分成三种，即概念，人际和语篇功能 。由 于新闻的主要目的是传递信息，所以建构的意义更多体现在 人际意义上。本文所选新闻在语言上，只有一个主标题—— ＤＡＹ ＯＦ ＧＬＯＲＹ，一个副标题——Ｎｅｗ Ｃｈｉｎａ ｓｈｏｗｓ ｉｔｓ ｐｒｉｄｅ ｔｏ ｔｈｅ ｗｏｒｌｄ，以及照片下面的文字说明——Ｃｈｉｎｅｓｅ Ｐｒｅｓｉｄｅｎｔ ａｎｄ Ｃｈａｉｒｍａｎ ｏｆ ｔｈｅ Ｃｅｎｔｒａｌ Ｍｉｌｉｔａｒｙ Ｃｏｍｍｉｓｓｉｏｎ Ｈｕ Ｊｉｎｔａｏ ｉｎ— ｓｐｅｅｔｓ ｔｈｅ ｄｅｆｅｎｓｅ ｆｏｒｃｅｓ ｂｅｆｏｒｅ ｔｈｅ ｍａｓｓｉｖｅ Ｎａｔｉｏｎａｌ Ｄａｙ Ｐａｒａｄｅ ｙｅｓｔｅｒｄａｙ ｉｎ Ｂｅｉｊｉｎｇ，但这简洁的文字蕴含了深刻的含义。 用“ＤＡＹ ＯＦ ＧＬＯＲＹ”作正标题，没有主位和述位， 也没有目标对象，单纯描述中国的现状一中国的今天是辉 煌灿烂的。主标题看似不带感情色彩，也无任何意识形态， 但是“ｇｌｏｒｙ”本身是褒义词，蕴含对中国的赞扬。副标题 “Ｎｅｗ Ｃｈｉｎａ ｓｈｏｗｓ ｉｔｓ ｐｒｉｄｅ ｔｏ ｔｈｅ ｗｏｒｌｄ”。句中采用“ｎｅｗ Ｃｈｉｎａ”而非“Ｃｈｉｎａ”，其中“ｎｅｗ”具有强烈的言外之意， 不仅指１９４９年１Ｏ月１日至今这一时期地理上的中国，还暗 含中国的成就大部分于新中国成立后短短的６０年中取得， 这在很多国家看来不可思议，而正是这样才值得骄傲，才 值得向世界展示。“ｐｒｉｄｅ”也是褒义词，不仅表示中国取得 的进步令人自豪和骄傲，还暗含这些成就是在社会主义制 度下取得的，证明中国选择走社会主义道路的正确性，反 映了党和国家的决策能力。“ｐｒｉｄｅ”指向“ｔｈｅ ｗｏｒｌｄ”而非 仅局限于中国。标题语言简洁，但字里行间都表现出新中 国成立至今，政治、经济、文化、军事等方面都取得了令 人瞩目的成就。这些成就不仅要让全中国人知道，更要向 全世界展现，以告诉世界中国的强大、神圣不可侵犯。最 后，图片的文字说明交代新闻的要素即时间、地点、人物、 事件。图片选择胡锦涛主席检阅国防军队这一时刻有其内 涵，因为国防军队的强弱关系到国家的统一、领土的完整 等。这些细节的选择与安排无形中建构新闻意义。 （二）印刷版式 印刷版式指版面的设计与安排，包括文字、图片、线 ・１３０・ 条在版面上的空间布置，颜色的选择等，也可以建构意义。 印刷版式是一种符号模态，结合其他符号模态建构话语意 义。印刷版式可以表现语篇中人或物的动作和特点（概念 功能）；可以展现互动和表达对所表现事物的态度和感情 （人际功能）；印刷版式还可以区别语篇的组成单位（语篇 功能）［１ｏ３‘ ”。 此新闻置于头版头条，占了近一个版面。版面及篇幅 说明了此新闻的重大性，由新闻的特点（主要是真实性、 时效性和显著性或重要性）决定。这则新闻的真实性毋庸 置疑。事件发生于２００９年ｌ０月１日，次日早上见报，体现 其时效性。关于显著性及重要性，西方新闻界有一个新闻 数学公式，即平常人＋平常事＝０（新闻价值），不平常人 ＋平常事（或不平常事）＝新闻，平常人＋不平常事＝新 闻。这则新闻中人物是国家主席胡锦涛；事件是新中国成 立６０周年国庆庆典，对整个中国来说是一件大喜事，因而 属于公式中的“不平常人＋不平常事”。为了吸引读者的眼 球，使新闻意义得以建构并体现，编辑在颜色、文字等方 面做了设计。由于６０周年国庆是中国的一件大喜事，版面 底色选用喜庆的红色，图片置于版面中间，给读者的感觉、 是中国举国上下充满喜庆、祥和、愉悦的气氛，折射出中 国有福全民共享的特色。字体上，主标题用大写、大字号、 加粗，并选用亮丽的黄色；副标题中用稍小的粗体字，这 样可凸显新闻的重要性，引人注目。 （三）视觉图像 与语言一样，视觉图像也可以再现现实世界中的人、 事、物 】（ 。由于新闻主要是向读者提供信息，是一个和 读者交流的过程，本文主要分析新闻语篇的互动意义是如 何通过视觉图像来实现的。互动意义是指图像的制作者、 图像所表征的人或物和图像的观看者之间的关系，同时提 示观看者对表征事物应持的态度 】（眦’。本文新闻图片庄 严、肃穆，图中国家主席胡锦涛乘坐国产红旗牌检阅车， 身着深色高领中山装，神采奕奕地站立在检阅车中央检阅 国防军队。拥有红旗经典前脸的车牌号为“京Ｖ一０２００９” 的红旗牌轿车是一个建构意义的资源。自１９５９年起，民族 品牌红旗牌轿车成为国庆和重大活动阅兵以及礼宾活动的 专用车，沿用至今，每次车型及性能都有大幅度的升级， 这表明中国继承传统并与时俱进。其中“京Ｖ”是２００４式 军牌，一般是中央军委的车；２００９可以理解为２００９年即中 华人民共和国成立６０周年；前面完整无缺的“０”可以解 释为国家领土完整不受侵犯。胡锦涛主席穿中山装而非军 装，这建构了深刻的意义：一是传承历史，６ｏ年前毛泽东 穿着类似的款式宣布新中国成立，１２次国庆大阅兵中，毛 泽东、邓小平、江泽民均身着深色中山装出席；二是兼容 开放，胡主席的中山装与观礼台上领导人清一色的西装形 成鲜明的对比，即中学为体，西学为用；三是中山装朴素 大方，代表亲民的中国政府形象。检阅车、主席的着装及 其精神面貌折射出：中国传承历史并与时俱进、国家领土
多模态话语意义建构
多模态话语意义建构
多模态话语意义建构是指在交际过程中，通过多种语言和非语言方式来构建意义和传达信息。它涉及到语言、声音、姿势、表情等多种符号系统的结合和协调，以使其具有更丰富、准确和有效地传达意义的能力。在多模态话语中，不同的符号系统相互依存和相互作用，共同构建话语的意义。
在多模态话语中，语言作为主要的符号系统，承担着明确和表达思想的功能。但语言本身并不是唯一的意义来源，其他非语言的符号系统也同样重要。声音是其中一个重要的非语言符号系统，在交际过程中起着补充和增强语言信息的作用。声音可以传达出说话者的情绪、语气和强调等。通过调高或降低音调，可以表达出问句或陈述句的区别；通过改变音量、语速和语调的变化，可以传达出说话者的自信、紧张或急切等感情。
除了声音，身体姿势和表情也是非常重要的非语言符号系统。人们通过身体的动作、姿势和肢体表情来传达信息和情感。通过手势可以表达出一定的意思，比如竖起大拇指表示赞扬，握拳表示愤怒等。面部表情也可以传达出丰富的信息，比如微笑表示友好、开心，皱眉表示不满、疑惑等。
在多模态话语中，不同符号系统之间的协调和互动也是非常重要的。它们相互补充和强化了话语的意义。在阐述一个观点的时候，说话者的语言信息和面部表情可以相互协调，使得观点更加明确和有说服力。通过语言和非语言符号的结合使用，可以创造出更具有感染力和震撼力的话语效果。
多模态话语意义的建构还受到文化和社会背景的影响。不同文化和社会中，符号系统的使用和意义会有差异。所以，对于多模态话语的理解和解读也需要考虑到文化和社会的背景。在一些文化中，点头表示同意或赞同，而在另一些文化中，摇头表示同意或认可。
在实际交际中，多模态话语意义建构的能力对于交际的成功与否具有重要影响。说话者需要有效地运用语言和非语言符号，使话语能够明确地传达出自己的意图和情感。听话者需要综合考虑不同符号系统的信息，并能够正确地理解和解读。在跨文化交际中，双方还需要相互学习和理解对方的符号系统和意义，以减少误解和沟通障碍。
视觉语法视角下多模态话语的互动意义与人物形象建构
17海外文摘OVERSEAS DIGEST海外文摘2020年第16期总第815期No.16,2020Total of 815
在信息时代，语言模态不再是表达意义的唯一途
径。20世纪90年代，多模态话语分析在西方兴起，
学者们开始关注多模态语篇在语言学研究中的重要性。
Kress和Van Leeuwen[1]在系统功能语法的基础上，
建立了多模态话语分析的视觉语法框架，成为多模态
话语分析的重要理论工具，为多模态话语分析研究奠
定了基础。目前，我国在传承、传播中华传统文化的
过程中，更是需要借助多模态手段。如今，许多古代
典籍经过改编后，被赋予了新的文化生命力，以各种
各样的多模态表现形式（如漫画、舞台剧、电视剧、
电影、视频等）再次出现在大众的视野中。
1 Kress和Van Leeuwen的视觉语法
多模态话语分析是以系统功能语法为土壤发展而
来。Kress和Van Leeuwen受到系统功能语言学的影
响，对多模态话语进行了系统研究，提出了视觉语法
理论。他们认为，视觉语法理论可以用于研究非语言符
号的研究，包括图像、声音、颜色、排版等。韩礼德在
系统功能语言学中提出了语言的三大元功能[2]：概念功
能、人际功能和语篇功能。而视觉语法理论正是受到了
韩礼德思想的影响，认为多模态语篇中存在表征意义、
互动意义和构图意义[1]。表征意义（Representational
Meaning）对应概念功能，反映多模态语篇中人物、地
点、环境等表征之间的关系。互动意义（Interactional
Meaning）对应人际功能，反映图像互动参与者与表征
参与者之间的互动关系，具体通过接触、社会距离、态
度和情态实现。构图意义（Compositional Meaning）则对应语篇功能，主要依靠信息值、显著值、框架来实
现。本文聚焦多模态语篇的互动意义，探究视频语篇
向观众传达互动意义的功能。
2语料选择
本文选取英文版《出师表》视频[3]作为研究对象。
前段时间，电视剧《虎啸龙吟之军师联盟》播出，其
多模态话语分析研究
多模态话语分析研究
摘要：随着科技的进步，现代广告的多模态语篇应运而生。传统的语篇分析侧重于对广告语言特点的分析。本文则基于kress，g&van leenwen的视觉图像分析框架和系统功能语言学的相关理论，分别从语言符号、图像符号及声音符号对自然堂一则电视广告进行分析，指出以多模态形式出现的广告语篇较之传统广告形式的优势，以期为广告欣赏及制作提供启示。
关键词：多模态话语分析 系统功能语法 视觉语法 广告语篇
“图像时代的到来，特别是图像在媒体、教育和儿童文学中的大量产生，使我们无法忽略多模态话语。”（李战子，2003： 1-8）广告作为一种语篇体裁，一个最显著的特征就是多种符号模态---语言、图像、音乐的混合使用（cook，1992）。传统话语分析侧重于分析语言文本，因此，继续使用传统话语分析的方法来分析当今的电视广告显然已行不通。
20世纪90年代中期以来，系统功能语言学者以韩礼德的功能语言学为基础，把对语言社会符号性的研究重心转移到图像、声音、动画等多模态的研究。其中，最具代表性的是kress，g&van leeuwen所建构的分析视觉图像的语法框架。目前国内虽然有不少关于多模态话语研究的论文发表，如李战子、胡壮麟、朱永生、张德禄、唐青叶等，但还处于初始阶段，尚未见专著出版。本文将以自然堂一则电视广告为例，运用多模态语篇的社会符号学分析方法，从语言、
图像和声音方面解读该广告，以说明电视广告语篇的多模态分析。
1、基本理论框架
1.1多模态语篇的定义
模态（modality）是指交流的渠道和媒介，包括语言、技术、图像、颜色、音乐等符号系统。（朱永生，2007）一般认为有五种交际模态：视觉模态、听觉模态、触觉模态、嗅觉模态和味觉模态。人类通过单个感官与外界互动被称为单模态，若是通过多个感官则为多模态。多模态语篇是一种融合了文字、声音、形象、动作等多种交流模态来传递信息的语篇。（kress，g&van leeuwen，2001）换言之，多模态语篇指的是除了文本之外，还带有图像、图表等的复合话语，或者说由任何一种以上的符号编码实现意义的文本。（李战子，2003）曾蕾认为多模态语篇是“超出文字语言符号以上的多种符号语篇”。（曾蕾，2006）张德禄认为多模态语篇为听觉、视觉、触觉等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。（张德禄，2009）
多模态话语的意义构建——基于孔夫子语篇的多模态媒体话语分析
２０１３年第１期 （总第１ ３ ７期） 牡丹江教育学院学报 ＪＯＵＲＮＡＬ ＯＦ ＭＵＤＡＮＪＩＡＮＧ ＣＯＬＬＥＧＥ ＯＦ ＥＤＵＣＡＴＩＯＮ Ｎｏ．１。２０１３ Ｓｅｒｉａｌ Ｎｏ．１３７
多模态话语的意义构建
基于孔夫子语篇的多模态媒体话语分析
葛 银玲
（浙江工商大学外国语学院，浙江杭州 ３１００１８）
［摘 要］ 运用多模态话语分析理论分析２０１０年《中国日报》上的一个多模态媒体语篇，对多模态语篇中 的各种意义资源进行整合，说明传统语法认为是副语言的图像、颜色、声音和动作等符号在现代交流中不再处于 辅助位置，而是正在和语言符号一起形成更为宽泛的符号资源共同参与构建意义。对多模态话语的研究有助于 全面准确地解读语篇的整体意义 ［关键词］ 多模态话语分析；媒体语篇；意义建构 ［中图分类号］Ｈ０５ ［文献标识码］Ａ ［文章编号］１００９—２３２３（２０１３）０１—００３６—０２
一、引言 随着多媒体技术和计算机技术的飞速发展，人类交际 活动中出现的多种符号现象越来越突出，人类的语篇世界 也呈现出数字化和多模态化的特点。“图像时代的到来，特 别是图像在媒体、教育和儿童文学中的大量产生，使我们无 法忽略多模态话语。”（李战子，２００３）多模态话语分析的兴 起，为由多种符号组成的语篇分析提供了途径，帮助读者了 解不同模态作为社会符号如何共同作用构成意义，达到意 义潜势，对提高人们多模式话语识读起到积极的作用。 本文尝试用Ｋｒｅｓｓ和ｖａｎ Ｌｅｅｕｗｅｎ的多模态话语分析 方法对２Ｏ１Ｏ年《中国日报》上的一个多模态语篇进行分析， 探讨作为社会符号的图像和语言如何共同作用构建意义， 以期对读者提高多模态话语识读有所帮助。 二、多模态话语的意义建构理论 Ｈａｌｌｉｄａｙ（１９９４）认为语言系统中有三个用来表示功能 意义的纯理功能，分别是概念功能、人际功能和语篇功能。 Ｋｒｅｓｓ和ｖａｎ Ｌｅｅｕｗｅｎ在将图像也看作社会符号的前提 下，将Ｈａｌｌｉｄａｙ（１９８５／１９９４）的纯理功能思想延伸到视觉模 式，创建了以“再现意义 ‘互动意义”和“构图意义”为核心 内容的分析图像的视觉语法。
新闻漫画中的多模态隐喻
· 118 ·《长江丛刊·理论研究》2017.01
新闻漫画中的多模态隐喻
路 慧
【摘 要】科学信息技术的飞速发展和更新使交际手段和形式更快方便、快捷、和视觉化，关于隐喻的研
究不再局限于语言层面，更多的关注多模态的表现形式，将视觉和听觉等多种模态结合起来，探索多模态
隐喻的本质。本文以多模态隐喻理论为基础，结合政治漫画文字与图画相结合的特点，尝试分析政治漫画
中的隐、转喻现象，进一步说明多模态隐喻形成过程中，源域的选择及其与目标域之间的密切联系。【关键词】漫画 多模态 隐喻
一、前言
随着新的信息技术的迅速发展，“视觉化”时代开始
影响着信息的传播。在进行话语分析时，仅集中在文字意
义的阐释已不能满足对话语意义的理解和表达。本文主要
从多模态角度出发，首先对政治漫画的语篇特征进行说明，
然后分析新闻类政治漫画中出现的隐喻和转喻现象，对意
义的形成进行详细解读，并且指出源域的选择及其文化内
涵，对目标域意义的形成和多模态隐喻意义的形成具有重
要的作用。二、多模态的发展
在对多模态隐喻研究之前，必须对“模态”和“多模
态隐喻”进行说明，对于“模态”的定义不同学者有不同
观点，Forceville（2009）把“模态”定义为“利用具体
的感知过程可阐释的符号系统”，他的定义把模态和人的5个感官联系在一起。在多模态理论发展方面的代表人物
Kress&Leeuwen认为，“多模态指的是运用几种符号学模
态或者使用多个符号学模态来加强一种意义的传达，或者
发挥补充功能”（Kress&Leeuwen 2001: 20）。在多模态语
篇中，读者需要运用多种感官理解多种模态的符号，然后
通过不同的感官模式理解的信息，不同模态之间会进行积
极互动，从而形成某种意义作为文字文本的一部分等。多
模态语篇指运用听觉和视觉等多种感官，并且通过声音、
图像、语言、动作等多种符号资源进行意义传达的现象（张
德禄2013）。三、隐喻研究的多模态转向
隐喻最早由亚里士多德提出，他将隐喻看作一种修辞
多模态话语意义建构 2
多模态话语意义建构
多模态话语意义建构是指在交流中，通过语言、面部表情、姿势、声音等多种模态的信号来构建意义。不同模态之间相互协调，互相补充，共同构建出交流的意义。
在语言交流中，语言是最主要的模态之一。人们通过语言来表达自己的思想、情感和意图。语言有丰富的词汇和语法，可以表达复杂的意义。但仅仅依靠语言本身有时可能无法准确表达自己的意思或理解对方的意思。这时其他模态的信号就起到了重要的作用。
面部表情是一种非常重要的模态。人们通过面部表情来传达自己的情感和态度。笑脸表示愉快或友好，皱眉表示不满或担忧。面部表情可以弥补语言的不足，增加交流的信息量。当语言和面部表情发生矛盾时，人们通常会更倾向于相信面部表情。
姿势和肢体语言也是一种重要的模态。人们通过姿势和肢体语言来表达自己的身份、情感和意图。挺胸昂首表示自信，低头垂肩表示懦弱或不自信。姿势和肢体语言可以加深语言传达的意义，让交流更加生动和直观。
声音是多模态交流中不可或缺的一部分。人们通过声音的音调、语速和音量来传达自己的情感和意图。声音的高低、快慢和强弱可以表达愉快、紧张、生气等不同的情感。声音和语言之间的配合可以加强交流的效果，让对方更容易理解自己的意思。
多模态话语意义建构的关键在于不同模态之间的协调和补充。当不同模态之间的信号一致时，可以增强交流的效果，让意义更容易被理解。当不同模态之间的信号相互矛盾时，可能会造成交流的困惑和误解。在交流中，人们需要注意不同模态之间的一致性，以达到更好的沟通效果。
多模态话语意义建构在现代社会中非常重要。随着科技的发展，人们通过互联网和手机等电子媒介进行交流的机会越来越多。在这些媒介上，人们无法直接通过面部表情和姿势来传达自己的意思。人们需要通过语言和声音等模态来构建意义。在网络聊天和语音通话中，人们常常会使用表情符号和语气词来增加交流的模态。这些模态的使用可以丰富交流的内容，提高信息的传递效果。
多模态话语对比研究——以电影《梅兰芳》海报为例
。擘辩三三三三三三三三三 多模态话语对比研究 ——以电影 梅兰芳 海报为例 ［摘要】电影海报是集语言文字、数字图片、色彩色调及空间分布于一体的多模 态话语，电影《梅兰芳》的海报主要由图像、文字两种符号模态构成，都能表 达概念、人际和语篇意义，同时两种模态间又存在互补或非互补关系，相互作 用构建意义，实现海报语言的劝说功能。研究发现电影海报制作时应考虑不同 的文化、语境因素，并兼顾图像、文字、版式等各种模态的意义潜势，使电影 海报预期宣传效果得以最大化实现 ［关键词］ 《梅兰芳》 多模态话语 电影海报 ｄｏｉ：ｌＯ．３９６９￣．ｉｓｓｎ．１（）（）２—６９１６．２０１１．１１．０１１ 一、引言 在实际交流中，话语的实际发 生就具有多模态性，人们在具体的 社会情境中，总是运用多种多样的 符号资源完成意义建构【３】。多模态 话语是指运用听觉、视觉、触觉等 多种感觉，通过语言、图像、声音、 动作等多种手段和符号资源进行交 际的现象【９１２４。多模态话语研究 的必要性在于任何话语具有多模态 性，随着新的话语形式不断产生， 对这个问题的研究可以更全面地了 解人类的信息传递。Ｋｒｅｓｓ＆Ｖａｎ Ｌｅｅｕｗｅｎ以Ｈａｌｌｉｄａｙ的系统功能语 言学为理论基础，超越了单模态的 语言符号系统，将话语意义研究纳 入到社会符号学的大背景下，把图 像也视为一种符号系统，提出了再 现意义、互动意义和构成意义为核 心内容视觉语法，分别与语言符号 的概念功能、人际功能和语篇功能 相对应【２】。研究方法是将语言及其 相关的资源整合起来…，结合多模 态话语分析综合框架四个层面【９］２４ 逐一深入：文化和语境层面，体现于 语言语法、视觉语法的意义层面， 体现图文关系的形式层面，以及体 现于语言、非语言因素的表达层面。 二、电影《梅兰芳》两张海报 的多模态对比研究 电影海报具有多模态性，读者 在对海报中不同符号模态的解码过 程中获得海报旨在传递的信息：电 影主题，情节，卖点及文化内涵等。 本文基于视觉语法，从以上四个层 面探讨海报中图文两种模态如何实 现再现意义、人际意义和构图意义， 如何相互作用，相互补充构建整体 意义。在此基础上对《梅兰芳》在 中国和日本的不同宣传海报进行对 比研究，就不同的文化语境下，探 讨两者在多模态意义构建上的成功 与不足之处。 （一）文化、语境层面 作为国剧，京剧艺人与政治风 云有着最紧密的接触，他们身不由 己地一再被推入时代的洪流当中。 在日军侵华的国难面前，京剧艺人 们也面临着严峻的考验，在梨园界 广为传颂的是梅兰芳的蓄须明志。 电影是基于以上的文化背景，即语 场是梅兰芳在日军侵华后拒绝为日 军献艺，面对生命威胁、人格侮辱， 始终用生命供奉着舞台这一精神家 园的崇高圣地，坚守着做人的气节 与尊严；语旨是指梅兰芳与梅党的 关系，与喜爱京剧的侵华日军的关 系；语式是指电影的题材，鉴于导 演陈凯歌未完全采用写实手法，而 加入了艺术渲染手段和商业成分， 不是梅兰芳传记片，而是文艺叙事 片。 （二）图像符号意义层面对比 正如语言的语法决定词如何组
多模态话语分析论文
多模态话语分析初探
[摘要] 多模态话语指语言与其他符号资源共存,共同建构意义。迄今为止的话语分析基本上局限于语言本身,即只注意语言系统和语义结构本身及其与社会文化和心理认知之间的关系,忽视了诸如图象、声音、颜色、动漫等其他意义表现形式。20世纪90年代,西方兴起的多模态话语分析,则可以在很大程度上帮助人们克服这些局限性。本文将论述与多模态话语分析紧密相关的几个问题:
(1)多模态话语的产生; (2)多模态话语分析的理论基础; (3)多模态话语的媒体系统; (4)多模态话语分析的意义。
[关键词] 多模态话语分析 理论基础 媒体系统
1. 引言
话语分析(discourse analysis)这一研究方向是美国语言学harris于 20世纪 50年代初提出的，自此以后，世界各地的话语分析家作出了很大努力,提出了各种各样的话语分析理论和方法,通过大量实例分析,解剖了话语活动内在的规律以及话语活动与意识形态和认知模式之间的关系。（朱永生，2003）然而，这些理论和方法，基本上都是以语言为研究对象的，即只注重语言系统和语言结构本身及其与社会文化和心理认知之间的关系，忽视了诸如图象、声音、颜色、动漫等其他意义表现形式。在这种情况下，交际不再是利用一种感官进行，如说话是听觉，书写是视觉，盲文是触觉等，而是用两种或者多种感官同时进行，如用ppt上课则是视觉与听觉同时进行的；模拟与讲解则是听觉、视觉和触觉同时进行的。
以这种交际方式产生的话语就是多模态话语。多模态话语指运用听觉、视觉、触觉等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。然而，如何在话语分析中把多种媒体和多种模态结合起来进行分析解读是现代语言学研究要解决的问题。
2.多模态话语的产生
生命科学的研究成果告诉我们 ,生命体在演化过程中逐步获得视觉、听觉、嗅觉、味觉、触觉等5种不同的感知通道 ( sensory
形象片《上海,灵感之城》多模态隐喻解读
形象片《上海，灵感之城》多模态隐喻解读
摘要:广告作为一种语篇体裁,其最显著的特征就是混合运用多种符号模态诸如图像、音乐及颜色等,隐喻在其意义构建中扮演着重要角色。文章以上海城市形象片《上海,灵感之城》为例,从文化角度解读广告语篇中多模态隐喻的意义建构。
关键词:隐喻 多模态 意象
多模态话语研究表明语言系统在意义交换过程中发挥作用,但同时发现诸如图像、音乐、颜色等其他非语言符号系统在这一过程中则产生强大效果,在广告创作中表现得尤为明显,其中多模态隐喻不断地参与意义的构建。由不同模态方式表征的隐喻即是多模态隐喻,作为隐喻研究的新视角日益成为学者关注的热点。
1 多模态隐喻的研究现状
自从亚里士多德对隐喻作了相关定义后,西方学者提出的多种解释理论,不仅发展并丰富了隐喻研究,而且还超出了修辞格研究的范围,发展到认知领域的研究。Lakoff和Johnson 1980年合著的《我们赖以生存的隐喻》标志着当代隐喻理论的确立,他们认为“隐喻是一种思维方式和行为方式,语言只是概念隐喻的外在表现形式” [1],单纯从语言方面对隐喻进行研究总结,是无法全面地理解和把握博大精深的隐喻理论的。Forceville(1996)将图像隐喻分单体图像隐喻、双体图像隐喻、图像明喻、文字—图像隐喻[2];该分类尝试扩大了图像隐喻的范畴,其有关文字和图像的互动关系论述超越了传统视觉修辞研究的局限,为后期多模态研究奠定了基础。2009年Forceville和Urios-Aparisi所编《多模态隐喻研究》一书的问世,标志着多模态隐喻研究把概念隐喻研究推向了一个新阶段,关注模态本身和模态互动的价值和意义、隐喻和转喻的动态构建过程、隐喻的文体维度、隐喻的体验基础与文化基础等[3];在拓宽研究领域的同时,推动了概念隐喻理论体系的发展和完善。Forceville(1996),Koller(2009),Caballero(2009)等学者分析并归纳了以实现产品或服务的正面诉求为宗旨的多模态隐喻在隐喻构建和表征手段方面的特征。Ten和Srn(2002),Yus(2009),Shinohara和Matsunaka(2009)则聚集各类漫画中的多模态隐喻。
多模态话语意义建构 3
多模态话语意义建构
多模态话语意义建构是指通过语言、语音、手势、表情、姿势等多个模态的信息来构建话语的意义。
多模态话语意义建构可以帮助人们更准确地理解和解释他人的意图和表达，同时也提供了更丰富的交流方式和沟通渠道。以下将从语言、语音、手势、表情和姿势等几个方面来探讨多模态话语意义建构的意义。
语言是我们最常用的交流工具之一。语言可以帮助我们传递具体的信息和思想，用来表达和共享知识。在多模态话语意义建构中，语言不仅仅是一个单独的模态，还和其他模态如语音、手势、表情和姿势等相互配合来构建话语的意义。通过语言的选择和运用，我们可以更加精确地传达自己的意图和思想，使交流更加顺畅和准确。
语音是多模态话语中重要的一个模态。语音包括音调、语速、语调等方面的特点。通过语音的变化，我们可以传达情感、强调重点、表达态度等。语音的高低和音调的上升或下降可以表达问句和陈述句的区别，语速的快慢可以表达紧急程度和节奏感。语音也可以与语言相结合，起到强调或者修饰的作用。语音在多模态话语中起到了丰富和完善意义的作用。
手势在多模态话语中也扮演着重要的角色。手势可以用来补充、强调、说明或替代语言。通过手势的运用，我们可以更加清晰地传达信息和表达意图，增加交流的准确性和效果。用手比划表示“大”或者“小”，或者用手指特定的方向来引导注意力。手势的效果通常可以通过肢体语言和面部表情来进一步加强。
表情是多模态话语中最直接、最容易感知到的模态之一。通过面部表情，我们可以直观地表达情感和意图。笑脸可以表示愉快和满意，皱眉可以表示疑惑和不满。面部表情还可以用来补充语言和语音的信息，使交流更加具体和明确。
姿势也是多模态话语中的一个重要模态。姿势通过身体的动作和姿态来传递信息和意图。姿势可以表达自信、害羞、恐惧等情感，也可以用来表示态度、目的和意图。举起手来表示停止，张开双臂表示欢迎。姿势的使用可以增加交流的灵活性和适应性，使话语的意义更加清晰和丰富。