我国多模态话语研究综述
我国多模态话语研究综述作者：张莉孙来麟来源：《教育教学论坛》2015年第45期摘要：随着现代信息技术的飞速发展，信息的传递方式由单一文本形式转化为多模态形式。
我国多模态话语研究主要为理论探索、图文关系、多媒体语篇、教学应用及多模态语料库等领域。
文章分析了我国多模态话语研究现状及存在的问题，以期对今后的研究有所启示。
关键词：多模态;话语研究;综述中图分类号：G642.0 ; ; 文献标志码：A ; ; 文章编号：1674-9324（2015）45-0225-03一、引言自1952年美国语言学家Z.Harris提出话语分析（Discourse Analysis）理论以来，国内外学者立足于不同的角度提出了各种各样的话语分析理论和方法，并通过大量的案例研究，揭示了话语活动的内在规律与认知行为的内在关联（朱永生2003）。
以往的话语分析研究主要聚焦话语篇章结构、语法规律、语句之间的关系，忽略了诸如图像、声音、色彩、动画、空间、符号等的表现形式。
然而，随着信息技术的发展及多元文化的相互渗透，传统的话语研究已经不能满足人们的交际需要，多模态话语研究应用而生。
国际语言学界于20世纪90年代兴起了多模态话语研究热潮，而我国相关研究起步较晚，最早由李战子（2003）将多模态话语分析引入国内。
本文将对国内学者近年来公开发表的多模态话语方面的论文、论著进行梳理，总结所取得的研究成果并指出存在的不足，以期对以后的研究有所启示。
二、多模态话语分析的理论基础Kress &Van Leeuwen（1996）指出多模态可以定义为参与交际的所有渠道和媒介，除了传统的语言符号，它还包括图像、颜色、音乐、技术等符号系统。
多模态话语分析是建立在韩礼德的系统功能语言学理论基础之上的。
根据系统功能语言学理论，语言具有三种元功能，即概念功能、人际功能、语篇功能。
概念功能指的是语言能表达说话者的亲身经历和内心活动，人际功能指的是建立和保持社会关系，语篇功能指的是将前两种功能组成语篇的功能。
而就多模态话语而言，其他语言符号也具有上述三种功能。
系统功能语言学认为，语言是一种社会符号和意义潜势，语言以外的其他符号，诸如图像、声音、色彩、空间等也是意义的源泉。
（胡壮麟2007）三、国内多模态话语研究成果综述我国多模态话语的研究始于2003年李战子首次引入多模态话语理论，提出多模态话语分析对于教学有重要意义。
随后胡壮麟、朱永生、顾曰国、韦琴红等专家对于多模态话语进行了深入的研究，但其研究尚处于初级阶段。
近年来，国内兴起了多模态话语研究热潮。
1.调查数据。
到目前为止，在“中国知网数据总库”中，以“多模态话语”为主题词，搜索到的这方面的论文共达900篇，既涉及有理论的探索，也有对理论的应用研究。
通过对数据的分析发现，近几年，对多模态研究的论文呈逐渐上升趋势。
2.理论研究。
李战子（2003）《多模式话语的社会符号学分析》介绍了Kress& Leeuwen 所构架的视觉语法和图像分析方法，研究了图像分析的社会学框架，提供了一套明确的分析方法，分析由图像中描写的人物、地点和事件之间的句法关系所建立起来的意义，开创了我国多模态话语分析理论研究的先河。
此后，胡壮麟（2007）认为符号学有广阔的目标，视觉、听觉、嗅觉、味觉、触觉，以至抽象的模型、结构、主体意识都应纳入其研究范围;朱永生（2007）就多模态话语分析的理论基础及研究方法进行了探讨;张德禄（2009）探讨了多模态研究的理论框架，同时还探讨了各个模态之间的相互关系，另外对非语言模态的语法结构的建立、语法结构与语篇结构之间的关系及语法结构是如何实现其功能意义也有了深入的研究;韦琴红（2009）研究了多模态话语中的模态、媒介与情态的区别。
这些研究从不同角度丰富了多模态话语分析的理论思考，对国内多模态语言的研究起了积极的推动作用和宏观指导的作用。
3.应用研究。
尽管我国引进多模态话语分析理论只有十多年时间，但是研究者对多模态话语分析的研究价值给予了充分重视。
李战子（2012）分析认为，目前国内的多模态话语研究主要是应用型研究，最为常见的是将“视觉语法”应用于特定语类、语篇的分析，以揭示多模态与片中意义的构建方式。
在此领域内，以系统功能语言学理论基础的实践研究仍占主导地位。
数据统计发现，多模态话语分析的应用已涉及了图文关系、多媒体语篇、教材、教学及多模态语料库等方面。
①二维平面的图文关系多模态研究。
由于图像符号和文字符号本身的差异以及相互所承载的社会文化差异，图文关系需要将“语类”分析和“图类”分析相互合理的结合，才能得到较客观的描写、分析和评价。
图像和文本如何相互结合构造意义一直也是多模态话语研究的重点。
赵宝福（2008）用多模态话语理论探讨了奥斯卡最佳影片奖《老无所依》的电影海报;汪燕华（2010）研究了多模态话语中的图文关系;王改弟、杨立学（2013）在多模态话语分析的视域下，从文化、意义和模态三个层面对英语诗歌进行了分析研究;孙毅（2012）从图像、颜色和版式设计等方面分析了2011年西安世博会会徽，认为其他各种符号资源与语言一样具有意义构建功能。
②多媒体语篇的话语分析研究。
多媒体语篇对于语言学研究来说是一种新的语篇形式，其文本的主要内容是通过图像、文字、视频流、数字音频流等表现方式来接受和传递信息。
其分析首先是对多媒体语篇的转录，这种转录的方法与纯粹语音的转录相比，有其特有的方式;其次是系统功能语法的理论框架的实际运用与测试;最后，依据多媒体语篇的自身特点，使视频与音频的联系更加紧密，从而加深多媒体语篇与整个社会知识的联系，以便提出更广阔的分析思路。
胡壮麟、董佳（2007）以23个PPT演示作品为例，开展了与多模态化相结合的计算机介入的语篇分析，认为PPT既是工具，又是语篇，对PPT演示的研究可推动社会符号学的研究;范洪涛（2011）就中央电视台少儿频道一则少儿公益广告，分别从再现意义、互动意义及构图意义三个方面对多模态话语进行了研究;冀芳（2013）以多模态话语理论为基础，分别从文化语境、内容层面和表达层面对微电影进行了探讨。
③多模态教材的研究。
多模态教材是指由多种模态共同组成的教材，这些模态主要包括文字、图画、录像、录音、表格等同时或者按照一定顺序关系出现。
其中，文字是起主导作用，但不再是一种模态占据主导地位的局面，而是多种模态相互竞争相互配合的局面。
其特征主要表现为图、文、声、像融为一体，同时多维度刺激学习者的感官，创造真实而丰富的教学环境，为学习者提供所需要的各种信息，根据学习者的不同特点来选择适当的教学内容与教学方法，从而保证学习者达到预期的学习目标。
在多媒体教材方面，特别是英语教材方面已有如下研究成果。
陈瑜敏（2008）主要从语域角度对不同时期多模态教科书语篇展开分析，认为教科书图文关系在不同时期具有明显的差异;张德禄、张德禄、张淑杰（2010）提出了多模态外语教材总的特点和类型，即纸质、电子和演示教材，初步探讨了多模态外语教材的编写宏观原则和具体原则。
④多模态教学的研究。
多模态教学的目的是希望教师能根据教学内容、教学设施、教学目标等基本理念为学生选择一种或多种符合学生发展状况教学方法，并将其合理运用在语言环境中。
在多模态课堂外语教学中，教师运用多媒体手段进行听觉、视觉、触觉等多感官的刺激，以此来创设真实的情境，使学习者体验真实的英语语言环境，进而提高学生输出运用词汇的能力。
胡雯（2011）探讨了多模态话语分析在英语教学中的应用;应建芬（2011）研究证实了多模态话语分析对英语词汇教学具有积极的指导作用;魏笑梅（2012）对多模态话语理论视角下英语教学资源建设进行了探讨;刘娟（2012）对大学英语精读的多模态教学模式进行了试验研究，发现此种教学模式体现了以学生为中心的教学理念，有利于培养学生的自主学习能力，养成良好的学习习惯，有利于提高教学质量;刘秀丽、张德禄（2013）就外语教师多模态话语与学生积极性的关系进行了研究，文章运用动机理论、注意层次理论和多模态话语分析理论，以教师的人格魅力和理念为基础，建立了一个运用适当的多模态话语来激发学生的学习动力的理论模式。
⑤多模态语料库的研究。
多模态话语分析研究离不开真实的语料库的支持，近年来，一些学者也展开了对多模态语料库的研究。
顾曰国（2007）介绍了多模态语料库语言学方法;王立非、文艳（2008）介绍了多模态分析软件ELAN及其主要功能;张德禄（2012）对多模态话语的设计进行了研究;刘芹、潘鸣威（2010），从语音、词汇、句法、篇章、非言语交际等多个维度构建了中国理工大学生英语口语多模态语料库，认为此类语料库的建立对于理工科英语口语教学、口语教材的编写等能起到重要的作用;付磊（2010）把多模态理论引入到计算机辅助教学的软件评估中，认为开展CAI软件评估工作可促进外语教学多媒体软件的设计和制作，从而有效提高外语教学。
四、研究存在的不足通过对国内近十年的研究成果分析可以发现，多模态话语研究在理论探索及实践应用方面均取得了可喜的成绩。
但作为一个全新的研究领域，多模态话语研究在国内发展时间不长，目前还存在一些不足之处，需要进行更加全面的探讨和深入研究。
1.以理论研究为主，实证研究偏少。
通过分析发现，虽然目前国内对多模态的研究呈上升趋势，但主要是介绍国外的相关理论和研究方法，或以多模态理论对相关语篇等进行分析，主观性较强，缺乏对多模态语法关系进行科学的调查取证与量化分析，实证研究有待加强。
2.静态文本研究偏多，动态研究较少。
目前国内多以多模态理论为基础，对静态的二维平面图文关系进行分析，例如影视作品海报、漫画、英语诗歌等，而动态语境中的多模态话语分析研究较少，比如，PPT研究、多模态语境下的外语教学、影视作品研究等。
此方面的研究有待加强。
3.各种模态之间的关系有待研究。
张德禄（2009）认为多模态话语的各个模态之间是相互作用和影响的，目前，对于各个模态之间的关系却难以界定，需要有更科学的研究方法来验证。
五、结语经过国内学者十多年的努力，目前多模态话语理论在中国的研究已进入蓬勃发展时期，取得了可喜的成绩。
多模态话语作为一门新兴的学科，理论研究需要创新，实践研究还需要量化。
我们相信，未来多模态话语研究方向越来越广阔，前景越来越美好。
参考文献：[1]胡壮麟.社会符号学研究中的多模态化[J].语言教学与研究，2007.（01）：1-10.[2]朱永生.多模态话语分析的理论基础与研究方法[J].外语学刊，2007，（05）：82-86.[3]Kress G R，Van Leeuween T.Reading Image[M]. London： Rouledge，1996：183.[4]朱永生.话语分析五十年：回顾与展望[J].外国语（上海外国语大学学报），2003，（03）：43-50.[5]张德禄.多模态话语分析综合理论框架探索[J].中国外语，2009，（01）：24-30.[6]韦琴红.论多模态话语中的模态、媒介与情态[J].外语教学，2009，（04）：54-57.[7]孙毅.多模态话语意义建构——以2011西安世界园艺博览会会徽为基点[J].外语与外语教学，2012，（01）：44-47.[8]张德禄.论多模态话语设计[J].山东外语教学，2012，（01）：9-15.[9]刘娟.大学英语精读之多模态话语教学[J].长春理工大学学报（社会科学版），2012，（04）：184-187.[10]李战子，陆丹云.多模态符号学：理论基础，研究途径与发展前景[J].外语研究，2012，（02）：1-8.[11]魏笑梅.多模态话语理论视角下英语教学资源建设[J].黑龙江教育（高教研究与评估），2012，（06）：20-21.[12]王立非，文艳.应用语言学研究的多模态分析方法[J].外语电化教学，2008，（03）：8-12.[13]赵宝福.多模态话语分析奥斯卡最佳影片奖《老无所依》的电影海报[J].科教文汇（下旬刊），2008，（05）：167.[14]陈瑜敏，王红阳.多模态语篇图像的概念意义与图文关系——当代教科书的多模态语篇分析[J].宁波大学学报（教育科学版），2008，（01）：124-129.[15]汪燕华.多模态语篇分析的社会符号学理据[J].外语学刊，2010，06：145-147.[17]付磊.基于“多模态理论”的《新视野大学英语视听说》CAI软件评价[J].山东广播电视大学学报，2010，（04）：37-38.[16]张德禄，张淑杰.多模态性外语教材编写原则探索[J].外语界，2010，（05）：26-33.[17]刘芹，潘鸣威.多模态环境下中国大学生英语口语非言语交际能力研究初探[J].外语电化教学，2010，（02）：38-43.[18]王改娣，杨立学.英语诗歌之多模态话语分析研究[J].山东外语教学，2013，（02）：26-31.[19]冀芳.多模态话语分析下的微电影研究[J].电影文学，2013，（11）：34-35.[20]刘秀丽，张德禄，张宜波.外语教师多模态话语与学生学习积极性的关系研究[J].外语电化教学，2013，（03）：3-9.[21]王梦婉.漫画多模态话语的再现功能分析——以一幅《PHD漫画》为例[J].北京科技大学学报（社会科学版），2014，（05）：28-33.[22]胡壮麟，董佳.意义的多模态构建——对一次PPT演示竞赛的语篇分析[J].外语电化教学，2006，（03）：3-12.[23][26]范洪涛.多模态话语的社会符号学解析——以一则公益广告为例[J].兰州教育学院学报，2011，（02）：31-33.[24]胡雯.多模态话语分析在英语教学中的应用[J].山东理工大学学报（社会科学版），2011，（03）：104-108.[25]应建芬.多模态话语分析与大学英语词汇教学[J].牡丹江大学学报，2011，（06）：136-138.[26]侯建波.房地产广告的多模态人际意义研究[J].中国外语，2014，（04）：48-53.[27]顾曰国.论言思情貌整一原则与鲜活话语研究——多模态语料库语言学方法[J].当代修辞学，2013，（06）：1-19.。
我国英语教师多模态课堂话语研究综述
我国英语教师多模态课堂话语研究综述作者：马宁来源：《校园英语·月末》2020年第06期【摘要】本研究以“多模态课堂话语”“‘多模态’并含‘课堂话语’”作为主题词，同时为了防止遗漏文章，还以‘多模态’并含‘课堂’等作为主题词在中国知网的中国学术期刊网络出版总库资源中进行检索，并且选取相关文章，导入文献管理软件Note Express进行汇总。
其中，所选取的文章均发表在2020年以前。
结果显示：研究基本集中于对大学优秀教师的课堂进行多模态话语分析，对于中小学教师课堂以及其他类型教师课堂的多模态话语关注度不够。
其次，研究数量在近几年基本呈现平稳发展的趋势，但是量化研究的数量较少，并且材料性研究内容较为单一。
最后，教学参赛视频具有一定的观赏性质，课堂实录下的教学视频分析数量还不够多。
【关键词】多模态;多模态课堂话语;综述【作者简介】马宁（1996.04.27-），女，汉族，河南南阳宛城人，首都师范大学外国语学院2018级课程与教学论专业，硕士研究生，研究方向：教师教育。
一、引言20世纪90年代，中国学者开始对课堂话语进行研究（周学恒、邓晓明，2013）。
关于课堂话语的定义，程晓堂（2009）认为课堂话语就是产生在课堂上的话语，可以分为教师话语和学生话语。
教师课堂话语研究就是对教师在课堂上的话语进行研究。
程晓堂（2009）同时指出，在传统的课堂话语研究中，一个重要的分析视角就是以话语分析理论为基础，以课堂观察为主要方法，对收集的语料进行转写，对教师说的话语进行分析研究。
随着话语分析研究的不断发展，多模态话语分析成为话语分析的一个重要分支。
2003年，李战子发表的《多模式话语的社会学分析》标志着中国多模态话语分析研究的开始。
关于多模态话语的定义，张德禄指出：“多模态话语是运用听觉、视觉、触觉、等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象（张德禄， 2009）”。
同时，随着对多模态话语分析的不断深入了解，中国学者将多模态与外语教育联系起来，探索多模态话语分析在外语课堂中的应用。
话语分析的新发展多模态话语分析
话语分析的新发展多模态话语分析一、本文概述随着信息技术的飞速发展和社交媒体的广泛应用，话语分析的研究领域正在经历一场革命性的变革。
传统的以文本为中心的话语分析已经无法满足现代社会的需求，多模态话语分析应运而生，成为了话语分析领域的新热点。
本文旨在探讨话语分析的新发展——多模态话语分析，介绍其理论框架、研究方法以及在各个领域的应用，以期推动多模态话语分析在中国的深入研究和广泛应用。
本文将概述多模态话语分析的基本概念、理论框架和研究方法，为读者提供一个清晰的认识和了解。
通过案例分析，本文将详细阐述多模态话语分析在各个领域的应用，如社交媒体、广告、教育等，以展示其强大的解释力和实用性。
本文还将探讨多模态话语分析面临的挑战和未来的发展方向，以期为中国的话语分析研究提供新的思路和启示。
通过本文的阐述，我们希望能够引起更多学者和研究人员对多模态话语分析的关注，推动该领域的研究和发展，为社会语言学、传播学、教育学等相关学科的研究提供新的视角和方法。
二、多模态话语分析的基本概念多模态话语分析（Multimodal Discourse Analysis）是话语分析领域的一个新兴分支，它突破了传统话语分析主要关注语言文本的局限，将视线扩展到了包括语言在内的多种符号模态上。
多模态话语分析强调在话语理解中应当同时考虑语言、图像、声音、动作等多种符号资源的作用，认为这些模态在话语表达和意义构建过程中是相互关联、相互补充的。
在多模态话语中，不同的模态可以共同构建一个完整的意义，每个模态都在其独特的表意系统中发挥着作用。
例如，在一段视频讲座中，语言模态负责传达讲座的主要内容和思想，图像模态则通过展示实物、图表等方式提供直观的视觉信息，声音模态则可能通过背景音乐、环境音效等来营造氛围或强调某些信息。
多模态话语分析的核心任务之一是揭示不同模态之间是如何协同工作的，以及它们是如何共同构建话语意义的。
这要求分析者不仅要对单一模态有深入的理解，还要具备跨模态的分析能力，能够从整体上把握多模态话语的运作机制。
我国多模态话语研究综述
4、技术发展与应用：随着人工智能、大数据等技术的快速发展，多模态话 语研究应技术发展与应用方面的研究。利用先进的技术手段对多模态话语进行自 动化分析、理解和生成等方面的研究，可以提升多模态话语研究的效率和实用性。
五、结论
本次演示对我国近20年来的多模态话语研究进行了综述和分析。可以看到， 我国的多模态话语研究在理论框架、研究方法、应用领域等方面取得了显著成果。 未来，我们期待这一领域能够继续拓展研究领域、加强方法论研究和国际合作与 交流、技术发展与应用等方面的研究，为推动多模态话语研究的深入发展做出更 大的贡献。
二、多模态话语的研究内容
多模态话语研究的内容非常广泛，主要包括以下几个方面：
1、多模态话语的符号学理论：多模态话语的符号学理论是研究多模态话语 的基础。它主要研究多模态话语中各种符号模态之间的关系和作用，以及它们如 何共同构成意义。
2、多模态话语的认知心理学：多模态话语的认知心理学主要研究人们如何 理解和处理多模态话语。它的是多模态话语对人们的认知负荷、注意力和记忆等 方面的影响，以及这些方面如何影响人们对多模态话语的理解。
我国多模态话语研究综述
目录
01 一、多模态话语的定 义
02
二、多模态话语的研 究内容
03
三、多模态话语的研 究方法
04 四、发展趋势
05 参考内容
随着我国经济和科技的快速发展，多模态话语研究逐渐成为语言学、计算机 科学、社会学等领域的热点话题。多模态话语是指通过多种符号模态（如文字、 图像、声音、视频等）来表达意义的话语。在当今社会，多模态话语的应用越来 越广泛，对我们的生活和工作产生了深远的影响。本次演示将从多模态话语的定 义、研究内容、研究方法和发展趋势四个方面来进行综述。
国内多模态话语分析研究述评
多模态话语分析在现实中有广泛的应用场景，其优势在于可以全面、深入地分 析各种交际现象。例如，在社交媒体分析中，通过研究网络表情符号、图片、 视频等模态，可以了解用户的需求和行为习惯；在医疗领域，通过对医疗图像 和文字信息进行多模态分析，可以帮助医生提高诊断的准确性和效率；在教育 领域，利用多模态话语分析可以帮助学生更好地理解和掌握知识，提高教学效 果。
多模态话语分析的定义和基本原 理
多模态话语分析是一种跨学科的研究方法，其基本原理是通过对多种模态的话 语进行分析，以揭示它们之间的互动关系和意义。与传统的话语分析不同，多 模态话语分析更加注重多种模态的协同作用，以及它们在特定语境下的意义。 多模态话语分析涉及的关键概念包括：
1、模态：指交际的媒介，如语 言、图像、声音等；
然而，多模态话语分析也存在一些不足。例如，不同模态之间的转换和整合可 能存在困难，不同模态之间的语义和文化差异也可能影响分析结果。因此，在 应用多模态话语分析时，需要综合考虑多种因素，以避免出现偏差。
对国内多模态话语分析研究的思 考和建议
针对国内多模态话语分析研究的现状和问题，本次演示提出以下思考和建议：
2、多模态：指同时使用两种或 多种模态进行交际；
3、话语：指由交际者产生的有意义的信息单位，可以由一种或多种模态构成；
4、分析：指对话语进行深入理解和解释，以揭示其意义和交际效果。
国内多模态话语分析研究现状
近年来，国内多模态话语分析研究取得了长足的发展。在研究成果方面，学者 们从不同角度对多模态话语进行了分析，如李晨对网络表情符号的研究、张德 禄对多模态话语的语法研究等。此外，国内还了一系列有关多模态话语分析的 专著和论文集，如《多模态话语分析理论与实践》、《多模态话语研究的跨学 科视野》等。
我国多模态外语教学研究综述基于国内外语类核心期刊载文的统计分析
我国多模态外语教学研究综述基于国内外语类核心期刊载文的统计分析一、概述在全球化背景下，多模态外语教学作为一种新兴的教学模式，正逐渐成为我国外语教育领域的研究热点。
多模态外语教学强调通过多种感官渠道（如视觉、听觉、触觉等）进行语言学习，旨在提高学习者的语言综合运用能力。
本文旨在通过统计分析国内外语类核心期刊中关于多模态外语教学的研究文献，梳理我国多模态外语教学研究的现状、发展趋势及存在的问题，以期为今后的相关研究提供参考和启示。
通过对近年来发表的相关文献进行梳理，本文发现我国多模态外语教学研究主要集中在以下几个方面：多模态外语教学的理论框架、多模态外语教学的设计与实施、多模态外语教学的效果评估、以及多模态外语教学在特殊领域的应用。
这些研究不仅丰富了我国外语教学的理论体系，还为实际教学提供了有益的借鉴。
在肯定我国多模态外语教学研究取得成果的同时，也应看到其中存在的问题。
例如，部分研究在理论框架构建方面尚不完善，实证研究相对不足，以及多模态教学资源的开发与应用有待加强。
针对这些问题，本文提出了相应的解决策略，以期为我国多模态外语教学的进一步发展提供支持。
本文通过对国内外语类核心期刊载文的统计分析，全面梳理了我国多模态外语教学研究的现状、发展趋势及存在的问题，旨在为今后的相关研究提供有益的借鉴和启示。
在今后的研究中，应进一步深化多模态外语教学的理论研究，加强实证研究，优化教学资源开发，以推动我国多模态外语教学的持续发展。
1. 研究背景随着全球化的加速和信息技术的飞速发展，外语教育在我国的教育体系中占据着越来越重要的地位。
近年来，多模态外语教学作为一种新兴的教学理念和方法，逐渐受到了广大教育者和研究者的关注。
多模态教学强调通过多种感官和渠道协同作用，以提高学生的学习效果和积极性。
尽管多模态外语教学在我国已经取得了一定的研究成果，但在实践中仍存在诸多问题，如研究深度不够、实证研究不足、缺乏对比研究等。
对我国多模态外语教学研究进行综述，总结研究现状、问题及解决方案，具有重要的理论和实践意义。
我国多模态外语教学研究综述
我国多模态外语教学研究综述摘要：随着网络的发展，多模态教学的研究将越来越成为一个热点话题。
近年来，有关多模态教学的研究出现下降的趋势，但幅度不大；实证研究比非实证研究少；其中所研究的主体多为高校的英语课堂；很多教学者还没有将多模态话语分析理论真正运用到外语教学实践活动中。
虽然，多模态外语教学在国内已经被越来越多的教育者重视，但实践中却很少被使用到课堂之中，相较于新兴的多模态方式，教师们更加倾向于采用最传统的教学方式。
因此，教学者还需进一步加强多模态理论的学习，并应该在实践中检验多模态在外语教学中的实效性，也以此提供重要的实践意义。
在今后的研究中，相信学者们将进一步完善多模态外语教学的理论框架和分析方法，进而促进外语教学的发展。
关键词：多模态；外语教学引言为达成目的，外语教学必须明确自身教学的具体内涵，并且从现状出发，找出不利于教学问题，再“对症下药”予以处理，实施教学改革，全面展开研究。
因此有必要对我国多模态外语教学展开研究，以便明确改革方向、改革方法，贯彻教育方针。
1外语教学的内容1.1语言能力语言能力是指人们使用语言进行交流，或通过语言达成目的，或推进某个目的实现的一种能力，其内涵包括：第一，必要的语言知识储备，这是语言能力的基础，人必须掌握一门外语的文字形式、语法结构、表达方法、内在含义等相关知识，且能够在实际情况中正确使用这些知识;第二，语言意识，这是人们使用某种语言的习惯程度，诸如我国学生如果非常习惯使用外语与其他国家人员进行交流，两种语言能够切换自如，没有任何隔阂，就说明该学生的语言意识良好，已经达到最理想的“母语”级别;第三，语感，指人对语言表达的感知能力，即人们在交际中的语言表达方式是非常复杂的，相同的语言用不同的语气，甚至与不同的表情、行为、场景结合都会产生不同的意思。
而良好的语感能够让人正确感知语言意思，或者正确选择语感表达方式;第四，交际策略，泛指人在交际中的语言组织能力、交际思维能力，通过这两项能力，人能够根据实际情况设定正确的交际策略，以便更好地达成目的。
多模态语言处理技术的研究与应用
多模态语言处理技术的研究与应用多模态语言处理技术是一种综合利用视觉、听觉和语言等多种信息模态的技术，旨在实现对复杂信息的全面理解和处理。
随着人工智能和机器学习等技术的不断发展，多模态语言处理技术在自然语言理解、情感分析、机器翻译等领域展现出了巨大的潜力。
本文将探讨多模态语言处理技术的研究进展、应用场景以及面临的挑战，并对未来发展进行展望。
一、多模态语言处理技术概述多模态语言处理是一种将视觉和听觉等非文本信息与文本信息进行融合分析和理解的方法。
通过综合利用不同信息来源，可以更全面地理解人类交流行为，并且能够有效地应对复杂场景下存在的歧义性和不确定性。
常见的多模态数据包括图像、视频、音频以及与之相关联的文本数据。
二、多模态语言处理技术研究进展1. 多模态情感分析情感分析是指通过对文本或其他媒体内容进行分析，识别出其中所包含的情感信息。
多模态情感分析通过结合文本、图像、音频等多种信息模态，可以更准确地识别出情感倾向。
例如，通过分析用户在社交媒体上发布的文本和照片，可以更准确地了解用户的情感状态和心理健康状况。
2. 多模态机器翻译机器翻译是指利用计算机技术将一种语言自动转化为另一种语言。
多模态机器翻译将图像、视频等非文本信息与文本信息进行融合，可以更准确地理解源语言的含义，并生成更自然流畅的目标语言。
例如，在图像描述生成任务中，通过结合图像和文本信息进行训练，可以生成与图像内容相关的自然语言描述。
3. 多模态问答系统多模态问答系统是指通过综合利用视觉和听觉等非文本信息，并结合自然语言处理技术，实现对用户提问进行回答的系统。
这种系统可以处理复杂问题，并根据问题所涉及到的不同媒体内容提供相关答案。
例如，在视频问答任务中，系统能够根据视频内容回答用户提出的问题。
三、多模态语言处理技术应用场景1. 智能助理多模态语言处理技术可以应用于智能助理中，实现对用户语音和图像输入的理解和处理。
通过综合利用多种信息模态，智能助理可以更好地理解用户的需求，并提供更准确和个性化的服务。
国内多模态话语分析综论以CSSCI来源期刊发表成果为考察对象
国内多模态话语分析综论以CSSCI来源期刊发表成果为考察对象一、本文概述随着信息技术的飞速发展和多媒体时代的来临，多模态话语作为一种新型的语言交际方式，逐渐在人们的日常交流中占据重要地位。
本文旨在对国内多模态话语分析的研究现状进行全面的综论，以CSSCI来源期刊上发表的相关成果为考察对象，系统梳理和分析多模态话语分析的理论基础、研究方法、应用领域以及发展趋势。
通过深入剖析多模态话语的内在机制和功能特点，本文期望能够为多模态话语分析的理论研究和实际应用提供有益的参考和启示，同时也为国内语言学及相关领域的研究者提供一个新的视角和思路。
在研究方法上，本文将采用文献计量和内容分析的方法，对CSSCI来源期刊上发表的多模态话语分析相关论文进行系统的统计和梳理，从论文数量、研究主题、研究方法、引用情况等多个维度进行深入分析，以揭示国内多模态话语分析研究的整体状况和发展趋势。
本文还将结合具体的案例分析，探讨多模态话语分析在不同领域中的实际应用效果和价值。
本文的研究不仅有助于深化对多模态话语分析的理解，也有助于推动语言学及相关领域的研究进展。
通过本文的综论，我们希望能够为国内多模态话语分析的研究者提供一个全面、系统的研究视角，推动多模态话语分析在国内的深入发展和广泛应用。
二、多模态话语分析的基本理论框架多模态话语分析作为一种跨学科的研究方法，其基本理论框架涉及语言学、符号学、传播学、社会学等多个领域。
在多模态话语中，语言不再是唯一的交际手段，而是与其他模态如图像、声音、动作等共同构成完整的信息传递系统。
因此，多模态话语分析的基本理论框架需要涵盖这些不同的模态，并解释它们如何协同工作以传递意义。
在多模态话语分析的理论框架中，模态之间的互补性和互动性是关键概念。
互补性指的是不同模态在话语中的相互补充，它们共同为信息的传递提供完整的意义。
例如，在一段视频演讲中，语言模态提供了主要的信息内容，而图像和声音模态则通过表情、手势和背景音乐等方式为语言模态提供补充和强调。
多模态话语分析国内研究综述
＼ ＼ 理论研究 （ 篇）
２ ｏ０ ７ ｌ
面的分 析和研 究 。话 语标 记语 作 为 一 种 语 言 模 态 已不 仅 仅 以文 本 模式 出现 ，而是 和 图像 、声 音 、动 作 、颜 色 等 多种 模 态 同时 出现 ，
共 同完成 语篇 衔 接 的构 建 。相 对 于 图文 语 篇 ，视 频语 篇 涉 及 更 多
樊雪琴2015基于halliday的系统功能语言学的理论背景以kressvanleeuwen提出的视觉语法为基础建立多模态话语分析的视觉语法分析框架分析微电影语篇中经常出现的的多模态话语方式从叙事和概念两个维度分析其表征意义从接触社会距离视角和情态等方面分析其互动意义从信息值显著性和取景方面分析其构图意义
７ ．０ ７ ％
文学 作品 多模态翻译
合计
２ ２ ９
２ ８ ３
７ ．７ ７ ％ ３ ．１ ８ ％
１ ０ ０ ％
３ ．２ ．１ 二维平 面 图文关 系 的多 模 态研 究 。二 维平 面 关 系 的 多模 态研究 语 篇 主 要 来 是 关 于 公 益 平 面 广 告 、活 动 及 电影 海 报 、
多模 态话 语 研 究现状及 存在 的问题 ，以及对 今后 的研 究 的启示 。 关键 词 ：模 态 ；多模 态 ；话 语分 析 ；理 论研 究 中 图分类 号 ：Ｈ Ｏ 文献标 识码 ：Ａ ｌ 多模态 话语 分析 概述 语言 是人类 交 往 的工 具 和 手 段 ，但 绝对 不 是 唯 一 的 工 具 和手
琢 百 呸
ｕ ｎ ｎｕｎ ｎ
－ ＿ －－－ － －
ｎ ： ：・ －： 一 一 － ＿
－
多模 态 话 语 分 析 国 内研 究 综 述
《多模态理论文献综述1600字》
多模态理论文献综述多模态理论自提出以来，被广泛应用于多种领域，本文将从多模态的定义、多模态学习问题和其他领域对多模态理论进行综述。
一、关于多模态的定义顾曰国（2007）认为模态是指人类通过感官(如视觉、听觉等)跟外部环境(如人、机器、物件、动物等)之间的互动方式。
用单个感官进行互动的叫单模态,用两个的叫双模态,三个或以上的叫多模态。
无论是单媒体、双媒体还是多媒体,如果其内容是关于多模态互动的,我们称其为多模态内容。
黄立鹤（2016）将“模态”定义为人类通过感官系统(如视觉、听觉、触觉等)跟外部环境(如人、机器、物件、动物等)之间的互动方式。
感知模态和产出模态同时作用才能顺利实现完整的言语交际。
黄立鹤和张德禄（2019）认为多模态概念可归结为三个反面，即将其视为感官及相应的神经系统、将其视为在社会文化中形成的创造意义的符号资源、将其定义为人机交互中的信息呈现方式。
二、关于多模态学习问题张德禄（2012）探讨了多模态学习问题，发展多模态话语分析理论中所称的“多元读写能力”。
关于多元读写能力的培养，将课堂讲授、实景实践、批评性框定和转化实践结合起来形成一个多元读写能力培养模式。
黄立鹤（2014）认为以信息技术为主要代表的科技进步为教与学带来了新的机遇，为构建虚拟教育生态环境提供了技术可能。
教师要充分利用先进技术为英语教育带来的便利，设计出符合学习规律的大学英语教学体系，调用学习者的多种模态，增强其学习效果。
张德禄和陈一希（2015）对我国外语专业本科生多元能力结构进行了探索，认为当前国际国内的综合因素要求我们重新思考外语专业本科生的培养目标。
根据新的培养目标，我们需要重新构建外语本科生的能力结构。
外语本科生的能力结构一方面要和国际接轨，另一方面要符合我国实际情况，突出我国外语专业的特色。
黄立鹤（2021）认为外语教学作为鲜活的社会活动，可从主体、活动、系统三个建模视角出发，结合多模态话语分析、多模态互动分析、多模态语料库研究、多模态认知研究、多模态教学技术研发等具体路径与方法，进行教学创新与科学研究。