视觉传达多模态下的视知觉分析
多模态知识要素解析
多模态知识要素解析多模态知识要素解析1. 引言在现代信息时代，人们通过多种感官渠道接收和处理信息。
传统上，我们主要通过文字、语言和图像来获取知识。
然而，随着科技的进步，人们对于信息处理的要求也在不断提高。
多模态知识要素解析作为一种新兴的学科，目的是研究和理解多种感官输入的结合方式，以更全面地掌握知识。
本文将从多个角度深入探讨多模态知识要素解析的重要性和应用。
2. 认知科学视角多模态知识要素解析的理论基础可以追溯到认知科学。
认知科学研究人类大脑处理信息的方式，包括视觉、听觉、触觉等多个感官通道。
通过将不同感官输入整合在一起，人们更容易理解和记忆信息。
多模态知识要素解析从认知科学的角度出发，探讨不同感官输入之间的相互作用及其对知识获取和理解的影响。
3. 多模态数据来源多模态知识要素解析的关键在于整合不同的感官输入。
常见的多模态数据来源包括文字、图像、音频、视频等。
文字提供语义信息，图像提供视觉信息，音频提供听觉信息，视频提供丰富的多模态输入。
通过结合不同的数据来源，多模态知识要素解析可以更全面地把握信息的要点，提高知识的准确性和效率。
4. 多模态知识要素解析的应用领域多模态知识要素解析在很多领域都有广泛的应用。
在教育领域，多模态知识要素解析可以帮助学生更好地理解和掌握知识。
在医学领域，通过多模态知识要素解析可以帮助医生更准确地诊断和治疗疾病。
在自然语言处理领域，多模态知识要素解析可以提供更全面和准确的信息处理和理解能力。
多模态知识要素解析的应用前景广阔，对于促进人们的学习和认知发展具有重要意义。
5. 多模态知识要素解析的挑战和未来发展方向虽然多模态知识要素解析具有很大的潜力，但也面临一些挑战。
不同感官输入之间的整合需要一定的技术手段和算法支持。
多模态数据的获取和处理需要大量的计算资源和存储空间。
未来，我们可以通过深度学习和人工智能的技术手段，进一步提高多模态知识要素解析的准确性和效率。
另外，与其他学科的交叉研究也是推动多模态知识要素解析发展的重要方向，比如与认知科学、计算机视觉、语音识别等学科的协同研究。
现代视觉传达的多维感官设计运用探析
现代视觉传达的多维感官设计运用探析作者：王馨宇来源：《文艺生活·中旬刊》2017年第11期摘要：视觉传达设计在人们的日常生活中有重要的影响，是人们认识世界，表达自我的方式之一。
在科技不断发展的今天，传统的单维感官设计已经不能够满足人们的需求，因此，多种表达形式迅速出现，将视觉表达呈现的更加全面多元。
本文主要从多维感官在视觉设计中的运用进行探究，揭示这种立体多维的感官体验的重要性。
关键词：视觉传达；多维；感官设计中图分类号：J505 文献标识码：A 文章编号：1005-5312（2017）32-0035-01不同于文字的单一表达，多维感官感受世界更加真切。
因此，在视觉设计中，也会融合这些感官体验。
如何将感官体验更好地融入到现代视觉设计中，增强设计的震撼力，成了现代视觉传达设计的重点。
一、基本内涵多维感官是指包括人类的触觉、视觉、听觉等感官表达。
而视觉传达设计顾名思义是指主要通过视觉，使用文字、图像、颜色等传达思想和感情。
目前，许多的设计作品已经不仅仅是采用视觉表达，而是加入了其他感官体验，让设计更加打动人，从而获得更好的传播效果。
因此，将多维感官运用到视觉设计中是大势所趋。
二、表达基础新媒体形式不断丰富，供人们使用的工具越来越多。
智能手机，平板电脑等设备成为人们得到信息的主要工具。
互联网更是贯穿人们的整个生活，谁都离不开互联网。
传统媒介的通过文字或者语音的方式传播信息已经逐渐被淘汰。
在这样的大环境下，网络提供给视觉设计提供更多的发展空间①。
交互式技术的发展让设计者们能够迅速了解并分析出人群的审美发展趋势。
而且，科技带来创新，人们的思维不仅仅局限在一个狭小的空间里，而是放眼整个世界。
再加上人们在无数信息袭来的今天，对信息的包容也大于从前，这给视觉设计带来了更加宽松的创作环境。
与此同时，生活压力越来越大，人们主动寻求多重感官的刺激。
上述的这些条件均为多感官在视觉设计上的运用提供了基础。
三、具体运用1.创设情境。
多模态话语分析下我国原创绘本中传统艺术的视觉叙事研究
多模态话语分析下我国原创绘本中传统艺术的视觉叙事研究绘本是儿童的第一本读物，它能够帮助儿童建构精神世界，培养多元智能。
目前在中国，国外引进版绘本占比远远高于国内原创绘本。
低龄儿童在自我意识刚刚建立的初始阶段大量接触外来文化不利于发展其对本民族的身份认同感，母语文化应该在孩子的心灵扎根，为孩子提供精神支撑，中国孩子需要在阅读中形成植根于中华文化的思考和表达，因此怎样使中国原创绘本展现中华优秀传统文化是一个值得思考的问题。
绘本包括文字和图画两个组成要素，图画关系到绘本的艺术性以及绘本阅读的意义和价值，当前对绘本的研究，特别需要对图像这种特殊的表达方式和叙事体系展开深入的认识和发掘。
对图画而言，图在外表上以静态呈现，看似缺乏对读者解读过程的引导性，或者说对视觉线索的规定性较弱，但实际上眼睛对图片的阅读是遵循一定的法则的。
纯粹而独立的单个图像本身或许无法全面地运用叙事法则，但可以通过叙事元素的组合、叙事策略的应用、叙事结构的设计使叙事内容获得充分的意义，绘本要通过连续的图画组合合理地讲述故事，表达深层意义也需要遵循视觉叙事语法。
对视觉语法的解读取决于不同的艺术文化背景和图像符号认知，因此本文的研究重点是总结以中国传统艺术表现手法为主的中国原创绘本的视觉叙事结构并对它进行符合中国传统艺术理念的图像化解释。
1 克莱尔·佩因特的图像叙事框架简介视觉叙事语法建立在多模态话语分析理论的基础之上。
多模态话语分析是在英国学者韩礼德（Halliday）创建的系统功能语言学的基础上做出的突破，它打破了语言学领域边界，认为意义的构建依赖于所有符号资源的相互作用，语言只是其中的一种。
于是学者们将研究范围扩展到多个研究领域，将文本与不同的符号模态结合在一起，如克瑞斯和范勒文（Kress and Van Leeuwen）强调视觉模态间的互动研究，通过海报、广告中的视觉图像传递意义。
克莱尔·佩因特（Clare Painter）在克瑞斯和范勒文的研究基础上，重点考察了连续图像的视觉叙事过程，详细地对视觉语法进行了归类概括，从静止的画面发展到联系上下文全面考虑视觉转化的动态视角，探讨图文互动的意义。
视觉多模态基础模型
视觉多模态基础模型视觉多模态基础模型是一种广泛应用于机器学习和人工智能领域的模型，它能够从不同的视觉输入中提取特征，并将这些特征进行整合和学习，以实现更全面、准确的任务理解和决策。
视觉多模态基础模型是通过结合多个模态的信息，例如图像、视频、文本和声音等，来获得更全面的理解。
通常情况下，每个模态都有其独特的特征和信息，而视觉多模态基础模型能够将这些模态之间的关联性进行学习和建模，以获得更深入的分析结果。
在图像领域中，视觉多模态基础模型能够通过提取图像的特征和研究图像之间的语义关系，来实现图像分类、目标检测、图像分割等任务。
同时，它还可以从文本中提取关键信息，并将其与图像的特征进行整合，从而实现更准确的图像理解和分析。
在视频领域中，视觉多模态基础模型能够将视频的帧分析为时间序列，并将每个时间点的图像特征与音频特征进行关联。
通过这种方式，它可以实现视频的行为识别、情感分析和动作检测等任务，从而为视频内容提供更全面的理解和解释。
此外，在自然语言处理领域中，视觉多模态基础模型可以将文本和图像进行联合建模，以实现更准确和全面的文本理解和生成。
例如，它可以通过分析图像中的目标和场景来生成描述性的文本，或者通过将自然语言中的描述与图像进行关联，从而实现图像生成和图像问答等任务。
视觉多模态基础模型的应用领域非常广泛，它可以在计算机视觉、自然语言处理、语音识别等多个领域中发挥重要作用。
通过结合不同模态的信息，它能够突破单一模态的限制，获得更全面、准确的分析结果，从而提高了机器学习和人工智能应用的效果和可靠性。
在未来，随着深度学习和神经网络等技术的不断发展，视觉多模态基础模型将会变得更加强大和智能化。
它将继续推动计算机视觉和人工智能领域的发展，为我们提供更加智能、个性化的服务和应用。
因此，我们有必要深入研究和探索视觉多模态基础模型，以更好地应用于实际场景中，为人们带来更多便利和创新。
视觉传达设计中视觉元素的运用分析
视觉传达设计中视觉元素的运用分析视觉传达设计是一门广泛应用于各种媒体中的专业技能，它通过图形、颜色、图像和文字等视觉元素，来传递信息、表达情感和引起观众的兴趣。
在视觉传达设计中，视觉元素的运用起着至关重要的作用，它们不仅能够增强作品的吸引力，还能够帮助设计师更好地表达自己的创意和意图。
本文将对视觉传达设计中视觉元素的运用进行分析，以期为设计师提供一些有益的参考和借鉴。
我们需要了解视觉传达设计中常用的视觉元素有哪些。
在视觉传达设计中，常见的视觉元素包括图形、颜色、线条、形状、质地、空间和图像等。
这些元素在设计中起到了连接观众和设计作品的重要作用，通过它们的巧妙运用，设计师可以让作品更加生动、有趣和富有表现力。
我们来分析一下视觉元素在视觉传达设计中的具体运用。
首先是图形，在设计中，图形可以用来构建整体的布局和结构，也可以用来表达设计主题和情感。
在海报设计中，图形的选择和排列可以帮助设计师更好地传达主题和信息，吸引观众的眼球。
颜色也是视觉传达设计中非常重要的一个元素，不同的颜色可以传递不同的情感和意义。
红色代表热情和活力，蓝色代表冷静和理性，黄色代表阳光和快乐等。
设计师可以根据设计的目的和主题选择合适的颜色，来达到更好的传达效果。
除了图形和颜色，线条、形状、质地和空间也是设计中常用的视觉元素。
线条的粗细和长度可以影响观众的视线和心情，形状的大小和比例可以影响观众的感知和理解，质地的粗糙和光滑可以影响观众的触觉感受，空间的大小和距离可以影响观众的视觉体验。
设计师可以通过运用这些元素，来呈现出丰富多彩的设计效果，增强作品的表现力和感染力。
我们要注意视觉元素在设计中的综合运用。
视觉元素之间的搭配和组合，可以产生丰富多彩的效果。
在平面设计中，图形和文字的组合可以形成完美的平衡和和谐，图像和颜色的搭配可以产生动态的视觉效果，线条和形状的组合可以呈现出丰富多彩的结构和形态。
这些综合运用，不仅可以增强作品的表现力，还可以更好地传达设计的意图和情感。
多模态视角下的Vlog话语分析
多模态视角下的Vlog话语分析近年来，随着社交媒体的快速发展及用户对多样化内容需求的不断提升，Vlog（Video Blog的缩写，即视频博客）在中国的流行度不断攀升。
Vlog是一种以视频形式记录个人生活、经历和观点的媒体形式，其与传统博客相比，更加直观、生动，能够提供给观众更真实的观察视角。
多模态视角下的Vlog话语分析，即从视觉、听觉和语言三个方面来分析Vlog的内容和表达方式。
从视觉方面来看，Vlog通过视频呈现给观众丰富多样的画面。
主播通常会利用手持摄像机或手机等设备进行拍摄，以第一人称视角展示自己的生活场景、旅游经历或其他有趣的事物。
视觉元素的直观表达，使得Vlog更容易引起观众的兴趣和共鸣。
从听觉方面来看，Vlog通过声音来传达信息和情感。
主播通常会在视频中配上背景音乐、环境音效或者自己的解说声音。
背景音乐的选择和运用，可以增加视频的艺术感和情绪表达。
环境音效的运用可以使观众身临其境地感受到主播所处的环境。
主播的解说声音也是Vlog中重要的听觉元素，通过其语速、语调和表达方式，主播可以传达出自己的情感态度，引导观众对视频内容的理解和感受。
从语言方面来看，Vlog的内容通常会配以文字说明和主播的口语表达。
文字说明通常出现在视频的开头或结尾，用来简洁明了地介绍视频的主题或传递观点。
而主播的口语表达，往往更加真实、亲切，能够更好地拉近与观众的距离感。
主播的措辞、词汇选择和语言风格，可以塑造出个人化的形象，增加观众对主播的认同感。
多模态视角下的Vlog话语分析包括视觉、听觉和语言三个方面。
通过从不同角度分析Vlog的话语特征和表达方式，可以更好地理解Vlog的传播效果和社交影响力。
对于Vlog 主播来说，深入了解和把握这些话语特点，可以更好地制作和传递Vlog内容，吸引更多的观众关注和参与。
视觉传达设计的多元化与表现方式分析
视觉传达设计的多元化与表现方式分析一、多元化视觉传达设计的多元化主要体现在以下几个方面：1.媒体多元化：视觉传达设计可以运用于各种不同的媒体平台，如印刷品、网络媒体、电子媒体和广播媒体等。
不同的媒体平台有不同的特点和要求，因此视觉传达设计师需要根据具体的媒体要求做出相应的设计。
2.形式多元化：视觉传达设计可以采用多种不同的表现形式，如平面设计、包装设计、插图设计、展览设计、动画设计等。
每种形式都有不同的需求和特点，视觉传达设计师需要根据具体任务选择合适的表现形式。
3.风格多元化：视觉传达设计具有丰富多样的风格和风格，如抽象风格、象征风格、写实风格、简约风格等。
不同的风格可以传达不同的情感和观念，视觉传达设计师可以根据具体的设计目标选择合适的风格。
1.色彩：色彩是视觉传达设计中一个非常重要的表现手段。
通过使用不同的颜色和色彩搭配，可以表达不同的情感和观念。
红色可以表达激情和活力，蓝色可以表达冷静和理性，黄色可以表达温暖和快乐等。
2.构图：构图是指将不同的元素组织在画面上的方式。
视觉传达设计师可以通过选择不同的构图方式来达到不同的视觉效果，如对称构图、不对称构图、平衡构图等。
不同的构图方式可以给人不同的感觉和体验。
3.字体：字体也是视觉传达设计中一个重要的表现手段。
不同的字体可以传达不同的情感和观念，如宋体字体可以传达稳重和正统，楷体字体可以传达优雅和文化等。
视觉传达设计师可以根据具体的设计目标选择合适的字体。
视觉传达设计具有多元化的表现方式。
通过运用不同的媒体、工具和技术，以及采用不同的色彩、构图、字体和图像等手段，视觉传达设计师可以创造出丰富多样的视觉效果，传达不同的信息、观念和情感。
广告语篇视觉语法下的多模态化
关键词：多模态化；视觉语法；语篇分析1背景自20世纪90年代以来，多模态话语分析开始在语言学界兴起，也逐步成为语篇分析研究当中的新热点之一。
随着现代科学技术的发展，尤其是计算机科学的迅速发展，大众传媒的宣传方式以及互动模式都发生了深刻的变化。
单一的语言媒介逐渐被由语言、图像、声音等构成的复杂媒介所取代[1]。
在此背景之下，胡壮麟教授[2]在其文章中指出，在人类进入社会符号学的多模态化的新世纪，对多模态识读能力的培养应引起重视。
接下来文章将分为三个部分阐述：1)多模态话语的定义；2)多模态话语的发展简史及现状；3)广告视觉语法关联的实例分析。
2多模态话语2.1多模态话语的定义首先要明确的是，多模态这个术语指的是一种现象，而不是一种理论或方法，因为话语几乎总是多模态的现象。
多模态话语分析认为‘语言’只是制造意义的众多资源之一，一个文本，一个复杂的符号实体就具有独特的物质潜力和社会塑造力[3]。
在通常情况下，多模态这个术语表示的是不同的符号模式(例如语言和图像)在给定的话语或者话语类型中被组合或者整合：例如，口语话语将语言与语调、语音质量、面部表情、手势和姿势以及自我表现的方面(如服装和发型)结合在一起[4]。
另外，朱永生教授[5]在其论文中区分了模式、媒介与模态的差别，在他看来模态指的是交流的渠道和媒介，多模态话语则包括了语言、技术、图像、颜色、音乐等符号系统。
而我们在这里讨论的多模态和多媒体又是有所区别的，对于二者概念的混淆认识会导致对多模态话语定义的模糊认识。
“模态是可对比的对立符号系统，媒体是符号分布印迹的物质手段；模式是用某种媒体表达信息的特殊方式，而媒体是表达信息的物理工具”[2]。
也就是说，我们在利用眼睛、耳朵、鼻子、手等身体部位感受外部客观世界的时候，所产生的例如视觉、听觉、嗅觉、触觉等感官体会，就是媒体和模态的不同表现，前者是表达信息的工具，后者是特殊的符号系统。
综合上述学者的观点，笔者认为多模态话语其本质上是多样的：手势、语言、图像(静止或移动)、写作、音乐(在网站上或电影中)，这些以及三维实体，都可以被纳入多模态话语的整体之中。
视觉传达设计的多感官体验分析
视觉传达设计的多感官体验分析在当今的设计领域，视觉传达设计不再仅仅局限于单一的视觉元素呈现，而是逐渐拓展到多感官体验的营造。
多感官体验的融入为视觉传达设计带来了全新的维度和可能性，使设计作品能够更深入地触动受众的内心，引发更强烈的情感共鸣和记忆留存。
一、视觉传达设计中的视觉元素视觉，作为我们获取信息的主要方式，在视觉传达设计中占据着核心地位。
色彩、图形、字体等元素的巧妙运用，能够迅速吸引观众的注意力并传达关键信息。
色彩是视觉传达中最具影响力的元素之一。
不同的颜色能够引发不同的情感反应，例如红色常常代表热情和活力，蓝色则给人以平静和信任的感觉。
设计师通过精心选择和搭配色彩，为作品营造出特定的氛围和情感基调。
图形在视觉传达中具有直观性和简洁性的特点。
简洁明了的图形能够快速传递信息，复杂的图形则可以引发观众的深入思考和探索欲望。
独特的图形设计能够使品牌或作品在众多竞争中脱颖而出。
字体的选择和设计同样重要。
不同的字体风格传达出不同的个性和情感，比如优雅的手写体可以增加作品的艺术感，而简洁的无衬线字体则更适合传达现代、高效的信息。
二、听觉元素在视觉传达设计中的作用除了视觉元素，听觉元素也开始在视觉传达设计中发挥越来越重要的作用。
声音可以增强作品的氛围和情感表达，为观众带来更丰富的体验。
例如，在广告设计中，搭配与画面相符合的背景音乐能够强化品牌形象和产品特点。
欢快的音乐可以让观众感受到产品带来的愉悦和轻松，而激昂的音乐则能激发观众的激情和动力。
在网页设计中，适当的音效和提示音能够提高用户的交互体验。
比如点击按钮时的清脆声音，或者加载页面时的舒缓音乐，都能让用户在使用过程中感到更加舒适和自然。
此外，有声读物、音频标识等也是将听觉元素与视觉传达相结合的创新形式，为那些视力障碍者或在特定环境下无法专注于视觉的人们提供了获取信息的新途径。
三、触觉元素在视觉传达设计中的体现触觉虽然在传统的视觉传达设计中不太被重视，但随着技术的发展和人们对体验的追求，触觉元素也逐渐崭露头角。
视觉传达设计中视觉元素的运用分析
视觉传达设计中视觉元素的运用分析视觉传达设计是一门通过视觉元素来传达信息、情感和理念的艺术和技巧。
视觉元素是构成视觉传达设计作品的基本要素，它们包括了点、线、面、色彩、形状、纹理等。
这些视觉元素的运用直接影响着作品的表现力和沟通效果。
本文将就视觉传达设计中视觉元素的运用进行深入分析，希望能够帮助读者更好地理解和运用这些元素。
让我们来看一下视觉传达设计中最基本的视觉元素——点、线和面。
点是最基本的几何形状，它代表了位置和空间。
在视觉传达设计中，点常常被用来表现关键的元素，比如标识、图标等。
线是由点延伸而成的，它可以用来表示方向、运动和连接。
在设计中，线的运用可以帮助构建画面的结构和节奏。
而面则是由线围成的，它代表了空间和形状。
在设计中，面的运用可以帮助构建画面的整体布局和视觉效果。
色彩是视觉传达设计中非常重要的视觉元素之一。
色彩不仅可以用来表现现实世界的色彩，还可以用来表达情感、理念和品牌形象。
不同的色彩组合会产生不同的视觉效果，比如红色代表热情和活力，蓝色代表冷静和理性，黄色代表活力和欢乐。
在设计中，色彩的选择和搭配需要根据作品的目的和受众来进行合理的运用。
色彩的明度、饱和度和对比度也会影响作品的视觉效果，设计师需要对这些属性有清晰的认识和把握。
形状和纹理也是视觉传达设计中常用的视觉元素。
形状可以用来表达物体的外观和结构，比如圆形代表柔和和和谐，方形代表稳定和坚固。
在设计中，形状可以用来构建画面的关键元素和构图结构。
而纹理则代表了物体表面的质感和特征，它可以用来丰富和增强作品的视觉效果。
在设计中，纹理的运用可以帮助产生更加生动和具有层次感的作品。
除了上述的视觉元素，运动和时间也是视觉传达设计中需要考虑的要素。
运动可以帮助产生动态感和节奏感，它可以通过图像、文字和其他视觉元素来表现。
在设计中，运动可以用来引导观众的视线和增强作品的表现力。
而时间则是指作品的持续性和变化性，它可以通过动画、视频等方式来呈现。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
2016年12月
第31卷第23期渭南师范学院学报
Journal of Weinan Nor^nal UniversityDec. 2016 Vol.31No.23
【艺术研究】
视觉传达多模态下的视知觉分析冯文博(渭南师范学院莫斯科艺术学院，陕西渭南714099)
摘要:研究数字环境下，视觉传达多模态下人的视知觉表现。方法：从人类认知事物的环境变化入 手，把虚拟作为数字技术下视知觉的主要特征进行分析，探讨了人认识活动被动到主动的转变，并随着对 视觉信息多元化的理解,人类记忆的矛盾也开始凸显。结论:提出了在多模态的视觉信息传达中，人类视 知觉体验发生了变化，视觉信息内容表现形式和视觉信息传达手段的多样化，以及人和信息之间交互关系 的增加，也让审美主体的审美体验越来越个性化、风格化。关键词：视觉传达；多模态;视知觉；视觉语言中图分类号:J0-05 文献标志码:A 文章编号= 1009-5128(2016)23-0093-05收稿日期=2016-10-09基金项目：渭南师范学院特色学科建设项目：秦东非遗文化传承的多模态（14TSXK09)作者简介：冯文博（1979—），男，陕西咸阳人，渭南师范学院莫斯科艺术学院副教授，艺术学硕士，主 要从事民间艺术数字化研究。
一、发展变化中的视觉形式随着社会信息化和数字化的普及，我们面临的 视觉形式也产生了变化，其中最主要的变化就是视 觉信息的传播由单模态向多模态转变。单模态下 的信息传播主要以单一的手段或者形式完成，比如 图形模态、图像模态、声音模态、视频模态、交互模 态等;多模态下的信息传播可以是两种或者两种以 上的单模态相互组合，形成传播手段和承载形式完 成信息传达。这种变化的主要原因在于，随着科学技术的发 展，受众对信息载体的要求越来越高，信息的表现 形式也越发复杂和多样。这种多样化的视觉信息 表现形式在信息传达中，不仅要考虑形式自身的表 现能力、表达方式、形式美感以及形式中所包含的 内容，还要考虑人的视知觉反应、群体心理特征、个 体的人生经验和视觉体验。同时在以互联网为基 础、数字技术为支持的环境下，技术因素也是其发 展的重要成因。多模态正是在这种数字语境下出现的信息传 播形式。互联网作为受众日常生活的重要组成部
分，正是这种生活方式的转变使得信息传播方式逐 渐转变，原有的单一模态的、线性的传达形式转为 多模态、非线性的形式，数字技术更是让这种形式 有了更大的发展空间和表现力。
二、视知觉心理活动(一）认知环境的变化视知觉是人类对事物认知的主要手段，“而视 觉知觉则包括图形知觉、图像识别、空间知觉等，是 人从客观环境的许多刺激物中区别某种图形，识别 熟悉的图像，产生三维空间感的能力，’⑴23。不论 是图形知觉、图像识别还是空间知觉，这都是人类 对认知客体的视知觉感受，这种感受可以是图形图
像和形状色彩，也可以是客体的运动变化。如果认 为这就是主体对客体的视觉知觉，那就错了，就人 类产生的视觉认知来说，除了认知客体自身外，客 体所处的环境也是重要的组成部分。环境的不同， 使得人类在认知过程会产生差别，同样大小的一个 黑圆，分别位于大小不同的方形环境中，或者放在 大小不同圆的包围中，给人的感觉却是形状大小不 一样（如图1)。同样长短的直线因为环
1^1丨为环境不同，给• 94 •冯文博:视觉传达多模态下的视知觉分析第31卷
人造成长短不一的错觉（如图2)
在数字技术的影响下，视觉形式发展了（单模 态到多模态），人类认知事物的环境也逐渐发生变 化。在传统情况下，人类的视知觉产生是在一个真 实的光影环境下，光线和阴影是视知觉发生的前提 条件。正如阿恩海姆所说:“明暗是个别和独立的 物体的一个属性，而光线照射却为一切物体的存在 提供了一个共同的基础。有了这个基础，物体和物 体的各个部分才能从黑暗的深渊中显现出 来。，，[2]442光线通过明暗、色彩、强弱等形成一定的
环境氛围，影响受众的主观视觉认知。在视觉传达 过程中有些环境是人类有意形成的，目的无外乎加 强信息表现的力度，加强视知觉的强度。换句话说 环境也是有“意味的形式”。环境的视觉认知主要 是以色彩、光影的象征、主体和背景相互对比衬托 来实现的（如图3)。这种衬托的元素越多，主体的 视知觉范围越明确，衬托环境数量、内容、关系的变 化影响人的视知觉认知。在新的数字语境下，人类 的视知觉环境发生了改变，虚拟是其主要特征。虚 拟是相对于真实环境而言的，数字虚拟下的视觉认 知环境，更多地依靠计算机、数据头盔、环幕、数据 手套、全息投影等技术设备来实现。这种虚拟环境 人为因素比真实环境要大得多，真实环境下的人为 设计虽然也有，但是大都因势利导，不像虚拟环境 中纯粹的人为设计操作，使得信息的传达更具目的 性。
图3在黑色背景衬托下的白色三角fra
(二） 从被动接受到主动参与人类的认知活动是从知觉开始的，当感觉的视 觉信息被注意才能完成识别。人类的注意行为通 常分为主动注意和被动注意，被动注意是因为客体 对象的原因，刺激到受众从而产生注意行为。传统 环境中，被动注意下的视觉信息是信息编码者提前 编辑设计好的，受众只能被动接受，在认知过程中 处于被动接受地位，然后提出批评。如某个活动的 标志设计、海报、宣传标语、形象大使、宣传片等，这 种提前被设计好的视觉信息受众无权修改变换，只 能被动接受。主动注意指的是受众有意识的认识 客观对象，而产生的意识行为。主动注意下受众的 行为模式会受到改变，在信息的编码和解码过程 中，受众会成视觉语言信息的主导者，从而主动参 与到信息传播过程中。如在数字环境中我们了解 一个地方，除了在官方网站、微博、微信和信息圈 中，通过图形图像、视频动画、交流互动等了解其文 化意义表达外，我们又可以主动参与其中，把自己 对该地方的了解通过数字手段表达出来，个人的表 达可能会有些偏颇，但是不能否认它在一定程度上 完善了该地方的视觉语言，有甚至还会成为该地方 另一个文化。视觉语言的多模态呈现则最大化的 加速了这一过程，其加速不仅体现在视觉信息交流 手段方式的变化，更体现在视觉信息内涵的拓展 上。(三） 对视觉信息的理解多元化随着人们逐渐参与到视觉信息本体的构建上 来，把自己对视觉对象的理解看作是对象的一部 分，不再人云亦云，随之而来的就是人们对视觉信 息表达方式提出更高的要求，于是视觉信息多模态 表现应运而生。应该说这两者之间是一个相辅相 成的关系，相互促进的关系，多模态化视觉信息表 达手段丰富了人类的语言表达能力，人类对信息本 质的追求又更进一步促进了表达手段的发展。就 认知心理学来说，人类所有的行为意识，都可以理 解为对信息对象的问题解决过程，从对信息的输入 认识一信息的编码加工一信息的输出传播，无不显 示其对信息的理解。数字环境下的今天，人们对信 息尤其是视觉信息的认知已经到了主动阶段，也就 是说人们不仅仅限于对视觉信息本身的认识，更要 求在自我理解下对其进一步进行设计加工，形成视
觉表达，进而进入大众传播（如图4)。2016年第23期渭南师范学院学报
• 95 •
(二）视知觉的变化信息多模态下，人的思维活动变化了，相应的 人的视知觉也跟着改变。首先改变的是人的视觉 注意力，人的视觉注意力一般受客体和客体存在环 境的影响，信息多模态下，客体表达方式多样化以 及虚拟环境的强化认知，使得视觉注意力得到加 强;其次视觉记忆加快了，当人单独通过视觉记忆 感知一个物体时，思维所形成的联想和想象是单纯 的视觉式的，如果这种记忆感知再配合听觉、嗅觉、触觉等方式，其造成联想和想象则是立体的、全方 位的，这种对神经元多层次的冲击，让记忆的速度 被无限加快了。第三就是视觉想象力的降低，当我 们告诉一个人狮子的外貌的时候，他对狮子的想象 则是无穷大的，是各式各样的，因为这一切全部源 于你的语言描述，就如同中国民间艺人对狮子的造 型一样。但是当你不仅让他看了狮子的造型，还介 绍甚至让他身临其境感受狮子的威猛，那么它对狮 子的想象就受到局限，他甚至再也画不出个性化的
是信息二次加工，是对信息的解码到编码加工的过 程。多模态化的视觉信息传播使得信息源在更直 观的方式下被识别、记忆，同时其内涵也不断得到 扩充。随着人的知觉经验不断增加，人类在数字技 术的支持下，利用人机交互的手段、通过多模态的 方式，信息源被无限的抽象和简化了。
三、信息多模态下思维活动模式分析(一）思维活动的变化人的思维活动，不仅受认知环境影响，更是受 到信息传达手段、方式的影响。当我们的神经元感 受到的信息越多，信息强度越大，大脑所产生的思 维反应就越大。信息单模态下，大脑接受的信息比 较单一，思维活动相对的比较单一，层级也比较低。 信息多模态下，大脑接受得信息渠道变多，手段变 强，本来只是一个图形模态传递的信息，变成声音、 文字、图形图像、视频等多个模态组合传播（如图 5)，受众可在角度、多层级，多维度的了解信息，思 维活动相应的也变得强烈深刻起来，受众的思维受 到的影响因素随之变得多起来。
图4视觉信息多元化示意图认知心理学之所以被称之为信息加工理论，就 是因为它以信息加工为核心来理解和解释人类的 高层次思维活动和信息加工之间的关系。在这种 关系下多模态化视觉信息被人的视知觉感知，通过 知觉、注意、理解、思维活动、视觉语言和人工智能 等方式完成。(四）记忆矛盾显现普通心理学将记忆定义为:经验的印留、保持 和再作用的过程。[3]71记忆的过程就是把感知到的 信息经过编码转化成人脑可保存的模式。如果说 传统环境下记忆的目的是存储，那么视觉语言多模 态情况下记忆的目的已经不再仅仅是存储，更多的
视觉信息
信息传达在虚拟环境下的知觉模态图5信息多模态下视知觉活动
j多模态信息媒体沉
浸式虚拟环境