多模态突出了人们做出的模式选择,以及这些选择对意义产生的社会效应。因而,社会符号学的多模态分析着重强调情境概念。情境塑造了可用于意义建构的资源,以及这些资源的选择与设计方式。人们认为,符号、模式与意义建构是相当易变的、动态的、开放的系统,与使用这些系统的社会情境密切相关。按照这一视角,模式系统中的分析意义(其资源与原则)是根植于其社会与文化情境,并通过社会文化情境来调节的。人们在制定符号时,往往是将最适于传递他们在某个既定时刻想表达意义的各种形式汇聚起来,并彼此关联。
克雷斯着重强调了意义的社会特征,并提出了动机符号概念(Kress,1997)。这一概念突出了符号制定者的能动性与符号制定过程。在《书写之前》(BeforeWriting)一书中,克雷斯(kress,1997)细致地描述了幼儿使用文本的物质性与过程,以及他们如何解释、转换并重新设计符号资源与可用的符号—这些被称为符号链条。从这个意义上讲,符号(比如谈话、手势、文字作品)可以说是符号制定者利益选择的物质结果。分析重点在于如何理解儿童的解释与设计模式,以及影响到他们解释与设计模式的更广泛的语境、历史与社会因素。从某种意义上讲,文本可以说是了解文本撰写者的一个窗口。将符号看作有动机的、不断被重新制定的内容,这吸引着学者去探讨:是怎样的兴趣与意图推动了人们选择这个符号资源而不是另一个(Kress,1993)。这种“兴趣”将人们面对各种资源做出的选择与形成符号的社会情境结合在一起又返回到通信的社会符号学理论中所讲的意义选择的重要性问题。人们可用的模型资源是该情境不可或缺的组成部分,因而说明了多模态对理解意义建构过程的重要作用。
多模态,至少在部分程度上,可以理解为在快速变化的社会与技术情境中,对跳出语言范围来进行意义建构的要求的回应。我们好奇的是,数字技术的使用如何扩展了用于通信的资源范畴,重新塑造了图像与书面语言等资源间的关系,极大地重构了空间性、具身以及风俗习惯等概念,这一切都会导致改变,产生新的文本与交互类型。
253
数字技术研究(世哲手册)
382