要特别注意的是，本节所罗列的几个概念可用于任何类型的表征或交互——无论是印刷出来的文字还是数字文本(Jewitt，2002)，有无配备技术设备的教室(Jewitt et al.,2011)，或以数字为中介的复杂交互环境，比如外科手术室(Bezemer etal.，2011)。因而，研究人员可以利用多模态来研究某个资源(如移动应用、有形环境)的模式意义潜势，以及人们如何在交互中利用这些资源。
数字技术研究的多模态潜势
本节主要介绍数字技术研究中的多模态的范畴与潜在应用，即截至目前多模态的使用情况如何、可用于解决哪些问题、有哪些贯穿于技术设计与使用评估中的研究启示。本节将讨论多模态研究的下列四项潜能：
(1)对各种模式及其符号资源的系统描述。
(2)对特定数字环境的演绎与互动进行多模态调查。
(3)识别并开发新的数字符号资源，探讨现有资源在数字环境中的新使用。
(4)提供的研究方法可用以对社会研究中的数字数据与环境信息进行收集与分析。
对模式及其符号资源的系统描述
人们在特定情境中使用技术时，可以使用多模态方法来创建所有可用的意义潜势目录。这可以通过对模式及其符号资源、物质性与模式可供性以及对某设备及/或应用的组织原则的系统描述来实现。部分多模态研究人员在“意义即选择”及元功能概念的基础上，使用一种被称作系统网络的实证方式来描绘某种模式的意义潜势。这是某个符号或词汇语法系统中可能存在的系统符号选择的粗略分类。此举勾勒出了模式资源详细阐述某个产品或交互的内容、人际与情境或组织意义的潜能。这些选项最好是某个类型选择。比如，就像克雷斯和范列文(Kress and van Leeuwen,2006)所言，视觉图像要么是“信息需求”(某种视觉问题)，要么是“信息供应”(某种陈述)不可能两者皆有。而“信息需求”要么是“两个极端”(“是”或“否”)，要么是开放问题。在分析语言之外的其他模式时，可以将部分符号联系描述为某个连续区的刻度—比如，颜色的符号层面被勾勒为一套涉及色彩、亮度、光度等的连续刻度(Kress and vanLeeuwen,2002)。系统网络提供了一种分析工具，用以勾勒符号资源范围及既定情境下某个模式的可用选项。7就这样，系统网络将对模式(或符号资源)的正式分析推向了一个逻辑极端。
第17章 研究数字技术的多模态方法
387