（1）概念
话语分析理论（Discourse Analysis）最初由美国学者Harris 在20 世纪50 年代提出，其核心旨趣在于从语言符号系统的角度探讨话语的内涵与意义。这一理论为后续多模态话语（Multimodal Discourse）概念的提出奠定了坚实的基础。
作为话语分析理论的前沿延伸，多模态话语研究突破了传统语言学的界限，Kress 和 van Leeuwe 最早从社会符号学的角度对其进行定义，首次提出多模态话语的具体理论内涵，即多模态话语是指运用语言、图像、声音、颜色和音乐等在内的多种模态进行交际，语言与非语言资源在其中共同建构话语的意义。
2009 年，中国海洋大学教授张德禄也对多模态话语的概念进行了阐释，认为多模态话语是指运用听觉、视觉、触觉等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。
（2）多模态话语分析理论框架
①在多模态话语分析的发展进程中，Halliday 是系统功能语言学框架的代表人物，他把语篇作为一个语义单位，将语义分为概念功能、人际功能、语篇功能这三大功能。但系统功能语言学的分析还较局限于对语篇的分析，缺少了对声音、图像、色彩等方面的关注。
②Kress 和 van Leeuwen 在 Halliday 系统功能语言学的基础上，将对语言学领域的分析延伸到视觉模态中，提出了视觉图像三层含义：再现意义、互动意义和构图意义。
再现意义涉及图像如何代表或复现现实世界，这种意义的构建依赖于图像对现实世界的再现方式，包括现实主义、抽象化、象征主义等不同的表现形式；
互动意义关注图像与观众之间的互动关系，包括图像中的人物如何与观众建立眼神接触、表情、姿态以及图像中包含的任何指示性符号；
构图意义包括图像中的视觉元素如何排列布局，如何通过视觉流程和视觉层次来引导观众的视线。该理论为研究视觉图像的意义表达提供了有效途径，这也是本文主要依托的理论概念之一。
③学者张德禄则对多模态话语分析框架进行了开创性的拓展延伸，该框架主要由四个核心层面的概念范畴组成：一是文化层面；二是语境层面；三是内容层面；四是表达层面，其中内容层面又可划分为意义和形式两个维度。这一综合理论框架在视觉语法的基础上，增加了对于话语文化和语境背景的分析，使多模态话语分析框架更加全面，尤其在模态关系方面，具备一定的创新性，因而被国内研究者们广泛地采用。
新闻传播学专业公众号
微信号 : media-power
▇ 新传考研智库 洞察社会脉动
热门跟贴