傳播學 | 多模態話語分析（Multimodal Discourse）

（1）概念

話語分析理論（Discourse Analysis）最初由美國學者Harris 在20 世紀50 年代提出，其核心旨趣在于從語言符號系統的角度探討話語的內涵與意義。這一理論為后續多模態話語（Multimodal Discourse）概念的提出奠定了堅實的基礎。

作為話語分析理論的前沿延伸，多模態話語研究突破了傳統語言學的界限，Kress 和 van Leeuwe 最早從社會符號學的角度對其進行定義，首次提出多模態話語的具體理論內涵，即多模態話語是指運用語言、圖像、聲音、顏色和音樂等在內的多種模態進行交際，語言與非語言資源在其中共同建構話語的意義。

2009 年，中國海洋大學教授張德祿也對多模態話語的概念進行了闡釋，認為多模態話語是指運用聽覺、視覺、觸覺等多種感覺，通過語言、圖像、聲音、動作等多種手段和符號資源進行交際的現象。

（2）多模態話語分析理論框架

①在多模態話語分析的發展進程中，Halliday 是系統功能語言學框架的代表人物，他把語篇作為一個語義單位，將語義分為概念功能、人際功能、語篇功能這三大功能。但系統功能語言學的分析還較局限于對語篇的分析，缺少了對聲音、圖像、色彩等方面的關注。

②Kress 和 van Leeuwen 在 Halliday 系統功能語言學的基礎上，將對語言學領域的分析延伸到視覺模態中，提出了視覺圖像三層含義：再現意義、互動意義和構圖意義。

再現意義涉及圖像如何代表或復現現實世界，這種意義的構建依賴于圖像對現實世界的再現方式，包括現實主義、抽象化、象征主義等不同的表現形式；

互動意義關注圖像與觀眾之間的互動關系，包括圖像中的人物如何與觀眾建立眼神接觸、表情、姿態以及圖像中包含的任何指示性符號；

構圖意義包括圖像中的視覺元素如何排列布局，如何通過視覺流程和視覺層次來引導觀眾的視線。該理論為研究視覺圖像的意義表達提供了有效途徑，這也是本文主要依托的理論概念之一。

③學者張德祿則對多模態話語分析框架進行了開創性的拓展延伸，該框架主要由四個核心層面的概念范疇組成：一是文化層面；二是語境層面；三是內容層面；四是表達層面，其中內容層面又可劃分為意義和形式兩個維度。這一綜合理論框架在視覺語法的基礎上，增加了對于話語文化和語境背景的分析，使多模態話語分析框架更加全面，尤其在模態關系方面，具備一定的創新性，因而被國內研究者們廣泛地采用。

新聞傳播學專業公眾號

微信號 : media-power

▇ 新傳考研智庫 洞察社會脈動