國產漫畫敘事的跨媒介探究

張開瑋 | 湖北美術學院影視動畫學院

引言

數字信息時代的飛速發展給動漫行業帶來了巨大的影響，其中漫畫作為大眾化的圖像敘事藝術語言也逐漸發生變化。從藝術媒介傳播的發展歷程來看，漫畫既屬于一種藝術媒介，同時也是一種傳播媒介，尤其當紙本不再是唯一的傳播媒介之后，漫畫的跨媒介性正以不同的形式走入大眾視野。目前將漫畫敘事作為跨媒介敘事的研究范疇主要有兩個方面，一方面從媒介傳播的視角進行分析，認為漫畫作為敘事媒介在文化交流的過程中具有信息運輸與傳播的功能。例如，在亨利?詹金斯的《融合文化》中，認為跨媒體敘事最理想的形式，就是每一種媒介出色地各司其職，各盡其責—只有這樣，一個故事才能夠以電影作為開頭，進而通過電視、小說以及連環漫畫展開進一步的詳述[1]。另一方面的研究路徑是將文學、漫畫、語言等媒介作為表達的跨媒介研究，側重研究不同媒介間性。即在對源文本諸多的不同媒介敘事的個性中尋找共同特質，注重媒介承載的文化維度的關系。例如，國內著名學者龍迪勇教授提出的“出位之思”就是從美學、敘事學的基礎來解析藝術跨媒介的核心。

盡管漫畫真正走向一門獨立的藝術門類還是近兩百年間的事情[2]，但是它以連續性的畫面、文字和畫格構成的敘事體系，成為了文學圖像化的視覺表征。借助移動互聯網傳播平臺的迭代更新，漫畫敘事在被不同的數字媒體進行演繹與重創，由此對漫畫跨媒介視覺敘事的研究邊界與漫畫作品創作實踐的發展范式都產生出極大的影響。針對漫畫敘事的跨媒介研究，倘若局限于探討漫畫與不同媒介形式之間的轉換關系是否存在偏頗？又或者數字化敘事形式是否能夠增強漫畫與文學、電影、電視、電子游戲等媒介之間的創新？筆者認為，其中不可回避的問題是要圍繞漫畫的“跨媒介性”與“源文本”之間的互文關系展開討論。在這個前提下，回溯到漫畫符號視覺轉化的敘事進程中，從畫格、敘事畫面、閱讀節奏為主要信息載體進行分析，并以國產漫畫《長歌行》為例，揭示出漫畫敘事作為一種媒介間性的跨媒介藝術張力。

一、漫畫敘事的跨媒介性

漫畫是一種獨特的敘事形式，它不同于小說、電影、動畫或任何其他媒介。把漫畫作為媒介最早可追溯至1827年羅多爾夫?托普弗的《俄巴底亞?歐德巴克歷險記》。在托普弗手中，漫畫真正由“表意的工具”轉變為“敘事的工具”[3]12。 回顧漫畫在中國的發展歷程，曾被當作報刊上粗淺的讀物。伴隨印刷媒介的變化發展，運用漫畫進行敘事擁有各式各樣的稱謂，例如“卡通漫畫”“連環漫畫”“故事漫畫”等等，而這些都是以連續性的圖文關系互為前提進行敘事藝術的創作。其中，涉及到漫畫敘事的跨媒介性，應該從漫畫藝術的媒介特性來闡明，即按照漫畫結構形式劃分，將漫畫敘事視為一門運用連續性的圖畫與描述性的話語、對話氣泡共同敘事的藝術。艾斯納在漫畫藝術課《繪畫故事與視覺敘事》中將漫畫定義為一種文學藝術形式，認為其本質上是一個由畫面組成的視覺媒介，強調畫面是敘述文本的延伸[4]。在傳統紙質媒介時代，其敘事話語是以頁面為單位，圖畫與文字等內容放置在漫畫分格這樣的形式里去表現敘事結構；在數字媒介時代，數字技術改變了紙質印刷漫畫的表現形式，其中最為明顯的視覺敘事是從靜態的頁面到多元化的電子屏幕的轉換。這樣的變化，一方面給讀者帶來了閱讀體驗的多樣化；另一方面，促使漫畫敘事的媒體傳播形態發生了變化。例如， 在“快看漫畫”“騰訊漫畫”等國產漫畫APP傳播平臺，產生出介乎于漫畫和動畫之間的一種交叉融合型的漫畫形態“微互動漫畫”“漫劇”等。隨著數字技術的發展，對漫畫源文本的挪移與再造借由視覺化的語言分散在各種敘事媒介中，形成了一種跨媒介的創意樣態。

盡管漫畫的跨媒介敘事往往會針對“源文本”的忠實性展開改編，但是當一種媒介被另一種媒介轉化與吸收，會促使敘事過程被多樣化的藝術媒介所展示出來，進而給受眾帶來不同的審美體驗。值得注意的是，跨媒介性成為數字時代國產漫畫敘事的本質，它間接地豐富了與不同藝術媒介之間的敘事理論研究。在印刷時代，國產漫畫敘事的發展也經歷了由四格、多格、連續性的圖格展現敘事風格。這里的圖畫作為直觀的視覺媒介與文本符號，形成了具象性的語意感知。在此過程中，從圖畫到文字，再從文字到圖畫的循環交織的過程，構成了漫畫敘事這類型媒介的基本結構，其中包含了畫格、圖畫、面板、對話框等視覺元素，它們將文本運用可視化的語言表達出來。圖畫與文字兩種媒介互為對象、互相轉換，形成一種敘事內部性的變體，即漫畫敘事系統內部產生媒介融合關系。然而，漫畫的跨媒介敘事研究注重對“源文本”與不同媒介間的跨界，不再是限制于單一或雙重媒介中，而是開源式與更廣泛的媒介之間的融合。例如，數字時代國產漫畫與電影、電子游戲、舞臺劇等不同敘事媒介的演變與交融。

在跨媒介藝術研究的學術傳統中，常以萊辛《拉奧孔》中的詩與繪畫之間的關系作為研究不同媒介之間的關系淵源。這部美學著作中揭示出詩（代表一般文學）和畫（代表一般造形藝術）的界限，并找出一切藝術的共同規律以及各門藝術的特殊規律[5]。如果說圖畫與文字是漫畫敘事藝術中不可分割的要素，那么它們作為媒介在各自互為表述對象上的轉化關系就是漫畫跨媒介敘事研究的基礎。通過文字的敘述與圖畫的視覺傳遞，媒介之間構成了有意義的信息交流。電子媒介的興起使得印刷媒介打破了傳統的閱讀模式，以圖文結合的敘事由平面化的靜止形態，轉向融合聽覺、視覺、甚至AR觸覺的多樣化媒介敘事的交互過程。敘事信息的編碼能夠借由多種媒介的跨界融合而變得豐富，這是由于漫畫這類型媒介與其他媒介之間的差異性帶來的，主要表現為以下兩個方面：

1.漫畫作為連續性視覺的開源轉向

“開源”一詞常指計算機軟件代碼的公開與共享，這里意指漫畫敘事過程中的視覺元素能夠被另一種媒介解讀與創造，其畫面上的開源性催生出故事走向“視覺化”的跨媒介演繹過程。代表著大眾通俗文化的漫畫媒介，在很大程度上是建立在連續性的圖畫與文字之間的互文關系中。這里的“連續性”包含了敘事畫面與文字之間作為互文性的指涉關系?；ノ男砸卜Q之為“文本間性”，是指任何文本的建構都是引用的鑲嵌組合，任何文本都是對其他文本的吸收與轉化[6]。故事世界的跨媒介互文關系包含視覺語言之間的相互指涉，以及傳播媒介之間的相互映射。對于媒介的技術與傳播而言，用漫畫來解讀視覺開源性則顯得更為高效。因為漫畫總能屹立于多種媒介之間，即一方面漫畫的視覺表達可以給予文學化的特征，例如文本至漫畫敘事的改編，另一方面漫畫作為一種圖像順序編排組織的媒介，能夠被電影、動畫等以時間敘事媒介來轉譯。所以，漫畫敘事上的開源性可以看作是構建不同媒介敘事文本互動的重要視覺基礎。例如，漫畫《長歌行》被改編于不同的媒體平臺，敘事也隨著不同的媒介特點表現出故事情境的變化。在漫畫書中，通過連續性的畫面描繪出永寧公主跌落的瞬間（圖1）運用馬匹跌落的連續性動態傳遞出來；當它被短視頻及動畫改編時，畫面則采用運動鏡頭與模糊的視覺特效，放大了永寧公主即將落入山谷的險境（圖2）；在真人實拍電視劇中，則運用搖移跟拍的鏡頭畫面，從女主角背面的視角展現出命懸一線的緊迫情節（圖3）。

圖2 長歌行 短視頻

圖3 長歌行 影視

通過連續性的分格順序建構出來的漫畫敘事情境，不僅體現出畫面善于直觀性表述的長處，而且當它們被電視劇、短視頻動畫化等基于時間維度的媒介重新演繹時，其敘事話語會隨著不同的媒介載體顯得更加積極主動。作為對“源文本”視覺敘事的表述，漫畫通過組織頁面上連續性的畫面，呈現“故事”講述的方式，故事的情景通過分格內的畫面與對話得以表達，它們在某種程度上能夠激發與其他媒介之間的聯系，在視覺表現上隨著情節敘述而演變，并讓故事在不同的視覺媒介上構筑出精彩的敘事情境。

2.淡化的“格子”與不被遺忘的節奏

格子是漫畫敘事信息傳遞中最小的單位，也是構成漫畫敘事語意的基本元素。漫畫中格子與格子之間的視覺表現成為敘事語言的關鍵。比如，從葉淺予的長篇連續漫畫《王先生》到張樂平的《三毛流浪記》，畫格無論大小或形狀相異，都在閱讀的過程中給予積極的表意內涵。因為格子的編排對閱讀視線的引導有著緊密的聯系，這是源于人類知覺封閉系統，即我們都通過感官經驗將世界理解為一個整體，但同時我們的感官只能展現世界的不完整片段[7]。

法國漫畫研究者蒂埃里?格倫斯?。═hierry Groensteen）認為漫畫敘事中的格子包含了不同的點、線、面。它們就像“關節”聚集在一起，形成一個敘事網絡系統。格子作為敘事組成的重要元素，一方面，它們能夠按照事件發展組織敘述結構；另一方面，也給多種媒介的信息編碼提供敘事符碼。電子媒體的廣泛普及給漫畫的跨媒介敘事帶來新的可能性。當手機屏幕、電腦屏幕等成為被閱讀的對象時，故事內容濃縮于電子屏幕即定的的尺寸里，甚至依據動態媒介的特點而產生變化。盡管畫格不再被看作敘事進程中，劃分敘述時間與空間的唯一要素，但是畫格所隱含的敘事節奏，依然能夠被不同媒介自身的特點，將敘事潛力得以充實與豐富。

值得注意的是，當閱讀漫畫到觀看動態視頻、動畫等媒介的轉變，即信息的接受由靜態媒介向動態媒介的轉變過程，不同媒介之間的差異性所帶來的視覺體驗產生出信息接受的不同感受。進行漫畫閱讀時，主要通過對畫格的排列組合秩序解讀，其敘事結構與節奏轉譯到基于視聽元素的動態影像或互動式的體驗過程，構成了跨媒介之間的敘事語境的高度融合。對于任何媒介來說，參與感都是一個非常有力的武器[3]89。例如，漫畫書《長歌行》中，關于描述李長歌在僥幸逃脫追捕的過程中遇見前來勒索錢財的軍爺情節。頁漫中的敘事情節，通過三格連續性的畫面表現該情節，特別是通過由尖銳形狀構成的對話框，將無聲的漫畫情境表現得極有張力（圖4），而當此情節被搬上短視頻動畫化中，畫外音的敘述與被擊落的軍爺面部的大特寫，隨著切換緊湊的視覺特效，將敘事緊張的情緒傳遞出來（圖5），無形之中把觀眾的參與感融入到敘事的情境之中。

圖4 長歌行 漫畫

圖5 長歌行 短視頻

通過以上對漫畫媒介差異性的分析，可以看到漫畫這類型媒介，作為視覺連續性的開源轉化與格子構建的信息敘述節奏，是能夠貫穿于不同媒介之間潛在的文本框架中。雖然每一類型的藝術媒介在信息編碼方式上有著各自的特點，但是應該看到漫畫與敘事文本之間不是相互孤立，而是相互影響。當漫畫被動畫、電影、電視等其他媒體的敘事挪移與改編，不僅形成了從空間轉向時間的敘事形態的變化，而且在此過程中產生出基于視覺化的漫畫符號，這些漫畫符號作為敘事編碼，能夠被不同媒介納入感知系統進而開發出來。

二、跨媒介敘事中的漫畫符號

盡管視覺上呈現出漫畫表現形式復雜，但是根據漫畫敘事的跨媒介性分析，使得敘事過程中的漫畫符號成為跨媒介敘事的信息編碼，從而成為故事傳播的重要承載部分。漫畫敘事作為以視覺為主導的媒介被納入到跨媒介敘事的研究范疇，其中包含了不同藝術媒介之間的符號重疊與信息轉化的機制。這是由漫畫媒介自身的創作特點決定的，即以圖像與文字合奏的敘事藝術特征為核心，其中的圖文關系具備修飾性的語言特點，并且與不同媒介之間表現出生動的敘事融合，可以說，漫畫敘事自身的媒介間性，已經混雜了各種視覺符號和聽覺符號。

當探討漫畫敘事的跨媒介現象，不應該忽視漫畫符號作為支撐視覺敘事語言轉化的關鍵因素。特別是，以連續性畫面中的漫畫視覺符號的轉變與融合，不僅能夠表述出敘事時間與空間之間的前后關系，而且它們會被其他媒介以多維度的樣態進行演繹或擴展，歸納起來有以下兩個方面：

1.漫畫符號的轉變

從符號學視角來看，創作者傾向于把漫畫敘事過程中的各個元素分解為最小單位的語言表述，從而使得漫畫敘事作為一個完整的視覺敘事體系。這里的圖畫與文字被當做敘事符號來解讀，強調敘事內容與媒介的信息傳輸的有效性，是建立于一定秩序化的閱讀基礎上。例如，漫畫敘事中的“擬形”的視覺符號以及具有特殊視覺效果的對話氣泡等元素，當它們作為視覺符號被解讀時，能夠成為圖文融合的典型語意表達，更容易經由他者媒介采用與開發。

經典符號學之父索緒爾認為語言是一個符號系統，并指出語言符號是一種兩面的心理實體，其中能指和所指的聯系是任意的。漫畫敘事中的符號可根據能指與所指的概念包含了二個層級：一個層級由大量的視覺元素構成，這里的漫畫符號帶來的是一種具有持續性的直觀的能指語意的形成。例如，聚焦的線條組合、夸張的情緒中具有簡潔明了的標識圖形等視覺符號，通過解讀它們從而保持敘事話語上的可擴展性。另一個層級則由漫畫符號所包含的視覺信息中約定俗成的所指概念，也是基于視覺的“模擬”特效，具有視覺敘事的修辭功能。這兩個層級之間的聯系在敘事過程中悄然發生，并且在視覺敘事的信息傳遞中與讀者達成約定俗成的共識。漫畫符號包含視覺與話語，成為一個表達敘事主體與一個集合代碼的系統組合，這更容易存留于不同媒介敘事藝術語言的轉換。具有中華文化審美意向的筆墨造型、留白，當聚焦這些中國式漫畫符號的情境中，給予漫畫符號向更多元化的敘事媒介進行轉化，形成了具有中國特色的漫畫符號。例如漫畫《長歌行》（圖6），在描述突厥人兵臨城下時，運用聚焦式運動線條表達騎兵迅速前進的步伐。將漫畫敘事中常用的表現速度的漫畫符號，以焦點式的畫面效果，凸顯敘事情境中的緊張情緒。當它們從漫畫書搬到熒幕真人實拍劇中，聚焦的情景不是靜態的畫面，而是運用影視鏡頭語言與影視非線性的剪輯藝術共同完成。漫畫符號的轉變存在著與他者媒介之間的相互轉譯的現象，每一種媒介自身都有特點，不同藝術媒介之間的轉變不是技術層面的“模擬”視覺效果，而是運用 “漫畫符號”的能指與所指建立起敘事邏輯上的連接。

圖6 長歌行 漫畫

2.漫畫符號的跨媒介融合

漫畫符號的運用，不僅能自成一體，而且能促進不同媒介之間的相互連接。漫畫符號成為漫畫敘事藝術獨特表征，使得運用漫畫這類型媒介總能站在印刷媒介與數字媒介之間，即一方面作為印刷媒介，漫畫被賦予像文學一樣的出現，例如“圖像小說”的產生；另一方面作為一種連續性的畫面符號的組織媒介，運用電影或照片數字化的方式進行敘事。實質上，漫畫與文學、電影等媒介之間存在著緊密關系，由此漫畫符號加速了不同媒介之間敘事的可行性。維爾納?沃爾夫將語言、視覺、音樂作為故事講述能力的三大媒介家族[8]。這三大媒介同樣屬于漫畫跨媒介敘事組成的符號類型，它們能夠喚起與其他媒介之間的相互促進關系。

漫畫跨媒介敘事中的視覺符號與聽覺符號的融合，在傳遞情景氛圍表達中，往往是悄無聲息的完成。印刷時代的漫畫敘事藝術是以平面的靜態視覺傳遞信息，圖文敘事是在相對靜止的時間和空間的維度展開，人們通過閱讀想象獲得視聽審美的愉悅。在這個層面上，漫畫中的擬音現象，往往通過繪制擬音詞，填補敘事音效上的缺失。例如漫畫《長歌行》中，飛鏢射出“啪啪啪啪”（圖7）—這里運用了變形的文字，模仿了物理空間飛鏢射出的音效，讓敘事情節表現得更加生動。這些大量的圖像符號、擬音化的文字符號來展現聲音與語言，符號之間交叉融合促進電影、動畫等媒介對“源文本”的重塑與再創。

可以說，文學性與繪畫性讓漫畫具備極具想象力的時空敘事的功能，運用漫畫符碼的思維轉化，把聽覺與視覺在不同的媒介進行重新編碼，進而形成新的敘事形態。麥克盧漢在《理解媒介》中提出，一切媒介在把經驗轉化為新形式的能力中，都是積極隱喻[9]。這種積極隱喻的信息成為交流活動中的基本要素，即把視覺與聽覺信息傳遞轉化為可讀性的符碼過程。它們遵循雅科布遜的信息交流活動的六個基本要素來證明，即發送者、接收者、語境、信息、接觸、符號。任何交流都是由發送者所發出的信息構成的，而信息傳遞的對象或目標則是接收者[10]。在信息發送、傳遞與接收的過程中，把源文本中的畫面、聲音通過漫畫符號、擬音文字符號的轉變，產生敘述語意的編碼，進而讓信息接收者根據不同的個人經歷，透過對敘事訊息中的解讀形成有意識的解碼。正是由于這樣動態的信息編碼到解碼的過程，所以當電子媒介的融入，漫畫敘事從基于空間性的敘事邁向時間性的媒介轉化與融合。例如，在真人實拍《長歌行》中，通過旁白、畫外音、臺詞對白等，將敘事情節層層推進，烘托主題情境。這顯然得益于，漫畫敘事中對大量出現的視覺元素與聽覺元素的敘述融合。因為漫畫這類型媒介并不受時空觀念的限制，它是具有豐富想象力的敘事媒介，而當它自身圖文符號與其他媒介優勢相結合時，能夠創造出大量的有潛能的敘事主體。

三、漫畫敘事的跨媒介與跨學科思維

漫畫作為敘事的媒介之一，從產生到發展的歷程無不體現出與其他媒介之間的相互關聯。在這個過程中，不僅是動畫、電影或電視等媒體經常受到漫畫的啟發，而且在其自身發展過程中，無論是在內容還是審美形式方面，漫畫本身也一再受到其他媒體的影響?；谖谋竞蛨D像的混搭，漫畫敘事在其基本性質上已經代表了一種中介現象，不僅體現于漫畫本身，還體現于與其他媒體的結合敘事中。漫畫敘事的跨媒介不僅體現在以視覺符號為基礎的媒介共通性，還表現為不同媒介之間知識范式中的差異性，這使得在探討漫畫敘事的跨媒介性需要與跨學科思維聯系在一起。在瑪麗勞爾?瑞安《故事的變身》中，把支撐各種媒介的知覺渠道定義為：語言、視覺和聽覺，而它們與文學、繪畫、音樂的審美形態息息相關。從跨媒介的視角來看，漫畫敘事本身就是將文學、繪畫、音樂這三個藝術類別延伸到符號的審美使用之外。漫畫與文學、繪畫、音樂等學科知識有著密切的聯系。如果說，漫畫敘事運用“擬像”的審美形態而訴諸不同媒介之間的轉換，那么其跨媒介敘事的藝術實踐則包含以下兩個方面：

1.圖文互換的思維方式是探討兩者或多者媒介間性的研究基礎

漫畫語言的轉換，是運用漫畫與其他媒介再創作的過程。尤其是當文學、電影學、計算機圖形學等學科的融入，使得不同的學科知識與技術催生出新的敘事形式。例如，鄢蓓在創作《長歌行》電視劇改編時，圍繞著“家國情懷與少年成長”的精神內核，進行文本編撰。這里的文本描述是文字符號的組織方式，媒介所傳遞的是邏輯思維與形象思維。在進行跨媒介敘事的轉變中，運用漫畫、短視頻等視覺語言，以直觀的視覺媒介訴諸敘事畫面，包含了從單一文本到不同媒介知識之間的交叉與融合。但是，不能簡單地認為跨媒介敘事僅停留在不同媒介知識之間技法層面的研究，而應該重視不同媒介之間的差異性與共通性，并通過整合來補充彼此的不足。

2.以融合為目的，建立視覺可視化敘事體系

這里的融合包含了微觀和宏觀的兩個方面：從微觀的角度來說，漫畫敘事這類型媒介自身的表述特性蘊含著不同學科之間的知識融合。例如，在漫畫《長歌行》中，運用大量的不規則的畫格構建故事的時空脈絡，在這里時間與空間被并置在靜態的頁面中。而當它與動態媒介轉變時，敘述的時空關系也會隨著不同媒介載體的特點而發生變化。因此，更應該結合每一種媒介自身的特點，發揮與其他媒介整合之優勢，促使跨媒介敘事形成更多維的視覺層次。

從宏觀的角度來說，不同媒介知識之間的交叉研究是一個動態演化的過程。這里與不同媒介之間的碰撞與交叉，側重在邏輯關系上的“可視化的”跨媒介敘事構建。特別是“可視化的”敘事編碼，依賴于對不同學科知識之間的交叉、滲透、融合和再造。漫畫作為視覺敘事的研究范疇，電子媒體的興盛促使敘事主體不斷地得到擴展，創造出包含動態的圖畫與沉浸式敘事體驗，并與受眾群體進行交互性的結合。多樣化的媒介對于源文本的改編與演繹，會產生一種敘事信息的全方位遷移，這會讓敘事本身變得更為復雜，而這也正是跨媒介漫畫敘事藝術研究的價值所在。

結語

國產漫畫敘事作品形態的演變一直隨著社會文化的發展而產生變化。隨著電子媒體技術的飛速發展，運用漫畫講好中國故事，不應只局限于漫畫敘事自身的創作空間中，而應是在擴展時間與空間的敘事構建起動態的關系。對于國產漫畫敘事的跨媒介研究，應該注意到漫畫作為藝術媒介，兼具傳播媒介的屬性，即運用圖文結合的漫畫敘事這類型媒介自身構造具有跨媒介性特性，而且漫畫敘事作為媒介工具所創作出來的作品具有跨媒介性，它們往往通過自身的符號、語言等與不同媒介之間進行敘事演變。正因如此，漫畫敘事的藝術語言可以借由多樣化傳播媒介形成自身的形式語言，而這能夠對跨媒介視覺敘事所帶來的審美形態的變化更好的解讀。

— ―