胡壯麟多模態(tài)小品中的主體模態(tài)

多模態(tài)小品中

的

主體模態(tài)

胡壯麟

北京大學

胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第1頁!1．符號的多元性與多模態(tài)性索緒爾:語言符號是‘概念’(concept)與‘音響意象’(soundimage)的任意關系。他預示了語言學只是屬于尚未出現(xiàn)的符號學的一個分支學科。他試圖將任意性理論應用于其他符號系統(tǒng):‘所指’(signified)和‘能指’(signifier)的術語一個世紀過去了，當代系統(tǒng)功能語言學派和認知語言學派對語言學和符號學這們新興學科提出了不少嶄新的觀點。

√√

√√√√√

√√√

√√√√

胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第2頁!（1）語言語法不是在詞語概念基礎產上生正確句子的代碼，不是規(guī)則的集合，而是產生意義的資源（Halliday，

1978：192）。這意味著正確的符號觀應關注意義是如何從‘符號資源’中進行選擇和被表達的。它不是停留在概念和語音，或者所指和能指之間的任意的靜態(tài)的層面。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第3頁!（3）在一定語境下使用的詞語必然出現(xiàn)在‘語篇’之中。同理，我們應當將話語或語篇的概念應用于符號學研究。人類符號與一定語境下完成的語篇共現(xiàn)。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第4頁!有關這方面的研究，將我們引入‘多元符號學’（multi-semiotics）和‘多模態(tài)性’（multimodality）的領域。索緒爾自會接受符號的多元性，但他有關語言符號的概念和音響意象的絕對任意關系的觀點，是否接受符號的多模態(tài)性有待我們進一步審視。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第5頁!O’Halloran（2008）:

現(xiàn)代的真正意義上的多模態(tài)性理論研究應數(shù)MichaelO’Toole(1994)的《展示藝術的語言》和GunatherKress和TheovanLeeuwen(1996)合著的《閱讀的意象：視覺設計的語法》。我國盡管有圖文并茂的實踐傳統(tǒng)，有關當代多模態(tài)性理論研究的綜述和報道有李戰(zhàn)子（2003），胡壯麟（2004a,b;2007），朱永生（2007），張德祿（2009，楊信彰（2009）等。對多模態(tài)語篇案例研究的有胡壯麟和董佳（2006），魏曉茹（2009）、李妙晴（2009）等。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第6頁!所謂多模態(tài)小品，我借用了‘小品文’的概念，即生動活潑的說理抒情的短小作品，但它是多模態(tài)的。我在“多模態(tài)小品的問世和發(fā)展”（2010）一文中曾對1092個多模態(tài)小品進行分析.胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第7頁!

多模態(tài)可包含不同模態(tài)的組合。但對多模態(tài)組合的規(guī)律性和特征缺乏深入研究，特別是形成這些規(guī)律性和特征的原因和功能。本文想具體討論的是：（1）對同一語篇意義的表達可以采用不同模態(tài)。（2）這些模態(tài)可以分別使用，也可以同步使用。（3）在多種模態(tài)同步使用的情況下，我們一般可發(fā)現(xiàn)其中一至二種模態(tài)是主體的，其余模態(tài)起陪襯作用。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第8頁!共有17張幻燈片。片1引入上述標題。片2說明作者的意圖，即他認為讀者可能并不意識到他往下所說話語的正確性和重要性，但這是百分之百正確的、重要的，因而希望讀者每天思考其中的某些內容。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第9頁!從這些文字不難發(fā)現(xiàn)，作者誠意地友好地向讀者提供一個一個諍言，如為人應該笑顏常開，你并非孤獨，壞事可以變成好事，等。因此‘友誼花朵’這個題目高度概括了作者期待你樹立樂觀向上的用意。這層意義無疑是通過文字傳遞給讀者的。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第10頁!每張幻燈片上的都有一種花朵，有的含苞欲放，有的展瓣吐艷。這抽象地表達了每一枝花朵就是作者饋贈讀者的一個箴言。這才是美的感受，這才是真正的友情。值得注意的是有些花朵中有蜜蜂駐足，其象征義是我們可以像蜜蜂那樣，從這些花朵中獲得精神的營養(yǎng)。

胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第11頁!——在片1的下方有“Music：NightingaleSerenade”(音樂：夜鶯小夜曲)三詞?！∫骨话阒更S昏或夜間在室外獨奏或獨唱的歌曲或器樂曲，其音樂纏綿委婉，典雅悠閑，常為年輕人，特別是男士在月夜徘徊于戀人窗前向戀人述說自己的內心愛慕，以打動對方?！@種形式淵源于歐洲中世紀騎士文學的一種愛情歌曲，在西班牙、意大利等國流行。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第12頁!3。以樂曲為主體的多模態(tài)小品

OneDayWhenWeWereYoung是三十年代美國拍攝的《翠堤春曉(TheGreatWaltz)》里的插曲。施特勞斯愛上了一位女高音歌唱家——卡拉·唐娜，他們在一起時，經常含情脈脈地唱起這首歌。當卡拉得知施特勞斯的妻子波蒂深愛著他的丈夫時，她毅然斬斷情絲，悄然離去。施特勞斯追去碼頭，從船上隱約飄來女高音的歌聲：“當我們年輕時光……”。影片最后，施特勞斯已是滿頭銀絲，在千萬個粉絲狂熱的歡呼聲中，他的耳邊又響起了這首扣人心弦的歌曲：“當春之歌又唱，又回憶起五月早上…”胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第13頁!OneDayWhenWeWereYoung

Onedaywhenwewereyoung,當我們年輕時光onewonderfulmorninginMay,在美妙的五月早上youtoldmeyouloveme你曾說你愛我whenwewereyoungoneday.當我們年輕時光Sweetsongsofspringweresung,唱起了春之歌andmusicwasneversogay.那音樂是多么動人youtoldmeyouloveme,你曾說你愛我whenwewereyoungoneday.當我們年輕時光胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第14頁!雖然在這首多模態(tài)小品中，我們也可從幻燈片上找到每一句歌詞，但那種浪漫的思念之情更多地來自纏綿動人的歌曲和歌曲中女高音的唱詞。用言語表達的唱詞，不是用文字表達的歌詞。在表達意義時，樂曲和唱詞的模態(tài)組合起到主要作用。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第15頁!圖1（片2）通過兩只鳥在春意盎然的花枝上相互偎依象征兩個年青人在五月的一個美妙早晨情意萌生，難分難舎。Onedaywhenwewereyoung,onewonderfulmorninginMay,胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第16頁!圖2（片7）則通過孤鳥徘徊示意離別的時候來臨，景色灰蒙蒙地給人以黯然神傷之感。Welaughedthen,wecriedthen,Thencamethetimetopart.胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第17頁!這些圖片作為多模態(tài)的交相映輝是成功的，但戀人間憶舊懷念之情的主題更多地依賴歌曲的魅力。如果我們只是朗誦經過漢默斯頓改寫的歌詞，其感染力將大為遜色。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第18頁!30張幻燈片中的片7（圖3）和片21（圖4）。前者是泰國的大皇宮，后者是一所廟宇的外景。前者代表泰國的王權，后者展現(xiàn)了這個國家的佛教傳統(tǒng)。比較:中國故宮和寺廟。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第19頁!GRANDPALACE胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第20頁!LADYBOYSHOW胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第21頁!5．以動作為主體的多模態(tài)小品

有的多模態(tài)小品，在意義表達上真正起作用的是一定環(huán)境（如舞臺）下人和其他有生命物的動作。例如，在小品‘與狗共舞’中，一條白狗，穿著花裙子，扮演女舞伴的角色，與它男主人翩翩起舞，節(jié)奏的合拍，身子的扭動，如此嫻熟，如此逼真，如此幽雅！由此誘發(fā)了觀眾陣陣笑聲。觀眾發(fā)笑不是看了片頭的文字，也不是樂曲的伴奏，而是人與狗的實時實地的連貫的舞蹈動作。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第22頁!6．結束語

上述四類小品表明，在創(chuàng)作多模態(tài)小品時，作者完全可以選擇不同的模態(tài)，或兩種，或三種，或更多。這有賴于作者受教育的程度和所掌握的技術。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第23頁!多模態(tài)小品的出現(xiàn)也回答了‘重新符號化’所提出的課題，即人們從一種模態(tài)發(fā)展為更多地使用另一種模態(tài)，這與社會進程是分不開的,也是和當代技術的發(fā)展分不開的。即使本文所介紹的多模態(tài)小品也只是在一定的社會階層中，如受教育階層中，流傳和欣賞。不掌握電腦操作技術者只能望洋興嘆。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第24頁!符號的載體就是語篇。多模態(tài)小品就是語篇。它是多模態(tài)語篇中的與文藝創(chuàng)作有關的一種語類。我們把它叫做小品主要用心是為了和其他多模態(tài)語篇進行區(qū)別，如電影、歌劇、相聲等，也是為了和文學中把散文中的小品文進行對比。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第25頁!（2）人們如何對符號進行選擇來體現(xiàn)自己想表達的意義呢？有關符號應當實現(xiàn)的功能。四大元功能，即概念的，邏輯的，人際的，和語篇的（Halliday，1985/1994)。這四大元功能就是‘符號資源‘（semioticpotential）。用表達意義的符號與它的發(fā)送者、接受者、要表達的內容、發(fā)送方式或模態(tài)，以及與時空有關的情景和風格有密切的聯(lián)系。‘社會符號學’由是應運而生。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第26頁!（4）系統(tǒng)功能語言學的研究者進一步發(fā)現(xiàn)符號既然存在于語篇之中，這就不難發(fā)現(xiàn)“所有的語篇都是多模態(tài)的”(Scollon&Levine,2004）。人們感知和認識大千世界有賴于觸摸、視聽、嗅聞、舔嘗等多種感覺方式的運用。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第27頁!多模態(tài)性的研究旨在說明人們在表達意義時對不同符號特性的掌握和運用，以及對不同符號體系之間相互關系的了解。一種模態(tài)被另一種模態(tài)替代實際上是一種符號資源轉入另一種符號資源的過程，也就是‘重新符號化’（re-semiotization）重新符號化的任務是分析：（1）一種符號資源是如何隨著社會進程轉成另一種符號資源的？（2）為什么是這些符號資源而不是另一些符號資源在某個時期被動用來表達某種意義。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第28頁!doc,ppt，

pps，eml，wmv等軟件的技術支持.有關文科內容的學術論文較多地采用文字模態(tài)，社會科學的文章有時文字與圖表并用，理工科的研究報告除文字和圖表外，時有實圖為佐。本文研究本世紀方流傳的多模態(tài)小品。(舉例:南非世界杯開幕式)胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第29頁!多模態(tài)小品的模態(tài)組合文字

圖片

樂曲

自動翻頁√√√

√√

√

√

√

√√

√

√√

√

√√胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第30頁!2．以文字為主體的多模態(tài)小品

作為小品，既然強調的是生動活潑和說理抒情，文字形式的視覺模態(tài)不失為一個重要方式。小品中的文字要求短小精干，詼諧幽默，寓理于情，以打動讀者。‘FriendshipBouquet’（友誼花束）胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第31頁!片6Asmilefromyoucanbringhappinesstoanyone,你的微笑 可以給人以快樂，

eveniftheydonotlikeyou.

即使他們很不喜歡你。片7Everynight,SOMEONEthinksaboutyou.每晚，有 人想 著你。

Youmeantheworldtosomeone.

你是某些人的世界。片8Youarespecialandunique.你是特殊的，唯一的，

Someoneyoudon’tevenknow–lovesyou.

你甚至不知

道的人——愛著你。片9Whenyoumakethebiggestmistakeever,當你犯了 從未 有過的大錯誤，

somethinggoodesfromit.

隨之而來的是某個

好事。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第32頁!Theonlyreasonthatanyonewouldeverhateyou,Isbecausetheywanttobejustlikeyou.胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第33頁!Music:NightengaleSerenadeFriendshipBouquet胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第34頁!——鑒于樂曲出現(xiàn)的時間較早，可以推斷它不是專門為‘友誼花束’配制的。因此只能說小品的作者只是選用它作為背景音樂?！緲非怀龅氖且国L的啼聲，抒情浪漫，但不能充分表達‘友誼花束’的主題.——作者向讀者提供一個又一個如何正確處理人生中的問題?！∫骨郧閯尤苏闷鸬郊ぐl(fā)對方深入思考并接受自己的觀點。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第35頁!Onedaywhenwewereyoung胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第36頁!Youtoldmeyouloveme,你對我多鐘情andheldmeclosetoyourheart.啊,我們心心相印Welaughedthen,wecriedthen,我們歡笑,我們喊叫thencamethetimetopart.但離別時候來到Whensongsofspringaresung，當春之歌又唱起，rememberthatmorninginmay.回憶起五月那個早上，Remember,youlovedme別忘了,你愛我whenwewereyoungoneday當我們年輕時光。

胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第37頁!供視覺欣賞有14張幻燈片。這些幻燈片色彩時濃時淡，一草一木，均能傳神。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第38頁!Onedaywhenwewereyoung,onewonderfulmorninginMay,

胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第39頁!welaughedthen,wecriedthen,thencamethetimetopart.胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第40頁!4。以圖象為主體的多模態(tài)小品

有一些多模態(tài)小品主要依靠幻燈片中的圖像來表達意義。如在多模態(tài)小品“曼谷”中，作者將最能代表泰國首都曼谷的建筑、社會生活和城市發(fā)展的圖片在我們眼前展示，百聞不如一見，盡管我們有的可能還沒有去過曼谷，至少在圖片上能夠鑒賞曼谷的面貌。胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第41頁!BUDDHISTTEMPLE胡壯麟多模態(tài)小品中的主體模態(tài)共48頁，您現(xiàn)在瀏覽的是第42頁!在這個小品中也使用了少量的文字，它提供了有關圖片內容的一定信息，如‘BankokAirport’（曼谷機場，片3），‘Skytrain’（空中輕軌，片5）,‘DemocracyMonument’（民主紀念碑，片

9）,‘Dif