胡壮麟多模态小品中的主体模态7教案资料.ppt

多模态小品中的主体模态胡壮麟北京大学1符号的多元性与多模态态性 索绪绪尔:语语言符号是概念(concept)与音响意象(soundimage)的任意关系 他预预示了语语言学只是属于尚未出现现的符号学的一个分支学科 他试图试图 将任意性理论应论应 用于其他符号系统统:所指(signified)和能指(signifier)的术语术语 一个世纪过纪过 去了，当代系统统功能语语言学派和认认知语语言学派对语对语 言学和符号学这们这们 新兴兴学科提出了不少崭崭新的观观点1）语语言语语法不是在词语词语 概念基础产础产 上生正确句子的代码码，不是规则规则 的集合，而是产产生意义义的资资源（Halliday，1978：192） 这这意味着正确的符号观应观应 关注意义义是如何从符号资资源中进进行选择选择和被表达的 它不是停留在概念和语语音，或者所指和能指之间间的任意的静态态的层层面3）在一定语语境下使用的词语词语必然出现现在语语篇之中 同理，我们应们应 当将话语话语 或语语篇的概念应应用于符号学研究 人类类符号与一定语语境下完成的语语篇共现现4）系统统功能语语言学的研究者进进一步发现发现 符号既然存在于语语篇之中，这这就不难发现难发现 “所有的语语篇都是多模态态的”(Scollon&Levine,2004）。

人们们感知和认识认识 大千世界有赖赖于触摸、视视听、嗅闻闻、舔尝尝等多种感觉觉方式的运用 有关这这方面的研究，将我们们引入多元符号学（multi-semiotics）和多模态态性（multimodality）的领领域 索绪绪尔自会接受符号的多元性，但他有关语语言符号的概念和音响意象的绝对绝对 任意关系的观观点，是否接受符号的多模态态性有待我们进们进 一步审视审视 多模态态性的研究旨在说说明人们们在表达意义义时对时对 不同符号特性的掌握和运用，以及对对不同符号体系之间间相互关系的了解 一种模态态被另一种模态态替代实际实际 上是一种符号资资源转转入另一种符号资资源的过过程，也就是重新符号化（re-semiotization） 重新符号化的任务务是分析：（1）一种符号资资源是如何随着社会进进程转转成另一种符号资资源的？（2）为为什么是这这些符号资资源而不是另一些符号资资源在某个时时期被动动用来表达某种意义义 OHalloran（2008）:现现代的真正意义义上的多模态态性理论论研究应应数MichaelOToole(1994)的展示艺术艺术 的语语言和GunatherKress和TheovanLeeuwen(1996)合著的阅读阅读 的意象：视觉设计视觉设计 的语语法。

我国尽管有图图文并茂的实实践传统传统 ，有关当代多模态态性理论论研究的综综述和报报道有李战战子（2003），胡壮麟（2004a,b;2007），朱永生（2007），张张德禄（2009，杨杨信彰（2009）等对对多模态语态语 篇案例研究的有胡壮麟和董佳（2006），魏晓晓茹（2009）、李妙晴（2009）等 doc,ppt，pps，eml，wmv等软软件的技术术支持. 有关文科内容的学术论术论 文较较多地采用文字模态态，社会科学的文章有时时文字与图图表并用，理工科的研究报报告除文字和图图表外，时时有实实图为图为 佐 本文研究本世纪纪方流传传的多模态态小品举举例:南非世界杯开幕式)所谓多模态小品，我借用了小品文的概念，即生动活泼的说理抒情的短小作品，但它是多模态的我在“多模态小品的问世和发展”（2010）一文中曾对1092个多模态小品进行分析.多模态态小品的模态组态组 合文字图图片乐乐曲自动动翻页页 多模态态可包含不同模态态的组组合 但对对多模态组态组 合的规规律性和特征缺乏深入研究，特别别是形成这这些规规律性和特征的原因和功能 本文想具体讨论讨论 的是：（1）对对同一语语篇意义义的表达可以采用不同模态态。

2）这这些模态态可以分别别使用，也可以同步使用3）在多种模态态同步使用的情况下，我们们一般可发现发现 其中一至二种模态态是主体的，其余模态态起陪衬衬作用2以文字为为主体的多模态态小品 作为为小品，既然强调调的是生动动活泼泼和说说理抒情，文字形式的视觉视觉模态态不失为为一个重要方式 小品中的文字要求短小精干，诙诙谐谐幽默，寓理于情，以打动读动读 者 FriendshipBouquet（友谊谊花束） 共有17张张幻灯片片1引入上述标题标题 片2说说明作者的意图图，即他认为读认为读 者可能并不意识识到他往下所说话语说话语 的正确性和重要性，但这这是百分之百正确的、重要的，因而希望读读者每天思考其中的某些内容片6Asmilefromyoucanbringhappinesstoanyone,你的微笑可以给给人以快乐乐，eveniftheydonotlikeyou.即使他们们很不喜欢欢你片7Everynight,SOMEONEthinksaboutyou.每晚，有人想着你Youmeantheworldtosomeone.你是某些人的世界片8Youarespecialandunique.你是特殊的，唯一的，Someoneyoudontevenknowlovesyou.你甚至不知道的人爱爱着你。

片9Whenyoumakethebiggestmistakeever,当你犯了从未有过过的大错误错误 ，somethinggoodcomesfromit.随之而来的是某个 好事 从这这些文字不难发现难发现 ，作者诚诚意地友好地向读读者提供一个一个诤诤言，如为为人应该应该 笑颜颜常开，你并非孤独，坏事可以变变成好事，等 因此友谊谊花朵朵这这个题题目高度概括了作者期待你树树立乐观乐观 向上的用意这层这层 意义义无疑是通过过文字传递给读传递给读 者的Theonlyreasonthatanyonewouldeverhateyou,Isbecausetheywanttobejustlikeyou. 每张张幻灯片上的都有一种花朵朵，有的含苞欲放，有的展瓣吐艳艳 这这抽象地表达了每一枝花朵朵就是作者馈赠读馈赠读 者的一个箴言这这才是美的感受，这这才是真正的友情 值值得注意的是有些花朵朵中有蜜蜂驻驻足，其象征义义是我们们可以像蜜蜂那样样，从这这些花朵朵中获获得精神的营营养Music: Nightengale SerenadeFriendship Bouquet在片1的下方有“Music：NightingaleSerenade”(音乐：夜莺小夜曲)三词。

小夜曲一般指黄昏或夜间在室外独奏或独唱的歌曲或器乐曲，其音乐缠绵委婉，典雅悠闲，常为年轻人，特别是男士在月夜徘徊于恋人窗前向恋人述说自己的内心爱慕，以打动对方这种形式渊源于欧洲中世纪骑士文学的一种爱情歌曲，在西班牙、意大利等国流行鉴于乐曲出现的时间较早，可以推断它不是专门为友谊花束配制的因此只能说小品的作者只是选用它作为背景音乐本乐曲突出的是夜莺的啼声，抒情浪漫，但不能充分表达友谊花束的主题.作者向读者提供一个又一个如何正确处理人生中的问题但小夜曲以情动人正好起到激发对方深入思考并接受自己的观点以乐乐曲为为主体的多模态态小品 One Day When We Were Young是三十年代美国拍摄摄的翠堤春晓晓(The Great Waltz)里的插曲 施特劳劳斯爱爱上了一位女高音歌唱家卡拉唐娜，他们们在一起时时，经经常含情脉脉地唱起这这首歌当卡拉得知施特劳劳斯的妻子波蒂深爱爱着他的丈夫时时，她毅然斩斩断情丝丝，悄然离去 施特劳劳斯追去码头码头 ，从船上隐约飘隐约飘 来女高音的歌声：“当我们们年轻时轻时 光” 影片最后，施特劳劳斯已是满头银丝满头银丝 ，在千万个粉丝丝狂热热的欢欢呼声中，他的耳边边又响起了这这首扣人心弦的歌曲：“当春之歌又唱，又回忆忆起五月早上”One day when we were youngOneDayWhenWeWereYoungOnedaywhenwewereyoung,当我们们年轻轻时时光onewonderfulmorninginMay,在美妙的五月早上youtoldmeyouloveme你曾说说你爱爱我whenwewereyoungoneday.当我们们年轻轻时时光Sweetsongsofspringweresung,唱起了春之歌andmusicwasneversogay.那音乐乐是多么动动人youtoldmeyouloveme,你曾说说你爱爱我whenwewereyoungoneday.当我们们年轻轻时时光Youtoldmeyouloveme,你对对我多钟钟情andheldmeclosetoyourheart.啊,我们们心心相印Welaughedthen,wecriedthen,我们欢们欢 笑,我们们喊叫thencamethetimetopart.但离别时别时 候来到Whensongsofspringaresung，当春之歌又唱起，rememberthatmorninginmay.回忆忆起五月那个早上，Remember,youlovedme别别忘了,你爱爱我whenwewereyoungoneday当我们们年轻轻时时光。

虽虽然在这这首多模态态小品中，我们们也可从幻灯片上找到每一句歌词词，但那种浪漫的思念之情更多地来自缠绵动缠绵动 人的歌曲和歌曲中女高音的唱词词 用言语语表达的唱词词，不是用文字表达的歌词词 在表达意义时义时 ，乐乐曲和唱词词的模态组态组 合起到主要作用 供视觉视觉 欣赏赏有14张张幻灯片 这这些幻灯片色彩时浓时时浓时 淡，一草一木，均能传传神 图图1（片2）通过过两只鸟鸟在春意盎然的花枝上相互偎依象征两个年青人在五月的一个美妙早晨情意萌生，难难分难难舎 Onedaywhenwewereyoung,onewonderfulmorninginMay,One day when we were young, one wonderful morning in May, 图图2（片7）则则通过过孤鸟鸟徘徊示意离别别的时时候来临临，景色灰蒙蒙地给给人以黯然神伤伤之感 Welaughedthen,wecriedthen,Thencamethetimetopart.we laughed then, we cried then, then came the time to part. 这这些图图片作为为多模态态的交相映辉辉是成功的，但恋人间忆间忆旧怀怀念之情的主题题更多地依赖赖歌曲的魅力。

如果我们们只是朗诵经过汉诵经过汉 默斯顿顿改写的歌词词，其感染力将大为逊为逊 色以图图象为为主体的多模态态小品 有一些多模态态小品主要依靠幻灯片中的图图像来表达意义义 如在多模态态小品“曼谷”中，作者将最能代表泰国首都曼谷的建筑、社会生活和城市发发展的图图片在我们们眼前展示，百闻闻不如一见见， 尽管我们们有的可能还还没有去过过曼谷，至少在图图片上能够鉴赏够鉴赏 曼谷的面貌30张幻灯片中的片7（图3）和片21（图4）前者是泰国的大皇宫，后者是一所庙宇的外景前者代表泰国的王权，后者展现了这个国家的佛教传统比较:中国故宫和寺庙BUDDHIST TEMPLEGRAND PALACE在这个小品中也使用了少量的文字，它提供了有关图片内容的一定信息，如BankokAirport（曼谷机场，片3），Skytrain（空中轻轨，片5）,DemocracyMonument（民主纪念碑，片9）,Difference（贫富差异，片17）,Ladyboyshow（女妖演出，片24），等就信息量来说，这些文字过于简略，不如图片更为直观，深刻和丰富LADY BOY SHOW作为小品标题的片1下方有Music：TheShadows-WonderfulLand5个词，告知读者本小品的音乐为美妙国土的踪影。

乐曲是泰国的民族乐，使用的是西洋乐器，将泰国古老的传统文化和现代城市的建设联系起来，起到把读者引入泰国的有声世界，但光凭乐曲不能。