卡明斯视觉诗的多模态话语分析——以Me up at does为例

Multimodal Discourse Analysis of E.E.Cummings’s Visual Poetry: A Case Study of Me up at does

Abstract: E.E.Cummings, a famous American poet of the 20th century, is well-received for his unconventional experiments with words. This paper, based on the theory of Kress and Van Leeuwen’s multimodality and Halliday’s systematic functional grammar, presents a qualitative analysis of one of Cummings’s poems—Me up at does. This case study demonstrates the potential and the validity for researchers to apply the theory of multimodality to the analyses of visual poetry. The adoption of multimodal discourse analysis appears to be a good way to highlight the characteristics and the theme of visual poetry.

Key words: E.E.Cummings; visual poetry; multimodality; discourse analysis

卡明斯视觉诗的多模态话语分析——以Me up at does为例

摘要：E.E.卡明斯是20世纪美国的著名诗人，以其对诗歌语言的非常规处理而受到欢迎。本文以Kress和Van Leeuwen的多模态话语分析理论以及韩礼德的系统功能语法为理论基础，采取了定性分析的研究方法，对卡明斯最具代表性的视觉诗之一Me up at does进行多模态的话语分析，发现了将多模态话语分析应用于视觉诗分析的可能性与有效性。多模态话语分析法能够从多角度、多层次凸显视觉诗特点及主题。

关键词：卡明斯；视觉诗；多模态；话语分析

Mu ltimodal Discourse Analysis of E.E.Cummings’s Visual Poetry: An Analysis of Me up at does

1. Introduction

1.1 Research Objective

Great quantities of studies have been conducted not only aboard but also in China to apply the theory of multimodal discourse analysis. Lots of scholars apply this theory to the analysis of advertisements, films, posters or other publicities. In the mean time, some researchers have been devoted to the field of language teaching, which have absolutely achieved certain achievements. On the other hand, great efforts have been made to lay stress on the grammatical variation and the phonetic variation of Cummings’s poems. When it comes to analyzing the poem with multimodal

discourse analysis, few researches have been done. Therefore it is worth- trying to study Cummings’s visual poems based on the theory of multimodal discourse analysis. For this thought, the objective of the research is to bridge the gap between multimodal discourse analysis and Cummings’s poems.

1.2 Research Questions

This thesis aims to analyze one of E.E.Cummings’s poems----Me up at does based on the multimodal discourse analysis within the framework of systemic functional linguistics by M.A.K. Halliday. It comes to the conclusion that the application method of multimodal discourse analysis appears to be the most effective method to probe into the poems and find out the deep intention of poets. With the purpose of achieving the goal, this thesis focuses on the question that how the three metafunctions of language are presented and how to express the function of image of the poem from the perspective of multimodal discourse analysis.

1.3 Data and Method

The poem, Me up at does, is one of Cummings’s most representative works with a long-standing worldwide reputation and popularity in the worldwide. This poem has an avant-garde style which is typical in Cummings. So the writer selects this poem as an entry point to explore the classic style of E.E.Cummings, analyzing the literary work grounded on the theory of multimodal discourse analysis.

This thesis aims at a qualitative analysis of Me up at does based on the theory of systemic functional grammar and multimodality. First of all, a general overview will be given at the very beginning at each part. And a specific analysis of Me up at does will be carried out. The poem will be appreciated from verbal modal as well as visual modal.

1.4 Structure of the Thesis

First and foremost, an introduction of the research objective, research questions and data and method will be given, following which is the second part, including an overview of both multimodal discourse analysis and Cummings together with his poems. Studies abroad and at home will be mentioned. Then, the writer will probe into Me up at does, one of the typical visual poets of Cummings, which is the

多模态话语分析理论在新媒介时代的应用

龙源期刊网 https://www.sodocs.net/doc/1f5594632.html, 多模态话语分析理论在新媒介时代的应用 作者：李妙晴 来源：《学理论·下》2009年第06期 摘要:20世纪90年代西方兴起的多模态话语分析,逐渐成为语言学研究的新热点之一。通 过回顾其在国外和国内的发展历史,重点解释了多模态话语与社会符号学的关系,并展望未来发展方向。 关键词:多模态话语分析;新媒介时代;社会符号学 中图分类号:H04文献标志码:A 文章编号:1002—2589(2009)14—0204—02 一、多模态话语分析理论 朱永生(2007),只使用一种模态的话语叫做“单模态话语”;同时使用两种或两种以上模态的话语叫做“多模态话语”。新媒介时代,语篇呈多模态化,20世纪90年代西方兴起的多模态话语分析(multimodal discourse analysis)为由多种符号组成的语篇分析提供了途径,帮助读者了解不同模态作为社会符号,如何共同作用构成意义,达到意义潜势,对提高人们多模式话语识读,具有积极的意义。多模态话语分析属于社会符号学的分支,Halliday的系统语言学作为基础,具有跨学科、应 用性强特点,能运用在语音文字、建筑、城市设计及规划、影视戏剧、音乐、PPT、教学和数据库广告、网站页面设计、大型演出及舞台表演、排版、音乐、教科书设计、教学等多领域,与 传媒学、批评话语分析等有紧密联系,已经影响了当今很多学科的研究方向,如阅读写作能力教育、传媒话语分析、文化研究等,对社会的经济能起直接的指导作用。该理论无论在国外还是 在国内都处于起步阶段,在国外已经有出版书目和召开国际会议,李战子(2003)首次引入了多模 态分析理论。 朱永生(2007),几个关键字的概念,模式(mode)、媒介(medium)与模态(modality)。模式指系 统功能语言学与话语范围(field)和话语基调(tenor)并列的语境三要素之一的话语模式,指交流渠道,如口头、书面、电子等。模态(modality)原指语言系统中讲话者对事物的或然性进行判断和事物的必要性表明态度的语义系统情态;这里指交流的渠道和媒介,包括语言、技术、图象、颜色、音乐等符号系统。媒介是表达信息的物理工具。采用某一种媒体仍可以有不同模式表达信息,同样的模式可以用不同媒体表达。 二、研究现状 辛志英(2008)大致有:社会符号学流派,包括O’Toole、Kress、Leeuwen、Lemke、 O’Halloran、Baldry Thibault和Ventola等;交互社会学流派,包括Scollon、Norris及Jewitt等;认知学流派,主要有Forceville和Holsanova等人。

[模态,语言学,话语]多模态话语分析的系统功能语言学研究

多模态话语分析的系统功能语言学研究 引言 多模态话语分析理论是结合语言、视觉、声觉等其中两种或两种以上的模态而展开分析的一种理论模式，语言学理论与现代多媒体技术的有机结合为这一理论的建立提供了可靠依据。人们在与他人交往或在表达意义的过程中，一般都会使用到符号资源，而语言中的语法体系则对由词语组成的句子、语篇等符号资源的使用起决定性作用。与此相类似，视觉中的语法则对人物与事物等因素如何组成不同复杂程度的视觉陈述起着决定作用。 一、多模态话语概述 （一）多形态话语的产生情况 1.生命感知模态的产生 分析生命科学研究成果得知，在不断演化的过程中，生命体逐渐获得视觉、嗅觉、听觉、味觉以及触觉等不同的感知通道，其中，依靠眼睛获取了视觉通道，依靠鼻子获取了嗅觉通道，依靠耳朵获取了听觉通道，依靠舌头获取了味觉通道，而依靠皮肤则获取了触觉通道。生命体通过这些通道，与周围的环境进行了有效的信息交换。此外，在物竞天择，适者生存的残酷竞争面前，生命体为获得生存与繁衍，他们就需利用这些感知通道之间的相互作用，对周围环境中的一切事物做出有效、迅速的反应。一些生物学家认为，生命体在获得以上五种感知渠道的基础上，分别产生了视觉、嗅觉、听觉、味觉、触觉五种不同的交际模态。而在这些模态中，视觉与听觉这两种模态与话语分析具有最为紧密的联系。近些年来，随着科技的进步与发展，其他三种模态也逐步应用于话语交际中。例如在触觉模态方面，人们可以利用数据手套，在将手指弯曲角度进行传递的基础上，将各种三维手势打出来，并通过有机结合语言与手势，进而促进人机对话朝着与自然人际对话相接近的方面发展。 2.模式、媒介、模态三者之间的区别 模式、媒介以及模态这三个词语经常出现在多模态话语的分析中.在意义上，它们之间存在一定的联系，但由于没有具备非常明确的界限，经常导致误解及混乱的发生，因而对其含义展开一定的说明是极为有你要的。 通常情况下，模式指的是与话语基调、话语范围并列为语境三要素的话语模式，其本意指的是人们交流的渠道，例如口头模式、书面模式、电子模式等。这些话语模式在实际的变化与使用过程中，将会对信息的流动情况产生一定的影响，进而对语篇应具备的特征造成最终影响。媒介则指的是人们社会交际过程中使用的相关技术，就严格语言学及符号学意义方面进行分析，媒介算不上语言学理论中的术语。另外，与情态相同的是，模态在英语中也被叫做modality，但二者所指代的事物存在一定的差异性，情态指的是在语言系统中，说话者对事物的必要性表明态度或对事物的可能性进行判断的一种语义系统，模态则指的是包括语言、颜色、图像、音乐、技术等多种符号系统在内的交流渠道与媒介。 （二）多模态话语的主要识别标准

多模态话语分析

“蓝·创未来”广告是2010年北京国际车展上大众汽车倾力打造的一幅环保广告，当时从车展现场到北京大街小巷的候车亭里都贴满了这幅广告。选择该广告作为个案研究对象的原因有三：第一，这则广告尽管构图非常简单，却具备了语言、图形和颜色三个模态；第二，这幅广告的独特之处在于，颜色模态居于主导地位，而非语言或图像模态；第三，这幅广告具有鲜明的时代意义。从2009年底的哥本哈根世界气候峰会到国家战略性新兴产业规划①的出台，从“十二·五”规划到2011年9月6日胡锦涛主席在首届亚太经合组织林业部长级会议上发表的题为《加强区域合作实现绿色增长》的致辞，都反映了我国政府实现节能减排、低碳环保、绿色经济的强大决心和战略部署。而我国汽车业也进入了开发新能源、打造新能源汽车的历史阶段。所以这则广告非常契合目前中国大力倡导绿色经济的国家战略，是很有代表性的现代环保广告，内容洗练，留给人们很大的想象和思考空间。 大众汽车集团（中国）总裁兼CEO范安德博士向记者介绍大众汽车品牌“Think Blue （蓝·创未来）”的理念 一、多模态和多元识读概念的产生以及目前大学生多元识读能力现状的调查 随着科学技术的进步和社会生活的日益丰富多彩，人与人之间的交流方式正在发生着巨大变化。在公共交流的很多方面，我们可以深深感受到语言符号以及其他传统习惯中被人们认为是副语言的图像、音乐、颜色等，越来越多地处于突出、甚至是一种优势和中心的地位（韦琴红，2009）。作为单一模态的语言为主导的交流时代已经发展到了多模态交流的时代。然而，丰富多彩的符号资源是如何参与意义构建（meaning making）的、符号系统之间存在何种关系、人们如何解读充满多元符号系统的文本或其他载体，这些亟待解决的问题于20世纪90年代催生了一个新的研究领域——多模态话语分析（multimodal discourse analysis）。基于此，多元识读能力的概念也就应运而生。多元识读能力（multiliteracy），也称多模态识读能力，是新伦敦小组（New London Group）于2000年提出的概念，指具有能阅读所能接触到的各种媒体和模态的信息，并能循此产生相应的材料，如阅读互联网或互动的多媒体。Spiliotopoulos对多元识读有更宽广的视野，认为它指人们能从多种信息传递和信息网络理解各种模态的语篇，能发展批评性思维的技能，能与他人合作并帮助他们发展跨文化意识。根据现有材料，多元识读能力是多层次的，其中最高层次的能力要求参与者不仅能识读语篇信息，能解释符号和图像，利用多媒体和其他技术工具，如互联网，实现意义构建、学习和与他人互动（胡壮麟，2007；韦琴红，2009）。 多模态话语分析的概念和理论研究还处于初始阶段，国内外只有少数专家、学者从事该领域的研究。目前，人们多元识读的意识还几乎没有建立起来。然而，对于担当未来社会文化传播主力军的大学生而言，进行多元识读能力的培养有着非常重要的现实意义和时代意义。 为此，笔者选取了“2010北京国际车展”的大众汽车“蓝·创未来”环保广告为研究个案，以问卷调查和访谈的形式调查了北京部分高校不同年级的近200名本科生，尤其是英语专业本科生，了解其多元识读意识和能力。根据调查和访谈结果，笔者对大学生对该则广告解读的情况进行了总结： 1.大约92%的学生都能解读出蓝色代表海洋、天空，象征着清洁、环保的未来。这也说明颜色在这则广告中发挥的重要作用。 2.只有大约2%的学生，提及了广告把文字和颜色结合了起来，能够想到“Think”表示行动，广告要求大家用环保的思维方式去思考，然后行动，还世界一片蓝天。 3.大约3%的学生认为这则广告中的蓝色代表自由，目的是激起人们自由弛骋的想象，这是对广告的错误解读。 4.还有大约3%的学生提出，这则广告信息量太少，如果教师不提示是大众汽车的广告，

多模态批评话语分析

多模态批评话语分析 随着互联网和多媒体的迅速发展和广泛应用,语言文本不再是交际的唯一手段,图像、手势、动作、颜色、声音等其他非语言符号也成为信息传递的重要方式。我们生活在一个由多种符号资源构成的社会中,意义的构建不再单纯依靠语言文本,而是越来越依赖各种符号资源的整合。人类交流所依赖的媒介和渠道被称之为“模态”(modality),例如:语言、声音、颜色、图像、手势等符号系统。作为人类的一种重要交际行为,话语自然具有多模态性。传统的话语分析以大于句子的语言单位作为研究对象,对实际使用中的语言进行观察和分析,研究语言的组织结构、使用特点、语法规律、语言中的制约因素等内容,忽略了能够传递大量重要信息的其他非语言符号。可见,传统的话语分析已经不能满足人们的实际交际需要,多模态话语分析符合当下信息时代发展的要求和趋势。多模态话语分析为人类理解丰富多彩的符号系统提供了新视角,目前已发展成为一种重要的话语分析方式。像语言一样,视觉符号和声音符号貌似正常或中立(平淡无奇),实则隐含着个人或社会团体的不公正、偏见和歧视。因此,在多模态话语分析中,我们应坚持批评的立场,给予非语言模态符号足够的重视,关注其中含而不露的意识形态意义,尤其是那些被人们习以为常的思想和观点。在多模态话语和批评话语分析互相影响

和借鉴的基础上,多模态批评话语分析应运而生。 20世纪90年代,多模态话语分析在西方开始兴起,引起越来越多语言学家的关注。传统意义上的话语分析注重分析语言符号系统和语义结构本身,忽略了对其他符号系统(例如:图像、声音、颜色、手势等)的研究。随着现代科学技术的发展,人类交际开始依靠多种模态共同完成,包括图像、音乐、声音、颜色等。而这种运用语言、图像、声音、动作等多种符号资源进行交际的现象就是“多模态话语”(multimod aldis-course)。学界对交际中出现的图像、手势、姿态以及空间的运用也产生了浓厚兴趣。学者们认识到,对于意义理解不仅需要对话语语言的分析,更要对独立或相互依赖的其他符号资源进行研究。法国语言学家BarthesRlando是最早从事多模态话语分析研究的学者之一。他在1977年发表的论文《形象的修辞》中探讨了图像在表达意义上与语言的相互作用[1]。Kress和VanLeuwene[2][3][4](P343-368)[5](P35-50)作为社会符号学的代表研究了模态与媒体的关系,在系统功能语言学的基础上,构建了视频话语的分析模式和多模态话语分析框架,探讨了多模态符号表达意义的现象,包括视觉图像、颜色语法以及报纸的版面设计和不同媒介的作用等方面。2007年,朱永生[6](P82-86)提出了两种多模态话语的识别标准:(1)同时使用两种模态的话语叫做“多模态话语”;(2)只涉及一种模态,但包含两个或更多符号系统的话语也是“多模态话语”,比如:视觉

_喜羊羊与灰太狼之虎虎生威_的多模态话语分析

20世纪90年代西方兴起了多模态话语分析，为 由多种符号组成的语篇分析提供了途径。此种分析方法能帮助读者了解不同模态作为社会符号如何共同作用构成意义，达到意义潜势，对提高人们多模式话语识读具有积极的意义。随着科技的不断进步，人们的生活越来越丰富多彩，各种多媒体充斥着人们的生活，多模态话语分析也越来越多地被应用于影视戏剧、电视广告、FLASH 、大型演出及舞台表演等等。本文拟以功能语言学理论和视觉语法为基础，结合声音系统，以电影语篇目前最为流行的《喜羊羊与灰太狼之虎虎生威》（下简称《虎虎生威》）为例进行多模态话语分析，旨在提高人们多模态话语识读能力及为观众赏析此电影提供一个新的视角。 一、理论背景 1.多模态语篇 朱永生提到了识别多模态语篇的两个判断标准。首先是看涉及的模态种类的多少。[1]模态指交流的渠道和媒介，包括语言、技术、图象、颜色、音乐等符号系统。准确地说，有视、听、嗅、触、味五个感官，五种交际渠道，即“五个模态”。例如看电视时，我们通过视觉模态观看电视画面，通过听觉模态收听声 音。其次，判断多模态语篇还可以看涉及符号系统的多少。例如小说中的插图，通常情况下只涉及一种视觉模态，但它还包含文字、图画、色彩的变化以及印刷体式的调整等。再如，电视广告，不仅包含视觉模态，还有听觉模态。简而言之，多模态语篇就是指涉及多种感知模态或由一种以上符号系统共同编码构建整体意义、传递信息的文本。 2.多模态话语分析 多模态话语分析的主要理论基础是Halliday 创立的系统功能语言学理论，其出发点是语言是社会符号。Halliday 认为语言系统中有三个用来表示功能意义的元功能，或称纯理功能：概念功能、人际功能和语篇功能。其中概念功能指语言对人们在现实世界(包括内心世界)中各种经历加以表达的功能，人际功能指讲话者运用语言参加社会活动的功能，语篇功能指语言用于组织信息的功能。Halliday 建构功能语法的目的是为语篇分析提供一个理论框架，这个框架可以用来分析英语中任何口头或书面语篇。 [2]32 Kress 和van Leeuwen 以halliday 的系统功能 语言学理论为基础，在将图像也看作社会符号的前提下，将Halliday 功能语言学中的纯理功能思想延 收稿日期：2010-12-17 作者简介：郭思斯（1986-），女，河北石家庄人，硕士研究生，主要从事英语语言学研究。 《喜羊羊与灰太狼之虎虎生威》的多模态话语分析 郭思斯 （南京师范大学外国语学院，江苏南京 210097） 摘 要：由于电影话语分析涉及到图像、音乐、语言、声音、文本等多种符号模态，以往人们常从 文学评论、电影评论、心理学、美学等宏观角度出发对其进行探讨，而较少使用以语言学为切入点的语篇分析方法。通过从再现意义、互动意义和构图意义上讨论电影《喜洋洋与灰太狼之虎虎生威》中虎威太岁拜年的图像意义表达方式，从电影的角度分析虎威太岁出场的场景、场面调度、画格，从动 画的独特特点分析该电影中各个动画人物色彩等各级阶符号，以及从图像、文字如何与听觉模态音乐等互动方面分析其背景音乐及片尾插曲，可以发现多模态话语分析理论在动画电影分析中具有可行性。 关键词：多模态话语分析；动画电影；图像符号系统；声音符号系统中图分类号：H0-06 文献标识码：A 文章编号：1673-1972（2011）02-0098-04 第13卷第2期石家庄学院学报 Vol.13，No.22011年3月 Journal of Shijiazhuang University Mar.2011