多模態環境下大學生英語語言技能評價方法研究

陳 俊，裘瑩瑩

(淮陰工學院外國語學院，江蘇 淮安 223003)

一 多模態概念及相關理論

模態指人類通過感官(如視覺、聽覺等)跟外部環境(如人、機器、物件、動物等)之間的互動方式。用單個感官進行互動的叫單模態，用兩個的叫雙模態，三個或以上的叫多模態(顧曰國2007)。張德祿等(2010)認為，在話語分析研究中，人們發現單純研究語言話語已經不能對話語進行深入全面的分析和研究，特別是隨著現代科學技術的發展，很大部分話語意義是由非語言因素體現的，如伴語言特征、身體特征、教學設備、實驗室、計算機、網絡、周圍的環境因素等。在這種情況下，交際不是利用一種模式進行，如說話是口頭，書寫是文字等，而是用兩種或者多種模式同時進行，如用PPT上課則是圖像、文字、口語同時進行的。這種以多種交際方式產生的話語就是多模態話語。模態話語指運用聽覺、視覺、觸覺等多種感覺，通過語言、圖像、聲音、動作等多種手段和符號資源進行交際的現象(張德祿等2010)。隨著多媒體網絡技術的發展，在外語教學中，無論是教師的教學，還是學生的英語學習，僅靠某一種單模態已無法滿足對學生各個感官綜合能力訓練的目的，所以在英語教學中，教師應該正確運用多模態的教學模式，即在教學過程中不僅運用視覺模態，聽覺模態，觸覺模態等感官模態的結合，也指教學過程中文本語言模態，圖像模態，聲音模態等的多模態的運用(黃雪飛2010)，以調動學生的感官能動性，培養學生的英語語言技能，達到英語教與學的目的。

二 多模態環境下對學生英語語言技能評價的理論依據

1.多元智能理論。

隨著人們對自身智力認識的不斷深入和發展，新的關于人類自身的智力(智能)理論也相應的產生出來，其中以被譽為“多元智能理論”之父的——美國哈佛大學的心理學家和教育學家霍華德·加德納教授最具代表性，他提出了“多元智力理論”，該理論介紹人類的智能是多元化而非單一的。主要是由語言智能、視覺空間智能、音樂智能、身體運動智能、數學邏輯智能、人際交往智能、自我認識智能、自然觀察智能八項組成。在多模態環境下，學生在學習英語的過程中，必然會想方設法的調動身體的器官，即調用自身的多元智能以便在建構語言知識同時提高自身語言綜合能力。如在多模態環境下，學生可以運用其語言智能進行文字編輯(如教師讓學生寫作等)、英文電子郵件收發、PPT制作;運用其視覺空間智能可以對視頻、計算機輔助圖像、圖形、空間想像等進行加工、編輯;身體運動智能可以幫助學生在任務型學習過程中，能夠做到既動腦又動手，如PPT制作、演示真正地實現“做中學”(learning by doing);學生自身所具有的人際交往智能，主動地參與到在學習過程中，與老師溝通、與同伴溝通、用目標語與課堂之外的其他人進行交流;通過自我認識智能，學生對自己進行評價，這樣學生可以認識到自身存在的不足，哪些地方需要提高，并為自己設定以后的學習目標，并努力為之奮斗;自然觀察智能可以幫助學習者對周圍所處學習環境如上課的教室、教師和學生所使用的動腦、投影機、音箱、屏幕等進行觀察，并且適時地做出調整以適應這樣教學環境。

2.多模態話語分析理論。

在多模態環境下進行語言的教與學，必然涉及到多模態話語分析(Multimodal Discourse Analysis)，它是20世紀90年代在西方發展起來的，其意義在于它可以將語言和其他相關的意義資源整合起來(Gibbon 2000)。朱永生(2007)認為多模態話語分析是在生命科學研究成果的基礎上發展起來的。生命科學的研究成果認為生命體通過聽覺、視覺、觸覺、嗅覺、味覺等感知通道來獲取外部環境信息，并對周圍環境做出及時、有效的反應。換言之，學生(生命體)在學習語言的過程中，也會通過多種渠道和借助多模態如聽覺、視覺、觸覺、嗅覺和味覺等多種感官形式，來努力提高自己的英語聽、說、讀、寫技能。英語教學的特點之一是使學生盡可能從不同渠道、以不同形式接觸和學習英語，這也正是多模態所提倡的(楊家勤等2009)。在條件許可的情況下，充分利用各種聽覺和視覺手段，英語教師在學校教學設備許可的情況下，也應充分利用各種聽覺、視覺手段，比如在課堂英語教學中利用圖片、音頻、視頻等，使課堂教學內容和形式更加豐富，讓學生在多種模態環境下接觸語言，進行語言的輸入;還可以利用校園廣播播放英語新聞、學生所學課本的音頻文件、英文歌曲等，為學生在多種模態交互環境下提高其語言技能創造有利條件。

三 多模態環境下學生英語語言技能的評價方法

1.多媒態環境下對學生英語聽、說能力的評價。

對學生的英語語言技能的評價應注重其過程性，即注重對“學生日常學習過程中的表現、所取得的成績以及所反映出的情感、態度、策略等方面的發展”做出的評價，是基于對學生學習全過程的持續觀察、記錄、反思而做出的發展性評價。這種評價形對學生的自主學習產生了有效的推動作用，學生在新的評價方式督促下漸漸養成了自主學習的習慣，增強了學習自信心(蔣宇紅，周紅2010)。多模態環境下教學可理解成教師(或學生)在多媒體環境下充分調用多模態，如視頻、電影剪輯、錄音、圖畫、圖表、實物、道具等，獲取、傳遞和接收信息(應建芬2011)。在多模態環境下，學生可以在教師的指導下，合理有效地利用豐富網絡資源:如因特網、學校自己建設可供學生使用的局域網資源(如如學校引進或自己開發的英語在線學習、反饋以及評價系統);或把文本、聲音、圖像、動作、教學設備、計算機等結合起來進行聽說能力的培養和提高。進行多媒體語料庫的開發和建設，即整合多媒體技術，把語料檢索與音頻、視頻有機地結合起來。多媒體語料庫開發人員在建庫的時候，把英語國家標準、地道的與英語教學相關的音頻、視頻文件、音頻或視頻所附帶的字幕以及與多媒體文件的相關資料和信息放入多媒體語料庫。學生在教師的指導下逐漸學會自主學習使用該軟件系統，利用該多媒體語料庫練習聽力、模仿口語，以提高自己的聽力和口語能力。同時學生還可以在教師的指導下學習音頻軟件Praat，學生用音頻編輯軟件Praat定期將自己的口語錄入進去，教師定期地把學生音頻錄制素材收集起來，并用音頻編輯軟件Praat進行分析，并結合上文提到的多媒體語料庫對學生自己錄制音頻材料進行對比、分析，以便檢查學生在一段時間內聽力和口語能力也沒有提高或提高了多少，進而達到了比較科學地評價學生的聽力和口語能力的目的。

同時，為了比較全面地了解、分析和評價學生在目標語英語進行交際的語言特征以及伴隨的手勢、說話者面部表情、身體的姿態，身體的移動，以及說話者的周圍環境，還可以使用多模態環境下學生的話語分析軟件。王立非等(2008)介紹了有一種比較實用的多模態分析軟件ELAN(見圖 1)，ELAN(EUDICO Linguistic Annotator)是由馬普心理語言學研究所(荷蘭奈梅亨市)的Brigit Hellwig設計開發的一個多模態話語分析軟件。如果想獲得該軟件最新版本3.9.0，用戶可以到 http://www.latmpi.eu/tools/Elan網站免費下載。這個軟件可以分析說話人(學生)的話語內容、語音語調、面部表情、唇形、肩部和手的動作等，并將學生的這些音頻、視頻文件保存起來，以便逐步了解和評價學生在用英語進行交際過程中的非言語交際能力。

圖1 多模態話語分析軟件ELAN［4］

2.多媒態環境下對學生英語讀、寫能力的評價。

評價要有利于學生的發展，對學生的學習起到促進作用?！洞髮W英語課程教學要求》(2007)提到對學生的學習評估要采用形成性評價和終結性評價相結合的方式，著重評價學生的綜合語言運用能力以及在學習過程中表現出的情感、態度和價值觀。馬光仲等(2010)認為對學生學習過程的評價，需要一定的過程信息。傳統的基于紙張的文件夾在存儲、維護、檢索等方面存在很多問題和困難，信息技術的應用為上述問題提供了技術解決方案，其中電子作品(e－Works)和電子檔案(e－Portfolio)是影響最大、研究也最為廣泛的一種計算機輔助評價策略。在這種情況下，學生在教師的指導下自己單獨或以小組為單位完成老師在英語教學所設計任務，學生們除了以傳統的紙質的文本形式完成老師布置的任務，更重要的還可以借助多媒體、網絡技術，如教師讓學生在課后根據所學習的課文內容獨自地或以小組的形式，在圖書館里、在網絡上收集與所學課文相關的信息和資料，然后再讓學生單獨地或以每個小組派代表的方式用PPT或其他形式，在教室里向老師和同學展示并講解;再如借助超文本系統Wiki，學生可以在該系統里進行“作品”(上述提到的老師所布置的任務)即文本的創作，亦可以對老師所布置的閱讀任務進行閱讀、思考以及就閱讀材料評論并發表個人的觀點，其他學生可以通過該網頁瀏覽學生的“作品”，然后同學之間進行相互交流、討論，學生之間進行相互評價并提出修改意見，老師也可以根據學生之間相互評價，對學生的“作品”提出比較客觀全面的評價，這樣有利于學生學習水平的提高和教師的教學效果改進。這樣就逐漸形成多媒態環境下對學生的閱讀、寫作的形成性評價。

四 結語

由于關于多模態環境下的語言學習研究國內近年來才興起，而有關在多模態環境下如何對學生的英語聽、說、讀、寫四種語言技能的評價，還比較少。本文就多模態環境下如何對學生的英語四種語言技能進行形成性評價做了探討，并提出一些評價方式，以便逐步構建起多模態環境下學生英語語言技能的評價體系，以便更好地促進學生的學習和教師的教學。

［1］顧曰國.多媒體、多模態學習剖析［J］.外語電化教學，2007(2):3－12.

［2］張德祿，王璐.多模態話語模態的協同及在外語教學中的體現［J］.外語學刊，2010(2):97－102.

［3］黃雪飛.多模態教學模式下新生多元識讀能力的培養研究——以大學英語教學為例［J］.西南科技大學學報，2010(4):60－62.

［4］霍華德·加德納.多元智能(修訂版)［M］.北京:新華出版社，2004.

［5］Gibbon，Dafydd，IngeMertins＆RogerK. Moore.Handbook of Multimodal and Spoken Dialogue Systems［M］.Boston:Kluwer Academic Publishers，2000.

［6］朱永生.多模態話語分析的理論基礎與研究方法［J］.外語學刊，2007(5):82 －86.

［7］楊家勤，劉金菊，金仁慧.淺議普通高中英語課程標準與多模態教學［J］.貴州教育學院學報，2009(4):78－81.

［8］蔣宇紅，周紅.大學英語采用形成性評價促進學生自主學習的實證研究［J］.北京第二外國語學院學報，2010(2):69－74.

［9］應建芬.多模態話語分析與大學英語詞匯教學［J］.牡丹江大學學報，2011(6):136 －138.

［10］王立非，文艷.應用語言學研究的多模態分析方法［J］.外語電化教學，2008(5):8－12.

［11］教育部高等教育司.大學英語課程教學要求［Z］.上海:上海外語教育出版社，2007.

［12］馬光仲，蔡旻君.計算機輔助評價發展的回顧與思考［J］.電化教育研究，2010(4):49－53.