基于Kaufman績效評價的移動學習評價研究

王瑞華 宋薇

【摘要】移動學習已經成為高校大學生主要學習方式之一，對移動學習的研究隨著移動學習層次而不斷變化加深，當前移動學習研究存在著學習資源與平臺缺乏評價體系、學習者的行為無法跟蹤、動態評價難以實行等諸多問題。本文分析移動學習評價研究現狀，基于Kaufman績效模型，提出移動學習評價方案。

【關鍵詞】移動學習 績效評價 Kaufman

【中圖分類號】G434 【文獻標識碼】A 【文章編號】2095-3089（2018）24-0254-02

根據中國人民共和國工信部發布的最新數據，截止2017年底，我國移動電話用戶凈增9555萬戶，總數達14.3億戶，移動電話普及率為102.5部/百人，全國移動電話普及率超過100部/百人的省市有16個。2018年第一季度，活躍移動應用程序（APP）規模增加8萬款。移動通訊設備日益普及、現代信息技術飛速發展和深層次應用，將學習型社會建設提升到信息化技術的維度，作為高校信息化學習的主力軍，大學生已從傳統的課堂學習拓展到移動學習平臺，移動學習平臺不是課程知識點的簡單搬家，而是教師實現學習進度監控、自主學習導引的新策略，是學生適應數字化學習模式、增強學習效果的新途徑。

一、移動學習評價研究現狀

大學生作為高校信息化教學的主體，其自主學習能力與實踐技能的培養已成為移動學習時代關注的熱點。移動學習的優勢在于幫助學習者按照自我學習需求進行碎片化學習，學習者學習方式多樣、學習時間靈活。大學生移動學習與課堂教學一同成為大學生學習專業知識的重要途徑。

對移動學習的研究隨著移動學習層次變化，不斷向學習情境創設、學習資源融合、學習系統開發和多種學習服務等方面延伸。由于移動學習具有碎片化、個性化特征；學習內容因學科、層次的不同存在不同程度的差異性，這些因素都使得對移動學習的評價沒有普遍認同的評價體系。國內關于移動學習資源開發和評價一般采用學科設計標準、教育信息技術標準及其他領域標準，如2005年熊志剛的移動學習資源設計過程模型。

當前移動學習研究中，存在以下問題：

1.學習資源與學習平臺的評價方法不足

移動學習者的個性化學習需求是當前移動學習資源的開發、學習平臺構建、學習活動設計的主要依據。復雜、多樣的移動學習環境對移動學習資源提出了多樣化、標準化和專題化等要求，課程資源的設計者應將這些要求內化到學生學習模塊設置、學習方法導引、技能轉換中去。

2. 對移動學習動態行為的評價有限

當前對移動學習行為評價，主要使用問卷調查法，調查移動學習者在特定情境中，使用移動設備的頻率、時間、偏好等數據，并對數據進行統計分析，從而評價移動學習者的學習行為。該評價方式只能對學習者的學習行為進行粗略靜態地分析統計，無法記錄并跟蹤學習者的學習行為，并動態地進行評價。

二、Kaufman績效評價概述

績效評價，已經廣泛應用于商業管理中的企業培訓環節，常用績效考評方法，包括BSC、KPI等，評價方法占主導地位仍然是Kirkpatrick的四層次評價法。即從四個層次進行評價：受訓者學習收獲、行為改進、企業效益、社會效益?？紤]到獲取學習資源的重要性，Kaufman對Kirkpatrick評價法進行了擴展，增加了對培訓資源即學習資源的有效性與可用性的質量評估，形成了Kaufman績效評價的五個層次（見圖1）。

Kaufman評價法一方面關注學習者掌握不同的知識點、應用能力的動態變化過程，另一方面關注學習者在實際操作中通過知識轉化和技能應用，改進學習態度、改善學習能力、提高技能自信的情況進行評價。本研究認為，移動學習平臺的評價目標，是學習環節的落實和學習效果的呈現。

三、Kaufman績效評價在移動學習評價中的應用

將Kaufman模型應用于移動學習，就是根據已有的學習任務，對行為主體即學生的學習過程與學習效果進行科學化統評估與分析，并作出準確評價的行為?；贙aufman評價法，移動學習的績效評價，不僅關注學生的考試成績評價，還關注學習者對學習資源的評價、學習者學習行為的變化，以及學習者對周圍環境的影響。移動學習的績效評價指向學習者動態的學習過程，即學習的可能性和反應層次、掌握層次及應用層次，為教師提供移動學習績效評價支持，從而更為準確地為學生提供學習資源與教學服務。

1.學習的可能性和反應層次

為實現移動學習效果，可能性評估是指對學習者的學習需求進行評估，包括對學習者的學習意愿和學習目標進行調查，對調查數據進行統計分析，從而明確學習者的學習需求，以及需要的學習資源。反應評估，是指對獲取的移動學習資源與移動學習平臺進行評價。對學習平臺，是從可操作性、穩定性與安全性等多方面進行評價。在目前已有的移動學習評價體系中，往往忽視了對學習資源與學習平臺的質量評價，從而造成移動學習情境中學習資源質量參差不齊和學習平臺不穩定等問題，學生對于學習資源滿意度與學習平臺使用率偏低等問題。我們在《數據庫系統概論》移動學習平臺建設中設計了學習資源評價與學習平臺評價模塊，通過設計評分網站與在線投票等形式，體現移動學習中學生的主體性與主導性。為滿足學生零碎化移動化的評價需求，我們利用問卷星等在線問卷調查系統，設計學習資源滿意度調查問卷，基于HTML5技術與移動設備平臺，實現移動平臺資源評價。

對于評估數據進行分析后，我們發現影響移動學習者學習績效主要含以下幾個要素：（1）移動學習資源要兼顧碎片化與系統化的特點。由于移動學習的網絡帶寬限制與移動學習時間零散不固定，移動學習資源要體積小種類多，并且兼具娛稱樂性，能夠激發學習興趣。（2）移動學習平臺易操作性與穩定性。移動學習平臺操作界與菜單的扁平化設計，可以提高學習者的學習體驗，使學習者減小使用平臺的失敗率與受挫感，提升學習者的學習意愿。（3）移動學習過程的參與感。精心設計的學習過程，比如完成學習任務后的獎勵（如積分）、任務完成排行榜、學習測驗游戲等，可以促進移動學習者積極參與學習過程，改善學習者的學習效果。

2.掌握層次和應用層次

移動學習環境復雜，學習者容易受到外界環境干擾，如何評估學生在移動平臺上學習知識掌握情況，我們設計移動學習數據記錄功能。當學生登陸移動學習平臺后，系統后臺可自動記錄學生的學習時間、學習內容與學習效果。通過精心設計的學習任務模塊，將知識點分解為易于理解與掌握的練習與實驗，通過分析學生的測驗數據，對學生的移動學習進行跟蹤評價。針對學生的技能評估，由于理工類課程如數據庫系統概論課程，不僅要求學生掌握數據庫基礎理論，更要求學生能夠將數據庫理論知識運用于實際的工程項目中，即設計與管理數據庫的實際技能。在移動學習績效評價中，不僅要設計基于文本格式的測驗題。

統計分析掌握評估和應用評估數據后，我們發現影響移動學習績效評價主要包括以下幾個因素：（1）學習過程支持。移動學習平臺對移動學習者學習過程的支持程度越好，學習者越能取得較好的學習效果。移動學習者的學習環境復雜，缺乏與其他學習者共同學習實體教室環境，也缺少與教師面對面的交流機會，在線交流也很難獲得實時解答。（2）學習者個體特征。學習者的的認知水平、自控能力、自我激勵能力越強，則越可能取得較好的學習效果。（3）學習動機。學習動機也是影響學習掌握和應用的關鍵因素，學習動機內源于兩方面：外部與內部。移動學習者的學習時間與學習內容是可以自由掌控的，因此學習者的學習動機水平，會影響學習者學習的意愿水平，從而影響學習績效。

四、結語

與傳統學習績效評價相比，移動學習評價可以利用大數據與移動學習，對移動學習過程進行實時記錄，實現移動學習評價的跟蹤與優化，對移動學習進行全方位的績效評價。在Kaufman評價法中，效益評價主要是評價學習者經過學習培訓后對組織、環境或社會的影響，該評價需要更長的評價時間來進行檢驗評價。在未來的研究中，我們將從學習者自身、其他學習者、教師、社會群體等多方進行多元評價，并將反饋信息持續提供給學習者，從而幫助學習者改進自身的學習方法與學習理念。

參考文獻：

[1]陳立娟. 高校爾雅課程學習績效研究[D].聊城大學，2016.

[2]羅立群，黃紅.基于移動學習的高校成人教育模式創新[J].中國成人教育，2017（04）：31-33.

[3]李金林.移動學習發展及其績效評價設計探究[J].中國電化教育，2017（07）：95-98.

作者簡介：王瑞華（1980-），女，漢族，湖北武漢人，碩士研究生，講師，研究方向：遠程教育、高等教育。