財團法人高等教育評鑑中心基金會  

 

高等教育學習成果評量(AHELO)之可行性研究
文/Dr. Sarah Richardson
  澳大利亞教育研究協會(Australian Council for Educational Research)資深研究員
譯/蔡珮鈞
  台灣評鑑協會國際事務處專案副理

全球高等教育機構一致認為評鑑應了解的問題,應著重於如何評量學生學習成效?學生畢業出路為何?如何藉由評鑑協助學生提升學習成效?以及如何運用評鑑所獲資訊協助教師改善教學?上述這些問題均攸關高等教育機構所提供之教育品質是否得以維繫與提升,以及畢業生是否具備就業所需技能。雖然上述問題存在已久,但迄今未見令人滿意的答案。

從學習成效評鑑到高教整體評鑑

經濟合作暨發展組織(OECD)所進行的「高等教育學習成果評量」(Assessment of Higher Education Learning Outcomes, AHELO)之可行性研究,正試圖填補這個關鍵資訊落差。本研究希冀藉由適當設計並分配教學與學習成效之權重比率與評量,以提供豐富可用資訊,內容主要針對「通識教育、經濟學及土木工程」等三個學門所開發的評量工具,及對此評量工具的可用性加以驗證。本項計畫計有17個國家,包括加拿大、義大利、墨西哥、埃及、俄羅斯、芬蘭、美國、澳洲、日本和南韓等高等教育機構與大四學生參與,目的在了解學生如何運用其所學技能與知識,以及解決其在現實生活中面對各項問題之能力為何。隨著這項研究計畫的進行,作者有機會體驗到許多重要的新觀點,這些觀點對於高等教育具有重大意涵,影響範圍不單只是學習成效評鑑,更是廣泛的高等教育整體評鑑。

AHELO之可行性研究初期,許多人對於使用跨國評鑑工具來評量學習成效抱持高度懷疑,然而隨著研究的進行,很多人改變看法;例如,與評鑑利害關係人之間的討論從是否應將學習成果列入評鑑,轉至如何把學習成果列入評鑑;另外,有愈來愈多的國家加入研究計畫,致使因有太多機構想要加入,最後必須設定每一國家參與的上限。資料亦顯示世界各國皆為其高等教育投注大量心力,許多利害關係人亦因此更加關注高等教育品質保證。

此外,各國政府逐漸要求其所屬高等教育機構展現成功教育學生的成效,學生也希望自己努力付出的時間與金錢可以為自己帶來回報,雇主則苦惱於無法判定哪一位畢業生可以為公司帶來最大的利益,上述現象正隨著高等教育的需求及學生數量的成長頻繁地發生。然此時,許多國家卻刪減其高等教育預算,綜上因素,我們發現各國為了闡明高等教育改善情況及整體品質,對於教學和學習品質的相關資料與數據真的需求若渴。

確保評鑑能改善教學與學習

為確保高等教育之教學及學習品質,評鑑所扮演的角色愈趨重要,而且不管評鑑形式是形成性還是總結性、單獨或是群體、高風險還是低風險,高等教育評鑑課題都不會有所改變,幾個評鑑關鍵基礎問題亦須釐清,例如:評鑑目標為何?如何了解學生學習現況?資訊有效運用可使評鑑成為提升教學成效的催化劑,並可清楚說明預期評量標準,為學生提供如何加強學習效能的寶貴資訊,亦能協助教職員了解教學成效,系所與校方亦可藉此建立起持續改善的有效循環。

「AHELO之可行性研究」的成果豐碩,其中許多資訊都可應用到高等教育評鑑上,例如:協助學校判斷學生是否應被接受入學,以及了解學生的學習進展或學習成效。此項結果不管運用於某一機構中的一群學生,或是跨越許多機構與國家的數千名學生,所獲資訊都是在確保評鑑確實協助改善教學及學習。茲將AHELO之可行性研究分列以下五個評鑑活動面向說明。

AHELO研究的五大評鑑活動面向

●對評鑑目標達成共識

針對AHELO可行性研究中的學門能力評量部分,宜建構一套評鑑架構,其目的為明確呈現評鑑及其相關活動;首先需清楚定義評鑑範圍,接著提供清楚的評鑑概念與結構,同時說明在評鑑範圍內如何運作以達到評量目的。評鑑架構係確認所有評鑑參與者清楚知曉評鑑對象、格式及評鑑目的為何,並能定義評鑑所需的資料,不論是透過正式計畫或概念勾勒,均有助於評鑑資料的分析,同時對分歧資料做出調整。因此,評鑑架構對於不同形式的高等教育評鑑皆甚為重要。據此研究顯示,若缺乏評鑑架構,在對複雜或具爭議性的領域進行評鑑時,將難以定義評鑑工具所欲評量及評斷之事物。

●合作開發評鑑工具

為有效降低費用和縮短時間,AHELO之可行性研究運用已存在的評鑑資料來滿足評鑑架構下部分特定要求,這個方法為未來高等教育評鑑提供寶貴經驗。高等教育機構常投入高額的金錢及人力來製作評鑑資料,而受評機構間多不互相合作,造成一再重覆他人所做行為,此舉不但不具效率,亦是時間與精力的無謂浪費。

有鑑於評鑑資料品質各異,且考量不同受評學校間對同一學門教學的相似性,因此與其他受評機構進行評鑑資料共享係為相當合理之舉。但這並不表示所有受評機構給予學生的測驗都相同,而是各受評機構間應建立一個共享評鑑資源的平臺,如各受評機構同意將其各自評鑑材料存放於一個共同系統,每個受評機構皆能因此受益,教職員亦可在計畫早期階段即接受跨機構合作關係的訓練,此一機制必可運作得更好,也能促使教職員更精準得到所需資料,而專業評鑑人員的投入亦可協助確保此一機制本身的品質。運用這樣的平臺,一方面讓使用者保有對其所運用之評鑑資料的品質控管,另一方面得以使用其他機構所開發的相關資料,如此的知識及專業交流無疑將可創造參與各方多贏的局面。

●納入教職員與學生觀點

評鑑的價值在於可為學生和教職員提供有關如何改善教學及學習的新觀點。如果未能達到上述效果,則教職員和學生都會視評鑑為師出無名之舉,如果要善用評鑑來改進教學及學習,數據資料就必須公布在一個易於取得的介面,同時資料也應是清楚易懂的,最理想的狀況就是學生可以收到清楚說明其學習成效的反饋意見,這不僅將成為鼓勵自己進步的動力,同時也可套用這些建議來提升自己的學習。

然而,學生往往只收到分數或是等第,雖然這對最後一年的考試來說可能已經足夠,但若希望自我表現有所進步,單單給予一個等第或成績顯然不足;評鑑的數據資料即能傳達許多教學相關的資訊,教職員可藉此了解學生的表現,並得據以修正教學以呼應並滿足學生的需求,同時也可適時介入,幫助表現比較不好的學生,並提升他們的表現。然這些現象的前提,就是評鑑數據資料必須是容易得到且易於閱讀的。但上述現象在高等教育機構並不常見,因此制定資料撰寫規範、訓練職員解讀和使用數據資料,都將有助於改善整體情況。

●向學生提供有效的評鑑工具

所有AHELO之可行性研究中所進行的測試及調查都是透過網路完成,當我們談到傳送評鑑資料給學生時,資訊科技顯然助益良多,以電腦為基礎的傳送普遍被認為是最划算、安全、容易使用及有效率的,透過網路的傳輸可以讓我們知曉學生如何看待及處理評鑑資料,我們可以限制每一個環節所花費的時間,並對此加以記錄,亦可控制評鑑資料的呈現順序以避免學生感到疲乏,更可強制禁止使用參考資料。同時,多媒體的加入將使評鑑資料具互動性,進而鼓勵學生參與。我們更可對封閉式問題進行自動批閱,而對於學生及教職員的反饋意見,亦可藉由按鍵產生,除了學生可以很快得知哪些部分需要加強,教職員也可清楚知道學生的需求,進而改善他們的教學。

●分析資料、標竿學習

個別受評機構必定會為自己的表現進行評量分級,但更難能可貴的則是在跨機構間設立分級標準。建立一個儲存評鑑資料的平臺可以是目的,但也同時作為跨機構間標竿學習的方法。標竿學習並非要求所有機構都為學生提供同樣的評鑑資料,反而是合作機構間一同選擇核心資料並提供給一群特定的學生。這個作法將可取代一般制式的內部評鑑,或是作為額外的補強。分析這些核心資料所搜集的數據後,每一受評機構都會收到一份整體基準的標準,也就是他們學生的表現報告。目前澳洲醫學院已採取此一評鑑模式,並引起廣泛討論。

創新評鑑作法有助高教達到核心目標

高教評鑑無庸置疑地將面臨一場革命。利益關係人時常要求提供教學及學習品質提升的證據,而現今國際間的評鑑卻對此加掣肘。國際交流使得評鑑比過去複雜,但卻為標竿學習提供重要契機;資訊技術使實施評鑑變得簡單,也簡化學生和教職員得到反饋意見的流程。作者相信本文所討論的方法將成為未來高等教育的標準,更確信採用創新的評鑑作法將協助高等教育達到核心目標:提高教學及學習價值,進而提升整體品質。

 列印 |  轉寄好友 |  Top |  回首頁

本期目錄
-本期目錄
單元相關文章