我要訂閱
評估的影響力:利用數據分析學習專案 (I)
知識園地 2024.04.26

 

組織如何透過數據分析學習專案

組織每日都在執行學習專案,幫助員工成功地完成工作。為了證明在這些專案使用時間和資源的合理性,TD人員和領導者需要瞭解這些專案是否實現組織設定的學習成果和業務目標。了解這個問題的唯一方法是收集有關學習專案的質化和量化的資料,這些資料可以幫助組織確定員工是否正在學習新技能並在工作中應用。但是,三分之一的TD人員認為,他們的組織在衡量學習專案的有效性方面做得普通或是很差。

ATD透過對222名TD人員的抽樣調查,要了解如何使用數據來確定學習專案是否有效?需要員工具備較強的數據素養知識、數據分析技能、對數據隱私的了解,以及數據驅動決策的經驗。只有不到一半的受訪者表示,其組織為員工提供數據素養學習機會,而大約一半的受訪者表示,其組織提供數據分析學習機會。所有員工都需要對數據隱私有基本的了解,總共78% 的組織提供有關此主題的學習機會。約有一半的組織為員工提供如何做出數據驅動決策的學習機會。而數據驅動決策的一部分是設定目標,目標和成果有助於TD人員確定需要收集哪些數據?96%的受訪者認為,學習專案最常見的目標是讓員工運用新技能。提高產品或服務品質、提高員工生產力、提高客戶滿意度,以及提高員工參與度也是大多數組織的目標。

為了評量學習目標,最常用的評估模型是Kirkpatrick 的四級評估(Four Levels of Evaluation)。71% 的組織至少使用該模型的一部分,其中 75% 的組織對該模型表示滿意。其他評估模型包括:菲利普斯的投資報酬率方法(Phillips ROI Methodology)(20% 使用)、考夫曼的五級評估模型(Kaufman's Five Levels of Evaluation model)(15% 使用)、布林克霍夫的成功案例法(Brinkerhoff Success Case Method)(11% 使用)和安德森的學習評估模型(Anderson Model of Learning Evaluation)(8% 使用)。

而為了評估學習專案,兩種最常見的數據收集方法包括在線調查(92%)和與學員的非正式交談(67%)。幾乎所有組織都表示,至少有時會詢問參與者對學習專案的滿意度。五分之四的組織至少有時會收集學習成果數據。四分之三以上的組織至少有時會詢問有關學習方式的問題。

因此為說服高階管理者認知到學習機會的重要性,TD人員需要掌握具體的證據證明學習專案是有效的,而收集證據最有效的執行方式,是使用有關計畫的質化和量化的資料。組織可以根據收集來的資料為學習專案做出準確的決策。

根據ATD研究調查,只有14%的TD人員,認為其組織在評估學習專案有效性,表現的很優秀;另外27%認為其組織只表現為良好。另一方面,有35%的受訪者表示其組織在評估學習專案有效性,做得普通或較差,在評估學習專案有效性,還有許多改進的空間。而被問及在評估學習專案影響個人的知識和技能時,僅有14%的受訪者認為是專家級,30%的人認為是精熟,23%的人認為能夠勝任,另外23%的人認為瞭解相關知識,有9%的人認為正在探索,而有1%的人認為評估學習專案影響,並不適用於其組織中。

最後ATD 研究針對組織如何應對評估學習專案影響的挑戰,提出一些建議。在建構學習專案前,先考慮預期成果和目標。確定這些成果和目標是否可以評估,以及如何評估。同時,為所有員工提供提高數據技能的機會,包括數據素養、數據分析和數據隱私方面的培訓。此外,還要宣傳學習專案的成果。向內部和外部利益相關者介紹參與者的成就。在邀請員工參加未來的學習機會時,還要說明如何利用這些數據來改進學習機會。


資料來源:ATD "Measuring Impact Using Data to Understand Learning Programs" Whitepaper

BACK TO TOP