評估的影響力:利用數據分析學習專案 (II)
知識園地
|
2024.05.02
利用數據了解學習專案
ATD研究向受訪者詢問了關於評估學習專案影響的問題。根據調查數據和與主題專家的訪談,本報告提出了幾項建議:
- 踏出第一步從現在開始
對於尚未開始收集學習專案數據的組織來說,現在是時候開始著手了。正如ATD調查的受訪者所建議,可以先從評估一些較簡單的事物來開始,如果無法以較簡單的事物來展示其評估的重要性,那麼在某種程度上進行評估即沒有太大的意義,一開始使用其他形式的評估可能較困難,可以試著使用笑臉表(簡單的培訓評估)來開始。一旦開始適應,就可以試著添加其他內容。例如:從參與者滿意度調查開始,踏出第一步可能會有些困難,但組織將開始看到評估帶來的價值。
Design development solutions公司主要所有者Szlachta建議組織一步一步地進行,她認為與幾個人交談,談談可以獲得的數據和想要收集的數據,以及計畫如何收集數據。並且在制定評估策略之前,獲得利害關係者的支持。 - 在建構學習專案之前,先思考可評估結果和目標
首先要考慮的行動步驟是考慮問題,要解決的問題或追求的機會是什麼?有哪些可衡量的結果和目標?學習與發展專家Yates認為除了消費、利用、出席和參與外,真正需要確定的是培訓和學習解決方案的目的,最初的討論應該圍繞著發現、好奇心、洞察績效的需求展開。
一旦確定這些目標後,就可以制定相關的學習專案,確定結果可以為學習專案打下基礎,並確定哪種評估架構最適合評量結果。雖然一些評估模型可能更受歡迎,但它們不一定始終是評估組織的學習目標和業務目標的最佳選擇。
Szlachta建議選擇一個與目標相關的模型。因為並非所有計畫都會有相同的目標,所以沒有「放眼四海皆萬用」的模型。通過在流程的早期確定目標、結果和評估架構,人才發展專業人員將更好地了解如何建構有效的培訓計畫。有效的培訓可能是昂貴的,然而無效的培訓成本更高! - 宣傳學習專案的影響
一旦收集到數據,更重要的是利用數據做出以數據為導向的決策。而這些數據需要被傳達給利益關係人,並向高階領導者說明學習專案的成功。討論如何根據數據和反饋所發現的狀況,進行學習專案的改進。數據的共享對每個人都很重要,學習專案參與者會感謝組織根據其回饋並加以利用。領導者也會想去了解學習專案是否有助於組織。
組織可以提出假設,然後制定希望通過數據傳達的報告。一旦報告完成時,可以試著加入非常優的視覺效果。不管是Excel還是Google Looker Studio,都可以展現發生的軌跡,只談論數據,並陳述報告。
而這些數據在招募員工參加未來學習專案時也很有用,如果了解其他員工透過學習專案獲得知識或技能,新員工更有可能參加學習專案。領導者也更願意推薦學習專案,正如一位ATD調查的內容,向領導者展示知識和技能的增加,及如何協助個人達到或超過其KPI,將會獲得領導者的大力支持。
資訊傳遞的透明度也很重要。Yates認為有時很難評估培訓的影響,但這並不代表著培訓無效或沒有價值。組織在溝通策略中可以坦率地說明,更加透明、誠實和開放,在哪方面有機會評估培訓的影響力,在哪方面評估影響力的複雜性抵消機會,並用事實、證據和數據來支持,但也須承認無法全面評估培訓和學習的影響力。 - 為所有員工提供提升數據技能的機會
給予員工學習數據的機會。根據調查不到一半的組織提供數據素養學習機會,而略多於一半的組織提供數據分析學習機會,此狀況代表組織為員工提供發展機會。
Szlachta 認為要成為一個數據驅動的組織,必須提高數據素養技能,這是對每個人都如此,如果某些人不具數據素養的思維模式,那麼組織中很難共同做出數據為基礎的決策。而提高數據素養技能的最簡單方法是,教導員工如何在自己的工作中和持續的基礎上使用數據。
此為TD人員可能需要額外培訓的領域,根據ATD的調查超過三分之一的受訪者在數據素養技能正在探索或了解,而幾乎有三分之一的人對自己的數據分析技能表示同樣的看法。
Szlachta還認為如果不採用數據素養的思維模式做出數據為基礎的決策、不將測量和評估融入學習以展示結果和價值,如果不培訓此能力,那麼人才發展人員將被淘汰。這其中的影響是相當可怕的,因此作為TD專業人士採用任何形式的數據思維最重要的原因,是保護其工作及職涯發展的未來。
資料來源:ATD "Measuring Impact Using Data to Understand Learning Programs" Whitepaper