背景
精算學會(SOA)是全球最大的精算專業組織,擁有超過30,000名會員。透過教育和研究,SOA推動精算師成為測量和管理風險的領導者,以改善個人、組織和公眾的財務結果。2017年,SOA希望在其證書生命周期的各個階段(從預資格到專業發展)增強教育工作,通過增加更多有關預測分析的內容來實現。雖然他們能夠迅速推進專業發展方面的工作,但將預測分析納入其預資格教育是其副精算師(ASA)課程更大重組計劃的一部分。
情況
鑒於對以反映候選人日常工作表現的方式評估候選人的需求日益增加,並且知道該主題不適合傳統考試方法,SOA需要一種將精算師在執行預測分析時使用的軟件工具(包括Word、Excel和R/RStudio)納入考試的方法。此外,考試需要在安全區域內監考並完成,以最佳地衡量候選人對材料和預測建模方法的知識。
然而,開發這種創新的題型將需要克服幾個障礙,包括Word和Excel產品的許可問題、測試中心的可用性以避免對候選人造成負擔,以及適當的安全協議以保證考試的有效性。
策略
知道他們需要一個擁有軟件許可解決方案、成熟的全球測試中心網絡、經過驗證的安全程序以及願意在考試開發中邁出下一步的測試開發合作夥伴,SOA專門為這一倡議發佈了RFP。利用我們超過10年的合作關係以及滿足SOA在競爭招標過程中列出的所有要求的能力,Prometric被SOA選中來開發一種創新的題型,以最佳測試和捕捉精算師執行預測分析的能力。
Prometric和SOA共同開始合作開發預測分析題型,Prometric開發了一個將所有三種所需工具整合到評估中的解決方案。這種創新的題型每年管理兩次,要求:
- 候選人在5個小時以上通過構建的回應完成10-12個任務。
- 考生通過提供支持文件和文件(使用Word和R/RStudio)來展示他們解決每個任務的能力,必要時可使用Excel。
- 由SOA進行人工評分。
Prometric還與SOA密切合作,開發了一個在線演示,以幫助候選人提前了解如何導航考試。
隨後,Prometric和SOA在全球測試中心網絡中推進了安全軟件的安裝。在世界各地的幾個地點與主題專家(SME)進行了試點,SOA和Prometric的工作人員在場以確保成功啟動。
結果
在Prometric的技術和結合各種測試和技術支持的意願以及SOA在重新設計題型和迅速解決出現的問題方面的靈活性下,經過一年的開發和SME試點啟動,第一次真正的考試於2018年12月對候選人進行了管理。
這種新題型允許進行更高級別的數據分析,同時也成為與競爭對手的區別因素。SOA不僅是精算行業中第一個提供這種現實世界測試的機構,還擁有考試定制設計的獨家權利。
在2019年,SOA和Prometric決定將持續的合作關係延長七年;在此期間,我們將繼續共同努力,基於創新題型的成功,尋找區分和加強SOA及其考試的方法。
「這種題型的開發和推出對於精算學會的候選人來說是一個巨大的進步。它使候選人能夠通過使用工作場所中常見的工具來展示對關鍵主題領域的熟練掌握。題型的開發需要SOA和Prometric聯合開發團隊的創新努力。SOA熱切期待將這一概念適應於我們資格認證途徑的其他組成部分。」
精算學會教育總監
下載成功案例