Zoeken
Succesverhalen / SOA Innoveert om Real-World Instellingen te Testen

SOA verbetert itemontwikkeling met innovatieve nieuwe oplossingen.

De Society of Actuaries (SOA) moest de competentie van voorspellende analyse meten, dus sloeg het de handen ineen met Prometric om innovatieve items te ontwikkelen die kennis meten in echte situaties.

Innovative Item Development Revolutionizing predictive analytics and actuary testing

Achtergrond

De Society of Actuaries (SOA) is 's werelds grootste organisatie voor actuariaat met meer dan 30.000 leden. Via onderwijs en onderzoek bevordert SOA actuariaat als leiders in het meten en beheren van risico's om financiële resultaten voor individuen, organisaties en het publiek te verbeteren. In 2017 wilde SOA hun onderwijsinspanningen tijdens alle stadia van hun bekwaamheidscyclus (voor-kwalificatie tot professionele ontwikkeling) verbeteren door meer inhoud over voorspellende analyse toe te voegen. Hoewel ze snel vooruit konden op het gebied van professionele ontwikkeling, maakte de toevoeging van voorspellende analyse aan hun voor-kwalificatieonderwijs deel uit van een groter herstructureringsproject voor het associate (ASA) curriculum.

Situatie

Met een groeiende behoefte om kandidaten te beoordelen op een manier die weerspiegelt hoe ze hun dagelijkse taken uitvoeren, en wetende dat het onderwerp zich niet leent voor traditionele examenmethoden, had de SOA een manier nodig om softwaretools te integreren die worden gebruikt door actuarissen bij het uitvoeren van voorspellende analyses, waaronder Word, Excel en R/RStudio. Bovendien moest het examen worden gecontroleerd en voltooid op een veilige locatie om de kennis van de kandidaten van het materiaal en benaderingen van predictief modelleren het beste te meten.

Het ontwikkelen van dit innovatieve itemtype zou echter enkele obstakels met zich meebrengen, waaronder licentieproblemen voor Word- en Excel-producten, beschikbaarheid van testcentra om kandidaten niet te overbelasten, en de juiste beveiligingsprotocollen om de doeltreffendheid van het examen te garanderen.

Strategie

Wetende dat ze een testontwikkelingspartner nodig hadden met een softwarelicentieoplossing, een gevestigd mondiaal testcenternetwerk, bewezen beveiligingsprocedures, en de bereidheid om de volgende stap te zetten in examenontwikkeling, heeft SOA een RFP uitgebracht specifiek voor dit initiatief. Door gebruik te maken van onze relatie van meer dan 10 jaar en ons vermogen om te voldoen aan alle eisen van SOA zoals uiteengezet in het concurrerende biedproces, werd Prometric door SOA gekozen om een innovatief item te ontwikkelen dat het beste de vaardigheid van een actuaris om voorspellende analyses uit te voeren, zou testen en vastleggen.

Samen begonnen Prometric en SOA samen te werken aan de ontwikkeling van het itemtype voor voorspellende analyses, waarbij Prometric een oplossing ontwikkelde die alle drie de gewenste tools integreerde in de beoordeling. Het innovatieve item, twee keer per jaar afgenomen, vereist:

  • Kandidaten om 10-12 taken uit te voeren gedurende meer dan 5 uur via geconstrueerde antwoorden.
  • Testpersonen moeten hun vermogen aantonen om door elke taak heen te werken door ondersteunende bestanden en documenten te verstrekken via Word en R/RStudio, met Excel beschikbaar indien nodig.
  • Menselijke beoordeling uitgevoerd door SOA.

Prometric werkte ook nauw samen met SOA om een online demo te ontwikkelen om kandidaten te helpen begrijpen hoe ze van tevoren door het examen kunnen navigeren.

Vervolgens gingen Prometric en SOA verder met een veilige installatie van de software in het gehele mondiale testcenternetwerk. Er werd een pilot uitgevoerd met experts op het gebied (SME's) op verschillende locaties over de hele wereld, waarbij SOA- en Prometric-medewerkers aanwezig waren om een succesvolle lancering te garanderen.

"De ontwikkeling en lancering van dit itemtype is een grote stap voorwaarts voor de actuariële kandidaten van de Vereniging van Actuarissen. Het stelt kandidaten in staat om hun vaardigheid te tonen op kritieke onderwerpen door gebruik te maken van tools die veel voorkomen op de werkvloer. De ontwikkeling van het itemtype vereiste innovatieve inspanningen van een gezamenlijk SOA-Prometric ontwikkelingsteam. SOA kijkt enthousiast uit naar de aanpassing van dit concept naar andere onderdelen van ons accreditatiepad."

Algemeen directeur van het Onderwijsgezelschap van Actuarissen.

Resultaa

Met de technologie van Prometric en de bereidheid om verschillende aspecten van testen en technologische ondersteuning te combineren, en de flexibiliteit van SOA om het itemtype opnieuw vorm te geven en snel opkomende problemen op te lossen, werd na een jaar van ontwikkeling en de lancering van de pilot door SME het eerste echte examen afgenomen bij kandidaten in december 2018.

Het nieuwe itemtype heeft gezorgd voor een geavanceerde gegevensanalyse, en dient ook als differentiator ten opzichte van de concurrentie. SOA is niet alleen de eerste in de actuariële sector die dit soort praktijktesten aanbiedt, ze hebben ook exclusieve rechten op het op maat gemaakte ontwerp van de test.

In 2019 besloten SOA en Prometric om de lopende samenwerking met nog eens zeven jaar te verlengen; gedurende deze tijd zullen we blijven samenwerken om voort te bouwen op het succes van het innovatieve itemtype en manieren vinden om SOA en hun examens te differentiëren en te versterken.

Download Succesverhaa

Versterk uw beoordelingsprogramma met Prometric-oplossingen

Partner met ons