Achtergrond
Als pionier in digitale innovatie heeft deze marktleider zich voortdurend ontwikkeld om te voldoen aan de dynamische behoeften van contentmakers en ontwikkelaars wereldwijd. Van zijn begin als softwarebedrijf tot het worden van een toonaangevende aanbieder van digitale contenttools, belichaamt het een toewijding aan innovatie en aanpassingsvermogen.
De Uitdaging
Naarmate het productportfolio van de organisatie uitbreidde en haar invloed in het digitale domein groeide, nam ook de vraag naar certificeringsprogramma's toe. Sinds 2018 heeft het bedrijf zijn certificeringsaanbod meer dan vijfvoudig opgeschaald om aan deze vraag te voldoen. Met meer dan 170 examens en meer dan 18.000 items werd het bijna onmogelijk om de ontwikkeling van examens op koers te houden.
Deze snelle uitbreiding bracht verschillende uitdagingen met zich mee, zoals:
- De behoefte aan een meer wendbare en kosteneffectieve oplossing om examencorrecties bij te werken zonder de teams te overbelasten.
- Verbeterde beveiligingsmaatregelen om opkomende cyberbeveiligingsdreigingen aan te pakken.
- De vraag naar extra exam items ter ondersteuning van praktijkexamens en hercertificeringsprogramma's.
De organisatie erkende de behoefte aan een robuuste oplossing en zocht een partner die deze inspanningen kon ondersteunen met een toewijding aan samenwerking, innovatie en het bereiken van specifieke doelstellingen:
- Verbeterde ontwikkeling van de itembank met originele, veilige items.
- De mogelijkheid om meer examenvormen te produceren ter ondersteuning van praktijkexamens.
- Het opzetten van een proces voor het integreren van AI-technologie.
Partnerschapsstrategie
In de late 2022 reageerde de organisatie op deze uitdagingen door een strategisch partnerschap aan te gaan met Finetune by Prometric, een bedrijf dat gespecialiseerd is in AI-versterkte testontwikkelingsoplossingen. Samen stelden ze zich ten doel om het certificeringsprogramma te revolutioneren door Finetune Generate® te implementeren, een hybride AI-itemgeneratieoplossing die geavanceerde AI combineert met deskundige beoordeling door een subject matter expert (SME).
De teams werkten samen om Finetune Generate aan te passen aan de unieke behoeften van de organisatie en ontdekten dat de oplossing aan alle kritieke vereisten voldeed.
Beveiliging was een primaire zorg, dus de aanpasbare, toegangsbeheerde mogelijkheden van Finetune Generate stelden het bedrijf in staat om het model te trainen met zijn eigen vragen, itemreferenties, examenblauwdrukken, beschrijvingen van cognitieve niveaus en regels voor het schrijven van items in een gecontroleerde omgeving, ter bescherming tegen externe interferentie. Deze aanpak gaf de organisatie de volledige eigendom van de inhoud die binnen het platform werd gecreëerd, wat zorgde voor totale vertrouwen in de beveiliging.
Het Implementatieproces
Het partnerschap volgde een implementatieaanpak in vier stappen, waarbij het model continu werd verfijnd met feedback van SME's en workshops voor itemontwikkeling. Door gebruik te maken van zowel de expertise van Prometric in itemontwikkeling als de domeinexpertise van het bedrijf, heeft het team het AI-model verfijnd en ervoor gezorgd dat de items psychometrisch geldig zijn.
Als resultaat heeft het partnerschap 26 nieuwe AI-modellen geproduceerd ter ondersteuning van itemontwikkeling, waardoor de tijd voor het creëren van items is verminderd van 90 minuten naar 30 minuten per item—een vermindering van 67% in de ontwikkelingstijd. De organisatie verwacht verdere verbeteringen naarmate het hulpmiddel verder wordt verfijnd.
"Deze stap is waar de magie echt gebeurt. Alle inhoud wordt overgedragen aan Prometric, en zij beginnen het model te bouwen. Een geweldig team van AI- en datawetenschappers tagt alles en bouwt het model op basis van onze behoeften."
- Senior Manager Exam en Content Development
Resultaat
De samenwerking met Prometric stelde het bedrijf in staat om de creatie van unieke exam inhoud te versnellen, terwijl de afstemming op de nieuwste industrienormen en productupdates werd gewaarborgd. Door de AI-technologie van Generate heeft de organisatie een wendbaardere aanpak aangenomen voor itemontwikkeling, waardoor snel kon worden ingespeeld op ontwikkelingen in de sector.
Deze innovatieve aanpak strekte zich uit over het gehele certificeringsecosysteem, waaronder hercertificeringsexamens, praktijkexamens en eindbeoordelingen van cursussen. Dit zorgde voor een hoogwaardige, consistente ervaring voor alle deelnemers, terwijl werd ingespeeld op de veranderende behoeften van het programma.
Doelen Bereikt Door Prometric's AI-Aangedreven Finetune Generate:
- Geoptimaliseerde Time-to-Market: Versnelde ontwikkelings- en released cycli voor certificeringsexamens, waardoor tijdige updates mogelijk zijn om aan de industrienormen te voldoen.
- Kostenbesparingen: De adoptie van AI-technologie leidde tot meer dan 60% kostenbesparing per item, waardoor het proces efficiënter werd.
- Efficiënte Benutting van Expertise: Door de tijd voor het creëren van items met 67% te verminderen, heeft het bedrijf de SME-resources effectief geoptimaliseerd.
"Onze investering in AI is cruciaal voor het omgaan met de schaal en complexiteit van onze programma's. Zonder Finetune Generate zou het niet mogelijk zijn om dit niveau van examontwikkeling vol te houden."
- Global Head of Digital Certification Program
Met Finetune by Prometric heeft de organisatie een strategische partner gevonden die in staat is om obstakels te verhelpen in een efficiënte, veilige examenontwikkeling. De integratie van AI heeft de creatie van items getransformeerd van een handmatig proces in een tijd- en kostenbesparende operatie, die de productiviteit verhoogt en verdere uitbreiding mogelijk maakt.
Naarmate het AI-systeem blijft verbeteren met aanvullende gegevens, heeft de organisatie een concurrentievoordeel behaald in de certificeringsruimte. De mogelijkheid van Finetune om veilige, robuuste items te genereren heeft geholpen om middelen te optimaliseren en heeft aanzienlijke tijd- en kostenbesparingen aangetoond. Met dit succes zijn er plannen in de maak om Generate in meer aanbiedingen en cursussen te integreren.
De Global Head of Digital Certification Program verwacht verdere kostenreducties naarmate het Finetune-systeem geavanceerder wordt. “Laten we het potentieel van AI omarmen,” besloot hij.
Download Succesverhaa