CompTIA benytter Finetune AI til at skalere hurtigt uden at gå på kompromis med kvaliteten.

CompTIA fremskynder udviklingen af vurderinger ved at skabe høj kvalitetstestelementer med Finetune AI og skalere sit globale certificeringsprogram for at imødekomme arbejdskraftens krav.

Shutterstock 2463474777

Baggrund

CompTIA er verdens førende udbyder af leverandørneutral IT-uddannelse og certificeringer. Ved at samarbejde med tusindvis af institutioner rustes elever med karrierefremmende færdigheder gennem førsteklasses læringsværktøjer, respekterede legitimationsoplysninger og omfattende karrierestøtte.

For at imødekomme den voksende globale efterspørgsel - især efter deres A+ eksamen - indgik CompTIA et partnerskab med Prometric, hvor de udnyttede Finetune AI til en skræddersyet AI-løsning. Dette partnerskab muliggjorde en hurtigere proces til oprettelse af indhold, samtidig med at kvaliteten, psykometrisk strenghed og eksperttilsyn blev opretholdt. Dette fremmer CompTIAs mission om at levere effektive, karriereklare legitimationsoplysninger.

Udfordringen

Da den globale efterspørgsel steg, havde CompTIA brug for at fremskynde indholdsoprettelsen på tværs af 16 kerneprogrammer. Højvolumen-certificeringer som A+ udgjorde en særlig udfordring. Hvert element skulle opfylde strenge psykometriske standarder for retfærdighed, pålidelighed og juridisk forsvarlighed.

  • Vedligeholdelse af kvalitet er for langsom
  • Generel AI begrænser IP-ejerskab
  • SME'er skal have mere kontrol

Den traditionelle udviklingsmodel kunne ikke følge med. Den var grundig, men langsom – alt for langsom til CompTIAs skiftende behov. Teamet havde brug for en tilgang, der bevarede SME-deltagelse, redaktionel stringens og fuldt IP-ejerskab, samtidig med at den muliggjorde hurtigere output.

Shutterstock 2325628103

"Specialiserede modeller er meget mindre tilbøjelige til hallucinationer, fordi de er blevet trænet til at sortere det fra og kun give os det gode."

Wendy Gavin

Senior produktchef, Finetune AI

Strategisk Partnerskab

CompTIA lancerede et flerårigt samarbejde med Finetune AI for at udnytte kunstig intelligens til udvikling af elementer. Sammen skabte de en Finetune Generate® domænespecifik AI-model.

I modsætning til generelle værktøjer som ChatGPT eller Copilot er Finetune AI den eneste brugerdefinerede, patenterede AI-model i USA, designet til og af vurderingsfagfolk, hvilket minimerer hallucinationer og er i overensstemmelse med strenge redaktionelle standarder. A+ certificeringen fungerede som pilotprojektet på grund af dens strukturerede indhold og høje elementvolumen.

Projektet samlede Finetune AI-eksperter, CompTIAs indholdsudviklingsteams og SME'er for at træne modellen i proprietære skabeloner, stilguider og objektiver. AI understøttede—men erstattede aldrig—SME-forfatterskab, hvilket muliggjorde hurtigere udkast og iteration.

Innovation med Finetune Generate

CompTIA integrerede Finetune Generate® i en hybrid arbejdsproces designet til skalerbarhed. Modellen blev trænet på CompTIAs proprietære materialer, hvilket sikrede resultater, der var i overensstemmelse med tone, struktur og læringsmål. Eksperter inden for emnet foretog ofte få - hvis nogen - ændringer i de AI-genererede udkast.

CompTIA bevarede fuldt ejerskab af AI-assisteret indhold og fastholdt kontrol og sikkerhed. Værktøjet klarede sig exceptionelt godt med Bloom's niveau 2 og 3 mål - hyppige i certificeringer på indgangsniveau som A+.

Kernefordele:

  • Skræddersyet Modeltræning
  • Effektiv Udkastning
  • Sikker IP
  • Ideel til Lavere Kognitive Niveauer

"Vi bruger Generate på en måde, der resulterer i klare fordele i forhold til kvalitetskontrol-effektivitet."

- Danielle Castelli, Direktør, Eksamensudvikling, CompTIA

En psykometrisk gennemgang af A+ eksamensversionerne 1101 og 1102 bekræftede tilgangen. Eksperter inden for emnet producerede 5,7 elementer pr. time - en stigning fra 3,3 - hvor de fleste krævede minimale redigeringer. Psykometriske benchmark (vanskelighed, diskrimination, pålidelighed) forblev inden for forventede intervaller, og elementerne blev succesfuldt flyttet fra prøve til scoret status efter felttestning.

"Ved at arbejde med [Prometric] har vi kunnet udvide vores eksamensudviklingsprogram for at gøre processen mere effektiv på en måde, som både vores testudviklere og eksperter på området har haft gavn af."

Danielle Castelli

Direktør, Eksamensudvikling, CompTIA CompTIA (Computing Technology Industry Association) er en førende organisation inden for IT-branchen, der tilbyder certificeringer og træning til IT-professionelle over hele verden.

Resulta

I dag fortsætter CompTIA med at bruge Finetune Generate® til certificeringer med strukturerede, lavere kognitive krav, hvor hastighed og skalerbarhed er afgørende. Denne AI-forbedrede proces giver eksperterne mulighed for at koncentrere sig om validering i stedet for første udkast.

  • Øget produktion
  • Redaktionel effektivitet
  • Statistisk ækvivalens
  • Indholdsbæredygtighed

På sigt undersøger CompTIA yderligere anvendelsesområder, hvor fokuseret, ansvarlig AI kan levere lignende værdi på tværs af sin certificeringsportefølje - altid med vægt på kvalitet og kontrol.

Hent Succeshistorie