CompTIA koristi Finetune AI kako bi brzo rasli bez žrtvovanja kvalitete.

CompTIA ubrzava razvoj procjene stvaranjem visokokvalitetnih ispitnih pitanja pomoću Finetune AI, skalirajući svoj globalni program certifikacije kako bi zadovoljio potrebe radne snage.

Shutterstock 2463474777

Pozadina

CompTIA je vodeći svjetski pružatelj nepristranog IT obrazovanja i certifikacija. Suradnjom s tisućama ustanova, CompTIA opskrbljuje učenike vještinama potrebnim za karijeru putem najboljih alata za učenje, poštovanih certifikata i sveobuhvatne podrške u karijeri.

Za zadovoljenje rastuće globalne potražnje—posebice za njihovim A+ ispitom—CompTIA je surađivala s tvrtkom Prometric, koristeći Finetune AI za prilagođeno rješenje umjetne inteligencije. Ova suradnja omogućila je brži proces stvaranja sadržaja uz održavanje kvalitete, psihometrijske rigoroznosti i stručnog nadzora—unaprijeđujući misiju CompTIA-e da pruži učinkovite, karijerno spremne certifikate.

Izazov

Zbog porasta globalne potražnje, CompTIA je trebala ubrzati stvaranje sadržaja za 16 ključnih programa. Certifikati visokog obujma poput A+ predstavljali su poseban izazov. Svaka stavka morala je zadovoljiti stroge psihometrijske standarde za pravednost, pouzdanost i pravnu obranu.

  • Održavanje kvalitete je pre spor
  • Opća umjetna inteligencija ograničava vlasništvo nad intelektualnim vlasništvom
  • Stručnjaci moraju imati više kontrole

Tradicionalni model razvoja nije mogao držati korak. Bio je temeljit, ali spor - pre spor za rastuće potrebe CompTIA-e. Timu je trešao pristup koji bi sačuvao sudjelovanje stručnjaka, uredničku strogost i potpuno vlasništvo nad intelektualnim vlasništvom, omogućujući istovremeno brži izlaz.

Shutterstock 2325628103

"Specijalizirani modeli su puno manje skloni halucinacijama jer su trenirani da ih filtriraju i pruže nam samo dobre informacije."

Wendy Gavin - Wendy Gavin

Stariji voditelj proizvoda, Fine tune AI

Strateško partnerstvo

CompTIA je pokrenula višegodišnju suradnju s Finetune AI kako bi iskoristila umjetnu inteligenciju za razvoj stavki. Zajedno su stvorili Finetune Generate® AI model specifičan za određeno područje.

Za razliku od općenitih alata poput ChatGPT-a ili Copilota, Finetune AI je jedini prilagođeni, patentirani AI model u SAD-u koji su dizajnirali i razvili stručnjaci za procjenu, smanjujući pojavu halucinacija i usklađujući se s strogim uredničkim standardima. Certifikacija A+ poslužila je kao pilot-projekt zbog svojeg strukturiranog sadržaja i velikog broja stavki.

Projekt je okupio stručnjake iz Finetune AI, timove za razvoj sadržaja CompTIA-e i stručnjake za određeno područje kako bi obučili model na patentiranim planovima, stilskim vodičima i ciljevima. Umjetna inteligencija podržavala je – ali nikada nije zamjenjivala – autorsko pravo stručnjaka za određeno područje, omogućujući brže pisanje i iteracije.

Inoviranje s Finetune Generate

CompTIA je ugradila Finetune Generate® u hibridni radni tok dizajniran za skaliranje. Model je treniran na vlasničkim materijalima tvrtke CompTIA, osiguravajući da izlazi budu usklađeni s tonom, strukturom i ciljevima učenja. Stručnjaci su često napravili malo, ako uopće, izmjena na AI-generiranim skicama.

CompTIA je zadržala potpuno vlasništvo nad sadržajem pomoću AI-a, održavajući kontrolu i sigurnost. Alat je iznimno dobro funkcionirao na Bloomovim razinama 2 i 3 – često prisutnima u certifikatima za početnike poput A+.

Ključne prednosti:

  • Prilagođeno obučavanje modela
  • Učinkovito izrađivanje skica
  • Sigurnost intelektualnog vlasništva
  • Idealno za niže kognitivne razine

"Koristimo Generate na način koji rezultira jasnim prednostima u učinkovitosti kontrole kvalitete."

- Danielle Castelli, Direktorica, Razvoj ispita, CompTIA

Psihometrijska analiza verzija ispita A+ 1101 i 1102 potvrdila je pristup. Stručnjaci su proizveli 5,7 stavki po satu – povećanje s 3,3, pri čemu je većina trebala minimalne izmjene. Psihometrijski pokazatelji (težina, razlikovanje, pouzdanost) ostali su unutar očekivanih raspona, a stavke su uspješno prešle iz pretesta u ocijenjeni status nakon terenskog testiranja.

"Suradnja s [Prometricom] omogućila nam je unaprijediti program razvoja ispita kako bismo proces učinili učinkovitijim na način koji je koristan kako za naše razvojnike testova tako i za stručnjake iz određenog područja."

Danielle Castelli - Daniela Castelli

Direktor, Razvoj ispita, CompTIA - Računalna industrijska udruga za tehnologiju informacijskih sustava.

Ishod

Danas, CompTIA i dalje koristi Finetune Generate® za certifikate s strukturiranim, nižerazinskim kognitivnim zahtjevima - gdje su brzina i skalabilnost ključne. Ovaj AI-poboljšani proces omogućuje SME-ima da se usredotoče na validaciju umjesto na prve skice.

  • Povećana produktivnost
  • Učinkovitost uređivanja
  • Statistička ekvivalencija
  • Održivost sadržaja

Pogledom prema budućnosti, CompTIA istražuje dodatne slučajeve upotrebe gdje fokusirana, odgovorna AI može pružiti sličnu vrijednost u cijelom svom portfelju certifikacija - uvijek s naglaskom na kvalitetu i kontrolu.

Preuzmi priču o uspjehu