Keresés
Sikerült Történetek / A CompTIA finomhangolja az AI-t.

A CompTIA gyors skálázáshoz használja a Finetune AI-t, anélkül hogy minőséget áldozna.

A CompTIA felgyorsítja az értékelés fejlesztését a Finetune AI segítségével, kiváló minőségű tesztkérdések létrehozásával, globális tanúsítvány programjának bővítésével, hogy megfeleljen a munkaerő igényeinek.

Shutterstock 2463474777

Háttér

A CompTIA a világ vezető szállítója a szállítótól független IT-oktatásnak és tanúsítványoknak. Együttműködve több ezer intézménnyel, a CompTIA olyan pályára felkészítő készségeket biztosít a tanulóknak, amelyek a legjobb tanulási eszközökkel, elismert tanúsítványokkal és átfogó karrier-támogatással rendelkeznek.

A növekvő globális kereslet kielégítése érdekében - különösen az A+ vizsgájuk esetében - a CompTIA együttműködött a Prometric céggel, a Finetune AI-t használva egy egyedi AI-megoldásért. Ez a partnerség lehetővé tette a gyorsabb tartalom létrehozását, miközben fenntartotta a minőséget, a pszichometriai szigorúságot és az szakértői felügyeletet - előre viszve a CompTIA küldetését, hogy hatékony, pályára felkészítő tanúsítványokat biztosítson.

A Kihívás

Mivel a globális kereslet szárnyalt, a CompTIA-nak fel kellett gyorsítania a tartalom létrehozását 16 fő programban. A nagy mennyiségű tanúsítvány, mint az A+, különösen nagy kihívást jelentett. Minden elemnek meg kellett felelnie szigorú pszichometriai szabványoknak a méltányosság, megbízhatóság és jogi védelem érdekében.

  • A minőség fenntartása túl lassú
  • Az általános AI korlátozza az IP tulajdonjogot
  • A szakértőknek több kontrollra van szükségük

A hagyományos fejlesztési modell nem tudott lépést tartani. Alapos volt, de lassú—túl lassú a CompTIA folyamatosan változó igényeihez. A csapat olyan megközelítésre volt szüksége, amely megőrizte a szakértők bevonását, az szerkesztési szigorúságot és az teljes IP tulajdonjogot, miközben lehetővé tette a gyorsabb kimenetet.

Shutterstock 2325628103

A szakosodott modellek sokkal kevésbé hajlamosak hallucinációkra, mert arra lett betanítva, hogy kiszűrje azokat, és csak a jó dolgokat szolgáltassa nekünk.

Wendy Gavin - Wendy Gavin

Senior termékmenedzser, Finetune AI.

Stratégiai Partnerség

A CompTIA egy több éves együttműködést indított el a Finetune AI-vel, hogy mesterséges intelligenciát használjon az elemfejlesztés területén. Együtt létrehoztak egy Finetune Generate® domain-specifikus AI modellt.

Másként a ChatGPT vagy a Copilot általános célú eszközeivel szemben a Finetune AI az egyetlen egyedi, szabadalmaztatott AI modell az Egyesült Államokban, amelyet értékelési szakemberek terveztek és fejlesztettek, minimalizálva a hallucinációkat és összhangban az szigorú szerkesztési szabványokkal. Az A+ tanúsítvány szolgált mint pilótaprogram, mivel rendszerezett tartalommal és magas elemmennyiséggel rendelkezik.

A projekt összehozta a Finetune AI szakértőit, a CompTIA tartalomfejlesztő csapatokat és az SME-ket, hogy kiképezzék a modellt a szabadalmaztatott terveken, stílusútmutatókon és célkitűzéseken. Az AI támogatta—de sosem helyettesítette—a SME szerzőséget, lehetővé téve a gyorsabb tervezést és iterációt.

Újítások a Finetune Generate segítségével

A CompTIA beágyazta a Finetune Generate®-t egy hibrid munkafolyamatba, amelyet a skálázás érdekében terveztek. A modellt a CompTIA saját anyagaira tanították, így az eredmények összhangban voltak a hangvétellel, a struktúrával és a tanulási célokkal. Az SME-k gyakran csak kevés vagy egyáltalán nem módosították az AI által generált vázlatokat.

A CompTIA teljes tulajdonjogot megtartott az AI-segítésű tartalom felett, megőrizve ezzel az irányítást és a biztonságot. Az eszköz kiváló teljesítményt nyújtott a Bloom 2. és 3. szintű célok tekintetében – ezek gyakoriak az A+ szintű belépő szintű tanúsítványoknál.

Kulcsfontosságú előnyök:

  • Egyedi modell képzés
  • Hatékony vázlatkészítés
  • Biztonságos IP
  • Ideális az alacsonyabb kognitív szintekhez

„A Generate-t olyan módon használjuk, amely egyértelmű előnyökhöz vezet az ellenőrzés hatékonyságában.”

- Danielle Castelli, Igazgató, Vizsgafejlesztés, CompTIA

Az A+ vizsga 1101 és 1102 verzióinak pszichometriai felülvizsgálata megerősítette az alkalmazott módszert. Az SME-k óránként 5,7 elemet állítottak elő – 3,3-ról növekedve –, és azok többsége minimális szerkesztéseket igényelt. A pszichometriai referenciapontok (nehézség, diszkrimináció, megbízhatóság) az elvárt tartományokon belül maradtak, és az elemek sikeresen átkerültek a tesztelés után pontozott státuszba.

"A [Prometric] együttműködésével sikerült kibővítenünk vizsgafejlesztési programunkat annak érdekében, hogy hatékonyabbá tegyük a folyamatot, aminek mind a vizsgafejlesztők, mind a szakértők hasznát látják."

Danielle Castelli - Danielle Castelli

Igazgató, Vizsgafejlesztés, CompTIA: Számítástechnikai Ipari Szövetség

Eredmény

Ma is a CompTIA továbbra is a Finetune Generate®-t használja az olyan tanúsítványokhoz, amelyek strukturált, alacsonyabb szintű kognitív igényekkel bírnak - ahol a sebesség és a skálázhatóság kulcsfontosságú. Ez az AI-feljavított folyamat lehetővé teszi az SME-k számára, hogy az ellenőrzésre koncentráljanak, nem pedig az első vázlatokra.

  • Növelt kimenet
  • Szerkesztési hatékonyság
  • Statisztikai ekvivalencia
  • Tartalom életképessége

Előretekintve a CompTIA további felhasználási eseteket vizsgál, ahol az összpontosított, felelős AI hasonló értéket képes nyújtani a tanúsítási portfólió széles körében - mindig a minőség és a kontroll hangsúlyozásával.

Sikertörténet letöltése