Háttér
A Texas állambeli 10. Régió Oktatási Szolgáltató Központ (ESC) kulcsszerepet játszik a diákok sikerének elősegítésében és az oktatási táj alakításában az államban. A húsz másik ESC partnerének támogatásával a 10. Régió 120 állami és alapítványi iskolai körzetet, több mint 3,000 iskolát és több mint 900,000 diákot szolgál ki Texas állam területén. Az ESC létrehoz, terjeszt és támogat egy tételbankot, a TEKSbankot, amelyet 600 iskola körzet és alapítvány használ, több mint 5,000 iskola és több mint 3 millió diák részére. A tantervfejlesztéstől és tanítási támogatástól kezdve a vezetőképzésen és a különleges oktatási szolgáltatásokon át a 10. Régió elkötelezett amellett, hogy felhatalmazza a pedagógusokat, gazdagítja a tanulási élményeket, és pozitív eredményeket ér el minden háttérrel és képességgel rendelkező diák számára.
A kihívás
A 10. Régió tételbankot, a TEKSbankot tesz közzé az iskolai körzetek számára, hogy segítsen felkészíteni a diákokat a magas tétű vizsgára, a Texas Állami Akadémiai Készségek Értékelésére (STAAR®). A 90,000 TEKSbank tesztkérdés összhangban áll az állam tantervi szabványaival, a Texas Alapvető Ismeretekkel és Készségekkel, valamint más címkékkel, mint például Webb Tudás Mélysége (DOK) és Bloom Taxonómiája.
Ahogy az oktatási trendek változnak és az állam frissíti a szabványait, a 10. Régió sok erőfeszítést tesz annak biztosítására, hogy a bank összhangban legyen és releváns maradjon.
Annak érdekében, hogy a tartalom összhangban legyen az állam tantervi szabványaival és különböző nehézségi szinteket tartalmazzon, a 10. Régió évente több összhangban lévő projektet hajt végre. A vállalkozókat arra bérlik fel, hogy manuálisan elemezzék az egyes tételeket. Néhány projekt megköveteli, hogy az egyes 12. osztályos szintekhez egyetlen tantervi szakértő ellenőrizze a lehető legtöbb, akár 2,000 tételt. Ezek a felülvizsgálati folyamatok nemcsak időigényesek, hanem a manuális felülvizsgálati folyamat pontatlansághoz és a frissített tételek között következetlenséghez is vezetett.
A 10. Régió jelentős időt és forrást költött a tartalom összhangjának fenntartására, alig hagyva időt a tartalom növekedésének és fejlesztésének prioritására. Nem volt ritka, hogy évente 150,000 dollárt költöttek csupán a meglévő tartalom szabványainak vagy címkéinek frissítésére. Ez 2023-ban vált még fontosabbá, amikor Texas oktatási tája jelentős átalakuláson ment keresztül a technológia által támogatott tételek (TEI) és online értékelés bevezetésével. Ez eltérés volt a hagyományos értékelési módszerektől, és kihívást jelentett a pedagógusok számára, hogy felkészítsék a diákokat egy új paradigmára, amely a kritikai gondolkodásra és a tudás kifinomult bemutatására helyezte a hangsúlyt. A tanárok támogatása és az új határokra való vezetés érdekében a 10. Régió előtt álló kihívás az volt, hogy 20,000 kiváló minőségű TEI-t hozzon létre.
A 10. Régió kezdetben négy alapvető célt tűzött ki, amelyeket egy új partner felkutatásával kívánt elérni.
- Biztosítani az összhangot a legújabb állami szabványokkal
- Tudásbeli hiányosságok azonosítása
- Tudás mélységének (DOK) hozzárendelése, a tartalom frissítése kulturális relevanciával
Az ESC-nek számos fontos tényezőt is figyelembe kellett vennie, mielőtt elkezdte volna az új technológia bevezetését a gyakorlatok optimalizálása érdekében:
- Az emberi felügyelet fenntartásának szükségessége a folyamat során
- A tartalom folyamatos igazítása és tökéletesítése
- A projektidők csökkentése, hogy több időt biztosítsanak további kérdések fejlesztésére és javítására
A 10. Régió 2023 márciusában kapcsolatba lépett a Prometric Finetune csapatával. A Finetune gyorsan megértette az ESC kihívásait, és elkezdte a Finetune Catalog™ megvalósítását, egy AI-ember hibrid eszközt a tartalom összhangjának elérésére, mélyreható betekintésekkel az item bankokba és a tanulási anyagokba.
"A Finetune nagyon jól értette a K-12 tartalmat és a szabványokat. Könnyű volt velük beszélgetni arról, amit akartunk, még akkor is, ha nem volt technikai AI tudásunk arra, hogy hogyan írjuk le azt.”
- Jim Newhouse, A Region 10 korábbi adatmegoldási igazgatója
Eredmény
A 10. Régió a Finetune-nak olyan tanulási anyagokat biztosított, mint például vizsgatervek, szabványok, tételbankok és egyebek. A Finetune ezt a tartalmat felhasználva egy testreszabott Catalog AI modellt épített, amely elemezni tudta a tartalmukat, és megvizsgálta, mennyire áll összhangban Webb Tudás Mélységével. Az első összhang után a Catalog 96%-os pontosságot jelentett, ami a 10. Régió csapatát izgatottá és optimistává tette a jövőbeli tartalom fejlesztése és javítása iránt. Azok a "tűk a szénakazalban", amelyek összhangjavítást igényeltek, javíthatók voltak, és gyorsabban, olcsóbban és pontosabban tudták azt megtenni, mint valaha.
Az első összhang pontossága mellett az ESC egy olyan indoklást is kapott, amely hasznos lesz a jövőbeli értékelések kidolgozásához. A bonyolult indoklás egy átalakító új adathalmazzá vált, amelyet képesek voltak biztosítani a tesztkészítőknek és a tanároknak az értékelési platformon keresztül.
“A Catalog bevezetése mindössze néhány hetet vett igénybe a tervezett hat hónap helyett, és csökkentette a szükséges vállalkozók számát tízről mindössze háromra. A Finetune Catalog használata az összhangzási feladatok elvégzéséhez felszabadította az időt és a pénzt, és növelte az általános termelékenységet.”
- Jim Newhouse, A Region 10 korábbi adatmegoldási igazgatója
Most, körülbelül 100,000 dolláros megtakarítással a fő tartalmi területeken, beleértve a matematikát, az angol nyelvű művészeteket és olvasást (ELAR), a tudományt és a társadalmi tanulmányokat, a 10. Régió újra befektethet új tartalom előállításába a meglévő tételbankjának növelése érdekében. A TEKSbank most 25%-kal (20,000) csúcstechnológiájú, technológia által támogatott kérdésekkel van felszerelve, amelyek mélyebb tudásértékelést és pontosabb értékelést biztosítanak a diákok készségeiről.
“Az AI-t úgy tekintjük, mint egy olyan eszközt, amelyet emberek programoznak, emberek felügyelnek és emberek elemeznek.”
- Jim Newhouse, A Region 10 korábbi adatmegoldási igazgatója
Sikerült letölteni a története