Priče o uspjehu/Regija 10 Teksasa transformira obrazovanje prilagođenom umjetnom inteligencijom.
Regija 10 Teksasa transformira obrazovanje pomoću prilagođene umjetne inteligencije.
Regija 10-ov K-12 ispit važan za državnu procjenu akademskih sposobnosti Teksasa zahtijevao je poboljšanja sadržaja, ali samo Prometric AI je mogao brzo i učinkovito pohraniti i uskladiti 90.000 stavki.
Pozadina
Obrazovni servisni centar Regije 10 (ESC) u Teksasu igra ključnu ulogu u poticanju uspjeha učenika i oblikovanju obrazovnog krajolika diljem države. Kao partner dvadeset drugih ESC-ova, Regija 10 služi 120 javnih i charter školskih okruga, preko 3.000 škola te više od 900.000 učenika diljem države Teksas. ESC stvara, distribuira i podržava banku pitanja, TEKSbank, koju koristi 600 školskih okruga i chartera, preko 5.000 škola te više od 3 milijuna učenika. Od razvoja nastavnih planova i podrške nastavi do treninga za vođenje i usluga posebnog obrazovanja, Regija 10 posvećena je osnaživanju odgojitelja, obogaćivanju iskustava učenja i postizanju pozitivnih rezultata za učenike svih pozadina i sposobnosti.
Izazov
Regija 10 objavljuje banku predmeta, TEKSbank, za školske okruge kako bi pomogla u pripremi učenika za ispit visokog rizika, State of Texas Assessments of Academic Readiness (STAAR®). 90.000 TEKSbank pitanja za testiranje usklađena su s državnim kurikulumskim standardima, Texas Essential Knowledge and Skills, kao i drugim oznakama poput Webb-ove dubine znanja (DOK) i Bloomove taksonomije.
Kako se obrazovni trendovi mijenjaju i država ažurira svoje standarde, Regija 10 ulaže puno truda u osiguravanje usklađenosti i relevantnosti banke.
Kako bi osigurala da sadržaj bude usklađen s državnim kurikulumskim standardima i sadrži različite razine teškoća, Regija 10 provodi više projekata usklađivanja tijekom godine. Za analizu svakog predmeta angažirani su izvođači. Neke projekte zahtijevaju da jedan stručnjak za kurikulum pregleda i do 2.000 predmeta za svaku od 12. razrednih razina. Ovi procesi pregleda nisu samo vremenski zahtjevni, već su ručni procesi pregleda doveli do nedostatka točnosti i dosljednosti među ažuriranim predmetima.
Regija 10 je trošila značajnu količinu vremena i resursa na održavanje usklađenosti sadržaja, s malo vremena za prioritizaciju rasta i poboljšanja sadržaja. Nije bilo neuobičajeno trošiti 150.000 dolara godišnje samo na ažuriranje standarda ili oznaka na postojećem sadržaju. To je postalo još važnije 2023. godine kada je obrazovni krajolik Teksasa prošao značajnu transformaciju s uvođenjem tehnološki obogaćenih predmeta (TEI) i online procjene. To je bio odlazak od tradicionalnih metoda procjene i izazvao je obrazovatelje da pripreme učenike za novi paradigmu koja je naglasila kritičko razmišljanje i sofisticiranu demonstraciju znanja. Kako bi podržala nastavnike i vodila ih u ovu novu granicu, Regija 10 se suočila s izazovom stvaranja 20.000 visokokvalitetnih TEI-ova.
Finetune je imao zaista dobro razumijevanje K-12 sadržaja i standarda. Bilo je lako voditi razgovore s njima o onome što smo željeli, iako nismo imali tehničko znanje o umjetnoj inteligenciji kako bismo to opisali.
Jim Newhouse
Bivši pomoćnik direktora regionalnih rješenja za podatke u Regiji 10
Strategija partnerstva
Regija 10 je prvotno definirala četiri primarna cilja koje su nastojali postići pronalaskom novog partnera.
Osigurati usklađenost s najnovijim državnim standardima
Identificirati jazove u znanju
Odrediti dubinu znanja (DOK) Ažurirati sadržaj s kulturnom relevantnošću
"Mi AI smatramo alatom koji je programiran od strane ljudi, nadziran od strane ljudi i analiziran od strane ljudi."
- Jim Newhouse, Bivši pomoćnik direktora podatkovnih rješenja Regije 10
ESC je također morao uzeti u obzir nekoliko važnih čimbenika prije nego što su započeli s implementacijom nove tehnologije za optimizaciju praksi:
Potreba za održavanjem ljudskog nadzora tijekom cijelog procesa
Stalno prilagođavanje i usavršavanje sadržaja
Smanjenje vremena projekata za usklađivanje kako bi se omogućilo više vremena za poboljšavanje i razvijanje dodatnih pitanja
Regija 10 je stupila u kontakt s Finetune timom tvrtke Prometric u ožujku 2023. Finetune je brzo shvatio izazove ESC-a i počeo raditi na implementaciji Finetune Catalog™, alata hibridne inteligencije i ljudskog rada za usklađivanje sadržaja s dubokim uvidima u baze stavki i nastavne materijale.
Implementacija kataloga trajala je samo nekoliko tjedana umjesto predviđenih šest mjeseci i smanjila je broj potrebnih izvođača s deset na samo tri. Korištenje Finetune kataloga za obavljanje zadataka usklađivanja oslobodilo je vrijeme i novac te povećalo ukupnu produktivnost.
Jim Newhouse
Bivši pomoćnik direktora Regije 10 za rješenja podataka.
Ishod
Regija 10 je Finetuneu pružila obrazovne materijale poput planova ispita, standarda, baza pitanja i još mnogo toga. Finetune je preuzeo te sadržaje i izgradio prilagođeni model Katalog AI koji će analizirati njihov sadržaj i vidjeti koliko dobro se uklapa u Dubinu znanja Webba. Nakon prvog uklapanja, Katalog je izvijestio o stopi točnosti od 96 %, ostavljajući tim Regije 10 uzbuđenim i optimističnim za budući razvoj i poboljšanje njihovog sadržaja. Oni "igle u plastu sijena" koje su zahtijevale poboljšanje uklapanja bile su popravljive, i mogli su to učiniti brže, jeftinije i preciznije nego ikad prije.
Osim točnosti prvog uklapanja, ESC-u je pruženo obrazloženje koje će biti korisno pri izradi budućih procjena. Kompleksno obrazloženje postalo je transformirajuća nova zbirka podataka koju mogu opskrbiti graditeljima testova i učiteljima putem platforme za procjenu.
Sada, sa uštedom od oko 100.000 dolara po glavnom području sadržaja, uključujući matematiku, engleski jezik i književnost (ELAR), znanost i društvene znanosti, Regija 10 može reinvestirati u proizvodnju novog sadržaja kako bi proširila svoju trenutnu bazu pitanja. TEKSbank je sada opremljen s 25 % (20.000) naprednih, tehnološki unaprijeđenih pitanja, što omogućuje dublju procjenu znanja i precizniju procjenu vještina učenika.