Povești de Succes/Regiunea Texas 10 transformă educația cu inteligența artificială personalizată.
Regiunea Texas 10 transformă educația cu ajutorul IA personalizată.
Regiunea 10 a examenului de evaluare a pregătirii academice de stat a Texasului pentru elevii de la grădiniță până la clasa a XII-a a necesitat îmbunătățiri de conținut, dar doar Prometric AI a putut să stocheze și să alinieze rapid și eficient cele 90.000 de elemente.
Context
Centrul de Servicii Educaționale (ESC) din Regiunea 10 din Texas joacă un rol esențial în promovarea succesului elevilor și în modelarea peisajului educațional din stat. În calitate de partener al altor douăzeci de ESC-uri, Regiunea 10 deserveste 120 de districte școlare publice și charter, peste 3.000 de școli și mai mult de 900.000 de elevi în întregul stat al Texasului. ESC-ul creează, distribuie și susține o bancă de itemi, TEKSbank, care este folosită de 600 de districte școlare și charter, peste 5.000 de școli și mai mult de 3 milioane de elevi. De la dezvoltarea curriculumului și suportul instrucțional la formarea liderilor și serviciile de educație specială, Regiunea 10 se angajează să împuternicească educatori, să îmbogățească experiențele de învățare și să conducă la rezultate pozitive pentru elevii de toate mediile și abilitățile.
Provocarea
Regiunea 10 publică o bancă de item-uri, TEKSbank, pentru districtele școlare pentru a-i ajuta să pregătească elevii pentru examenul de mare importanță, Evaluările Academice de Stare a Texasului (STAAR®). Cele 90.000 de întrebări de testare TEKSbank sunt aliniate cu standardele de curriculum ale statului, Cunoștințe și Abilități Esențiale ale Texasului, precum și cu alte etichete precum Profunzimea Cunoașterii lui Webb (DOK) și Taxonomia lui Bloom.
Pentru a se asigura că conținutul este aliniat cu standardele de curriculum ale statului și conține diferite niveluri de dificultate, Regiunea 10 realizează mai multe proiecte de aliniere pe parcursul anului. Sunt angajați contractori pentru a analiza fiecare item manual. Unele proiecte necesită un singur expert în curriculum pentru fiecare dintre cele 12 niveluri de clasă pentru a revizui până la 2.000 de item-uri. Aceste procese de revizuire nu doar că durează mult, dar procesul de revizuire manuală a dus la o lipsă de acuratețe și consistență în rândul item-urilor actualizate.
Regiunea 10 cheltuia o cantitate semnificativă de timp și resurse pentru menținerea alinierii conținutului, având puțin timp pentru a prioritiza creșterea și îmbunătățirea conținutului. Nu era neobișnuit să cheltuie 150.000 de dolari anual doar pentru a actualiza standardele sau etichetele pe conținutul existent. Aceasta a devenit și mai importantă în 2023 când peisajul educațional al Texasului a suferit o transformare semnificativă cu introducerea item-urilor îmbogățite cu tehnologie (TEIs) și a evaluării online. Acest lucru a fost o abatere de la metodele tradiționale de evaluare și a provocat educatori să pregătească elevii pentru un nou paradigma care a subliniat gândirea critică și o demonstrație sofisticată a cunoștințelor. Pentru a sprijini profesorii și a-i conduce în această nouă frontieră, Regiunea 10 s-a confruntat cu provocarea de a crea 20.000 de TEIs de înaltă calitate.
"Finetune avea o înțelegere foarte bună a conținutului și standardelor din învățământul preuniversitar. A fost ușor să avem conversații cu ei despre ceea ce ne doream, chiar dacă nu aveam cunoștințe tehnice AI despre cum să descriem aceste lucruri."
Jim Newhouse
Fostul Director Adjunct al Soluțiilor de Date din Regiunea 10
Strategia de Parteneriat
Regiunea 10 a conturat inițial patru obiective principale pe care încercau să le atingă prin identificarea unui nou partener.
Asigurarea alinierii la cele mai recente standarde de stat
Identificarea lacunelor de cunoștințe
Atribuirea adâncimii cunoștințelor (DOK) Actualizarea conținutului cu relevanță culturală
„Noi considerăm Inteligența Artificială ca un instrument programat de oameni, supravegheat de oameni și analizat de oameni.”
- Jim Newhouse, Fost Director Adjunct al Soluțiilor de Date din Regiunea 10
ESC-ul a trebuit, de asemenea, să ia în considerare mai mulți factori importanți înainte de a începe implementarea noii tehnologii pentru simplificarea practicilor:
Necesitatea de a menține supravegherea umană pe tot parcursul procesului
Reglarea constantă și perfecționarea conținutului
Reducerea timpului proiectelor de aliniere pentru a permite mai mult timp pentru îmbunătățirea și dezvoltarea unor întrebări suplimentare
Regiunea 10 a intrat în contact cu echipa Finetune a Prometric în martie 2023. Finetune a înțeles rapid provocările ESC-ului și a început să implementeze Finetune Catalog™, un instrument hibrid AI-uman pentru alinierea conținutului cu insight-uri profunde în bazele de itemi și materialele de învățare.
Implementarea Catalogului a durat doar câteva săptămâni în loc de cele șase proiectate și a redus numărul de contractori necesari de la zece la doar trei. Utilizând Finetune Catalog pentru a realiza sarcinile de aliniere, s-a eliberat timp și bani și s-a crescut productivitatea generală.
Jim Newhouse
Fostul Director Adjunct al Soluțiilor de Date din Regiunea 10
Rezulta
Regiunea 10 a furnizat Finetune materiale de învățare precum planuri de examen, standarde, baze de întrebări și altele. Finetune a preluat acest conținut și a construit un model AI personalizat al Catalogului care ar lucra pentru a analiza conținutul lor și a vedea cât de bine se alinia cu Profunzimea Cunoașterii lui Webb. După prima aliniere, Catalogul a raportat o rată de acuratețe de 96%, lăsând echipa Regiunii 10 entuziasmată și optimistă pentru dezvoltarea și îmbunătățirea viitoare a conținutului lor. Acele "ace în carul de fân" care au nevoie de îmbunătățire a alinierii erau reparate, iar ei ar putea să o facă mai repede, mai ieftin și mai precis decât oricând înainte.
Împreună cu acuratețea primei alinieri, ESC a primit o justificare care ar fi utilă în construirea evaluarilor viitoare. Justificarea complexă a devenit o colecție nouă și transformatoare de date pe care sunt capabili să o furnizeze constructorilor de teste și profesorilor prin platforma de evaluare.
Acum, cu economii de aproximativ 100,000 $ pe domeniu de conținut de bază, inclusiv matematică, limba engleză și lectură (ELAR), știință și studii sociale, Regiunea 10 poate reinvesti în producerea de conținut nou pentru a-și dezvolta baza de întrebări actuală. TEKSbank este acum echipat cu 25% (20,000) întrebări tehnologic avansate, care oferă o evaluare mai profundă a cunoștințelor și o evaluare mai precisă a abilităților elevilor.
