Context
Centru de Servicii Educaționale Regiunea 10 (ESC) din Texas joacă un rol esențial în promovarea succesului elevilor și în conturarea peisajului educațional din întreaga stare. Ca partener pentru alte douăzeci de ESC-uri, Regiunea 10 deservește 120 de districte școlare publice și charter, peste 3.000 de școli și mai mult de 900.000 de elevi din Texas. ESC creează, distribuie și susține o bancă de itemi, TEKSbank, care este utilizată de 600 de districte școlare și charter, peste 5.000 de școli și mai mult de 3 milioane de elevi. De la dezvoltarea curriculumului și suportul didactic până la formarea de lideri și servicii de educație specială, Regiunea 10 este angajată să împuternicească educatorii, să îmbogățească experiențele de învățare și să genereze rezultate pozitive pentru elevi din toate mediile și capacitățile.
Provocarea
Regiunea 10 publică o bancă de itemi, TEKSbank, pentru districtele școlare pentru a ajuta la pregătirea elevilor pentru examenul de mare importanță, Evaluările Statului Texas pentru Pregătirea Academică (STAAR®). Cele 90.000 de întrebări de test din TEKSbank sunt aliniate standardelor curriculare ale statului, Cunoștințe și Abilități Esențiale din Texas, precum și altor etichete precum adâncimea cunoștințelor a lui Webb (DOK) și Taxonomia lui Bloom.
Pe măsură ce tendințele educaționale se schimbă și statul își actualizează standardele, Regiunea 10 depune mult efort pentru a se asigura că banca este aliniată și relevantă.
Pentru a se asigura că conținutul este aliniat cu standardele curriculare ale statului și conține diferite niveluri de dificultate, Regiunea 10 efectuează mai multe proiecte de aliniere pe an. Se angajează antreprenori pentru a analiza manual fiecare item. Unele proiecte necesită un singur expert în curriculum pentru fiecare dintre cele 12 niveluri de clasă pentru a revizui până la 2.000 de itemi. Nu doar că aceste procese de revizuire sunt consumatoare de timp, dar procesul de revizuire manuală a dus la o lipsă de precizie și consistență în rândul itemilor actualizați.
Regiunea 10 cheltuia o cantitate semnificativă de timp și resurse pentru a menține alinierea conținutului, având puțin timp pentru a prioritiza creșterea și îmbunătățirea conținutului. Nu era neobișnuit să cheltuie 150.000 de dolari anual doar pentru a actualiza standardele sau etichetele pe conținutul existent. Acest lucru a devenit și mai important în 2023, când peisajul educațional din Texas a suferit o transformare semnificativă odată cu introducerea itemilor îmbunătățiți tehnologic (TEI) și evaluării online. Aceasta a fost o despărțire de metodele tradiționale de evaluare și a provocat educatorii să pregătească elevii pentru un nou paradigm care punea accent pe gândirea critică și o demonstrație sofisticată a cunoștințelor. Pentru a susține profesorii și a-i conduce în această nouă frontieră, Regiunea 10 s-a confruntat cu provocarea de a crea 20.000 de TEI-uri de înaltă calitate.
Regiunea 10 a conturat inițial patru obiective principale pe care încerca să le atingă prin găsirea unui nou partener.
- Asigurarea alinierii cu cele mai recente standarde de stat
- Identificarea lacunelor de cunoștințe
- Atribuirea adâncimii cunoștințelor (DOK) Actualizarea conținutului cu relevanță culturală
ESC a trebuit, de asemenea, să ia în considerare mai mulți factori importanți înainte de a începe implementarea noii tehnologii pentru a eficientiza practicile:
- Necesitatea de a menține supravegherea umană pe parcursul procesului
- Ajustarea constantă și perfecționarea conținutului
- Reducerea timpului proiectelor de aliniere pentru a permite mai mult timp pentru îmbunătățirea și dezvoltarea mai multor întrebări
Regiunea 10 s-a conectat cu echipa Finetune de la Prometric în martie 2023. Finetune a înțeles rapid provocările ESC-ului și a început lucrările pentru implementarea Finetune Catalog™, un instrument hibrid AI-uman pentru alinierea conținutului cu informații detaliate în întreaga bancă de itemi și materiale de învățare.
„Finetune a avut o înțelegere foarte bună a conținutului K-12 și a standardelor. A fost ușor să purtăm discuții cu ei despre ceea ce ne doream, chiar dacă nu aveam cunoștințele tehnice AI despre cum să o descriem.”
- Jim Newhouse, Fost Director Asistent al Regiunii 10 pentru Soluții de Date
Rezultatul
Regiunea 10 a furnizat Finetune materiale de învățare, cum ar fi planuri de examen, standarde, bănci de itemi și altele. Finetune a preluat acest conținut și a construit un model AI personalizat pentru Catalog care ar lucra pentru a analiza conținutul lor și a vedea cât de bine se aliniază cu adâncimea cunoștințelor lui Webb. După prima aliniere, Catalog a raportat o rată de precizie de 96%, lăsând echipa Regiunii 10 entuziasmată și optimistă pentru dezvoltarea și îmbunătățirea viitoare a conținutului lor. Acele „ace în fân” care necesitau îmbunătățiri de aliniere erau reparabile, iar ei ar putea să o facă mai repede, mai ieftin și mai precis ca niciodată înainte.
Împreună cu precizia primei alinieri, ESC a primit o rațiune care ar fi utilă în construirea evaluărilor viitoare. Rațiunea complexă a devenit o nouă colecție transformatoare de date pe care sunt capabili să o furnizeze constructorilor de teste și profesorilor prin platforma de evaluare.
„Implementarea Catalog a durat doar câteva săptămâni în loc de cele șase luni estimate și a redus numărul de antreprenori necesari de la zece la doar trei. Utilizarea Finetune Catalog pentru a îndeplini sarcinile de aliniere a eliberat timp și bani și a crescut productivitatea generală.”
- Jim Newhouse, Fost Director Asistent al Regiunii 10 pentru Soluții de Date
Acum, cu economii de aproximativ 100.000 de dolari pe fiecare domeniu de conținut de bază, inclusiv matematică, arte lingvistice și lectură (ELAR), știință și studii sociale, Regiunea 10 poate reinvesti în producerea de conținut nou pentru a-și crește banca de itemi actuală. TEKSbank este acum echipată cu 25% (20.000) întrebări de ultimă generație, îmbunătățite tehnologic, ceea ce oferă o evaluare mai profundă a cunoștințelor și o evaluare mai precisă a abilităților elevilor.
„Noi considerăm AI ca un instrument care este programat de oameni, supravegheat de oameni și analizat de oameni.” - Jim Newhouse, Fost Director Asistent al Regiunii 10 pentru Soluții de Date
Descărcați Povestea de Succes