Succeshistorier/Texas Region 10 transformerer uddannelse med skræddersyet AI.
Texas Region 10 transformerer uddannelse med skræddersyet AI.
Region 10's K-12 eksamener med høj risiko for Texas State of Texas Assessments of Academic Readiness krævede forbedringer af indholdet, men kun Prometric AI kunne hurtigt og omkostningseffektivt opbevare og tilpasse de 90.000 emner.
Baggrund
Region 10 Education Service Center (ESC) i Texas spiller en afgørende rolle i at fremme elevsucces og forme det uddannelsesmæssige landskab på tværs af staten. Som partner til tyve andre ESC'er betjener Region 10 120 offentlige og charter-skoledistrikter, over 3.000 skoler og mere end 900.000 elever på tværs af staten Texas. ESC opretter, distribuerer og understøtter en emnebank, TEKSbank, som anvendes af 600 skoledistrikter og charter-skoler, over 5.000 skoler og mere end 3 millioner elever. Fra læseplanudvikling og instruktionsstøtte til ledelsesuddannelse og specialundervisningstjenester er Region 10 forpligtet til at styrke underviserne, berige læringsoplevelserne og skabe positive resultater for elever med alle baggrunde og evner.
Opgaven
Region 10 udgiver et varehus, TEKSbank, for skoledistrikter for at hjælpe med at forberede eleverne til den vigtige eksamen, State of Texas Assessments of Academic Readiness (STAAR®). De 90.000 TEKSbank-testspørgsmål er tilpasset delstatens læseplanstandarder, Texas Essential Knowledge and Skills, samt andre tags som f.eks. Webb's Depth of Knowledge (DOK) og Blooms Taksonomi.
Når uddannelsesmæssige tendenser ændrer sig, og staten opdaterer sine standarder, lægger Region 10 meget arbejde i at sikre, at varehuset er tilpasset og relevant.
For at sikre, at indholdet er i overensstemmelse med delstatens læseplanstandarder og indeholder forskellige sværhedsgrader, gennemfører Region 10 flere tilpasningsprojekter årligt. Entreprenører hyres til at analysere hvert enkelt element manuelt. Nogle projekter kræver en enkelt læseplans ekspert for hver af de 12 klassetrin for at gennemgå op til 2.000 elementer. Ikke alene er disse gennemgangsprocesser tidskrævende, men den manuelle gennemgangsproces førte til en mangel på nøjagtighed og konsistens blandt de opdaterede elementer.
Region 10 brugte en betydelig mængde tid og ressourcer på at vedligeholde indholdstilpasning, med lidt tid til at prioritere vækst og forbedring af indhold. Det var ikke ualmindeligt at bruge 150.000 dollars årligt bare på at opdatere standarder eller tags på eksisterende indhold. Dette blev endnu vigtigere i 2023, da Texas' uddannelseslandskab gennemgik en betydelig transformation med introduktionen af teknologistyrede elementer (TEIs) og onlineevaluering. Dette var en afvigelse fra traditionelle evalueringstilgange og udfordrede uddannelsesfolk til at forberede eleverne på et nyt paradigme, der lagde vægt på kritisk tænkning og en sofistikeret demonstration af viden. For at støtte lærerne og lede dem ind i dette nye felt stod Region 10 over for opgaven med at skabe 20.000 TEIs af høj kvalitet.
Finetune havde en virkelig god forståelse for K-12-indhold og standarderne. Det var nemt at have samtaler med dem om, hvad vi ønskede, selvom vi ikke havde den tekniske AI-viden til at beskrive det.
Jim Newhouse
Tidligere Region 10 Assistentdirektør for Dataløsninger
Partnerskabsstrategi
Region 10 skitserede oprindeligt fire primære mål, som de forsøgte at opnå ved at finde en ny samarbejdspartner.
Sikre overensstemmelse med de nyeste statslige standarder
Identificere videnhuller
Tildel dybde af viden (DOK) Opdater indhold med kulturel relevans
"Vi betragter AI som et værktøj, der er programmeret af mennesker, overvåget af mennesker og analyseret af mennesker."
- Jim Newhouse, Tidligere Region 10 Assisterende Direktør for Dataløsninger
ESC skulle også overveje flere vigtige faktorer, inden de begyndte implementeringen af ny teknologi til at optimere praksis:
Behovet for at opretholde menneskelig tilsyn under hele processen
Konstant justering og forbedring af indholdet
Reducere tiden for justeringsprojekter for at give mere tid til at forbedre og udvikle flere spørgsmål
Region 10 etablerede forbindelse til Prometrics Finetune-team i marts 2023. Finetune forstod hurtigt ESC's udfordringer og begyndte at implementere Finetune Catalog™, et AI-menneske hybridværktøj til indholdsjustering med dybdegående indsigter på tværs af emnebanker og læringsmaterialer.
Implementeringen af kataloget tog kun et par uger i stedet for de estimerede seks måneder og reducerede antallet af entreprenører fra ti til kun tre. Brugen af Finetune Catalog til at udføre justeringsopgaver har frigjort tid og penge og øget den samlede produktivitet.
Jim Newhouse
Tidligere Region 10 Assisterende Direktør for Dataløsninger
Resulta
Region 10 har leveret Finetune med lærematerialer såsom eksamensplaner, standarder, opgavebanker og mere. Finetune tog dette indhold og opbyggede en tilpasset Catalog AI-model, der ville arbejde på at analysere deres indhold og se, hvor godt det stemte overens med Webb's Depth of Knowledge. Efter den første tilpasning rapporterede Catalog en nøjagtighedsrate på 96%, hvilket fik Region 10's team til at være spændte og optimistiske for den fremtidige udvikling og forbedring af deres indhold. De "nåle i høstakken", der havde brug for justering for at forbedre sig, var løselige, og de ville være i stand til at gøre det hurtigere, billigere og mere præcist end nogensinde før.
Udover nøjagtigheden af den første tilpasning blev ESC forsynet med en begrundelse, der ville være nyttig i opbygningen af fremtidige vurderinger. Den komplekse begrundelse er blevet til en transformerende ny samling af data, som de kan levere til testbyggere og lærere gennem vurderingsplatformen.
Nu, med besparelser på omkring $100.000 pr. kerneområde, herunder matematik, engelsk sprogkunst og læsning (ELAR), naturvidenskab og samfundsfag, kan Region 10 geninvestere i at producere nyt indhold for at udvide deres nuværende opgavebank. TEKSbank er nu udstyret med 25% (20.000) topmoderne, teknologiforbedrede spørgsmål, som giver en dybere vurdering af viden og en mere præcis evaluering af elevers færdigheder.
