Histoires de réussite/La région 10 du Texas transforme l'éducation avec l'IA personnalisée.
La région 10 du Texas transforme l'éducation avec une intelligence artificielle personnalisée.
La région 10 de l'examen à enjeux élevés K-12 de l'État du Texas sur la préparation académique nécessitait des améliorations de contenu, mais seul Prometric AI pouvait rapidement banquer et aligner de manière rentable les 90 000 éléments.
Contexte
Le Centre de services éducatifs (ESC) de la Région 10 au Texas joue un rôle crucial dans la promotion de la réussite des étudiants et dans la configuration du paysage éducatif à travers l'État. En tant que partenaire de vingt autres ESC, la Région 10 dessert 120 districts scolaires publics et charters, plus de 3 000 écoles et plus de 900 000 étudiants à travers l'État du Texas. L'ESC crée, distribue et soutient une banque d'éléments, TEKSbank, utilisée par 600 districts scolaires et charters, plus de 5 000 écoles et plus de 3 millions d'étudiants. De la conception de programmes d'études et du soutien pédagogique à la formation du leadership et aux services d'éducation spéciale, la Région 10 s'engage à autonomiser les éducateurs, à enrichir les expériences d'apprentissage et à promouvoir des résultats positifs pour les étudiants de tous horizons et capacités.
Le défi
La Région 10 publie une banque d'articles, TEKSbank, pour les districts scolaires afin d'aider à préparer les élèves à l'examen à enjeux élevés, les Évaluations de l'état du Texas de Préparation Académique (STAAR®). Les 90 000 questions d'examen de TEKSbank sont alignées sur les normes du programme de l'État, les Connaissances et Compétences Essentielles du Texas, ainsi que sur d'autres balises telles que le Niveau de Profondeur de Connaissance de Webb (DOK) et la Taxonomie de Bloom.
Au fur et à mesure que les tendances éducatives évoluent et que l'État met à jour ses normes, la Région 10 met beaucoup d'efforts pour s'assurer que la banque est alignée et pertinente.
Pour garantir que le contenu est en adéquation avec les normes du programme de l'État et contient divers niveaux de difficulté, la Région 10 mène plusieurs projets d'alignement par an. Des contractants sont engagés pour analyser chaque article manuellement. Certains projets nécessitent un expert en programme pour chacun des 12 niveaux de grade afin de revoir jusqu'à 2 000 articles. Non seulement ces processus de révision prennent du temps, mais le processus de révision manuelle entraînait un manque de précision et de cohérence parmi les articles mis à jour.
La Région 10 consacrait beaucoup de temps et de ressources à maintenir l'alignement du contenu, laissant peu de temps pour prioriser la croissance et l'amélioration du contenu. Il n'était pas rare de dépenser 150 000 $ par an rien que pour mettre à jour les normes ou les balises sur le contenu existant. Cela est devenu encore plus important en 2023 lorsque le paysage éducatif du Texas a subi une transformation significative avec l'introduction d'éléments améliorés par la technologie (TEIs) et d'évaluations en ligne. Il s'agissait d'un changement par rapport aux méthodes d'évaluation traditionnelles et cela a mis au défi les éducateurs de préparer les élèves à un nouveau paradigme qui mettait l'accent sur la pensée critique et une démonstration sophistiquée des connaissances. Pour soutenir les enseignants et les guider vers cette nouvelle frontière, la Région 10 était confrontée au défi de créer 20 000 TEIs de haute qualité.
Finetune avait une très bonne compréhension du contenu et des normes de l'enseignement primaire et secondaire. Il était facile d'avoir des conversations avec eux sur ce que nous voulions, même si nous n'avions pas les connaissances techniques en intelligence artificielle pour le décrire.
Jim Newhouse
Ancien directeur adjoint des solutions de données de la région 10
Stratégie de partenariat
La région 10 a initialement défini quatre objectifs principaux qu'elle cherchait à atteindre en recherchant un nouveau partenaire.
Assurer l'alignement sur les dernières normes de l'État
Identifier les lacunes en matière de connaissances
Attribuer la profondeur des connaissances (DOK) Mettre à jour le contenu avec une pertinence culturelle
"Nous pensons à l'IA comme un outil programmé par des humains, supervisé par des humains et analysé par des humains."
- Jim Newhouse, Ancien directeur adjoint des solutions de données de la région 10
L'ESC devait également prendre en compte plusieurs facteurs importants avant de commencer la mise en œuvre de nouvelles technologies pour rationaliser les pratiques :
Un besoin de maintenir une supervision humaine tout au long du processus
Ajustement constant et perfectionnement du contenu
Réduire le temps des projets d'alignement pour permettre plus de temps pour améliorer et développer davantage de questions
La région 10 a collaboré avec l'équipe Finetune de Prometric en mars 2023. Finetune a rapidement compris les défis de l'ESC et a commencé à travailler pour mettre en œuvre Finetune Catalog™, un outil hybride IA-humain pour l'alignement du contenu avec des insights approfondis sur les banques d'items et les supports d'apprentissage.
"L'implémentation du Catalogue n'a pris que quelques semaines au lieu des six mois prévus et a réduit le nombre d'entrepreneurs nécessaires de dix à seulement trois. L'utilisation de Finetune Catalogue pour accomplir les tâches d'alignement a libéré du temps et de l'argent et a augmenté la productivité globale."
Jim Newhouse
Ancien Directeur Adjoint des Solutions de Données de la Région 10
Résulta
La région 10 a fourni à Finetune des matériels pédagogiques tels que des plans d'examen, des normes, des banques d'items, et plus encore. Finetune a pris ce contenu et a construit un modèle Catalogue AI personnalisé qui travaillerait pour analyser leur contenu et voir dans quelle mesure il était aligné sur la Profondeur de Connaissance de Webb. Après le premier alignement, le Catalogue a rapporté un taux de précision de 96%, laissant l'équipe de la région 10 excitée et optimiste pour le développement futur et l'amélioration de leur contenu. Ces "aiguilles dans une botte de foin" qui nécessitaient une amélioration de l'alignement étaient réparables, et ils seraient en mesure de le faire plus rapidement, moins cher, et plus précisément que jamais auparavant.
En plus de la précision du premier alignement, l'ESC a reçu une justification qui serait utile dans la construction de futures évaluations. La justification complexe est devenue une nouvelle collection de données transformative qu'ils peuvent fournir aux constructeurs de tests et aux enseignants via la plateforme d'évaluation.
Maintenant, avec des économies d'environ 100 000 $ par domaine de contenu de base, y compris les mathématiques, les arts du langage anglais et la lecture (ELAR), les sciences et les études sociales, la région 10 peut réinvestir dans la production de nouveaux contenus pour développer sa banque d'items actuelle. TEKSbank est maintenant équipé de 25% (20 000) de questions de pointe, améliorées par la technologie, ce qui permet une évaluation des connaissances plus approfondie et une évaluation plus précise des compétences des élèves.
