德克萨斯州第10区通过定制的人工智能转变教育

区域10的K-12高风险德克萨斯州学术准备评估考试需要内容改进,但只有Prometric AI能够快速有效地处理和对齐这90,000个项目。

Transforming Education with the Power of Customized AI Solutions

背景

德克萨斯州第10教育服务中心(ESC)在促进学生成功和塑造全州教育格局方面发挥着关键作用。作为与其他20个ESC的合作伙伴,第10区服务于120个公立和特许学校区,覆盖全州超过3,000所学校和90多万名学生。该ESC创建、分发并支持一个项目库TEKSbank,该库被600个学区和特许学校、超过5,000所学校以及300多万名学生使用。从课程开发和教学支持到领导培训和特殊教育服务,第10区致力于赋能教育工作者,丰富学习体验,并推动来自不同背景和能力的学生取得积极成果。

挑战

第10区发布了一个题库TEKSbank,供学区帮助学生为高风险考试——德克萨斯州学业准备评估(STAAR®)做准备。90,000道TEKSbank测试题与州的课程标准德克萨斯州基本知识与技能对齐,以及其他标签如韦布的知识深度(DOK)和布鲁姆的分类法。

随着教育趋势的变化和州标准的更新,第10区投入大量精力确保题库的对齐和相关性。

为了确保内容与州的课程标准对齐,并包含不同难度级别,第10区每年进行多项对齐项目。聘请承包商手动分析每个项目。一些项目要求每个12个年级级别都有一名课程专家来审查多达2,000个项目。这些审查过程不仅耗时,而且手动审查过程导致更新项目的准确性和一致性缺乏。

第10区在维护内容对齐上花费了大量时间和资源,几乎没有时间优先考虑内容的增长和改进。每年花费150,000美元仅用于更新现有内容的标准或标签并不罕见。2023年,德克萨斯州的教育环境经历了重大变革,引入了技术增强项目(TEIs)和在线评估,这变得尤为重要。这是对传统评估方法的偏离,挑战教育者为强调批判性思维和知识的复杂展示的新范式做好准备。为了支持教师并引导他们进入这一新领域,第10区面临着创建20,000个高质量TEIs的挑战。

“Finetune 对 K-12 内容和标准有很好的理解。尽管我们没有技术性的 AI 知识来描述它,但与他们讨论我们想要的内容还是很容易。”

Jim Newhouse

前区域10数据解决方案助理主任

合作战略

第10区最初概述了他们通过寻找新合作伙伴试图实现的四个主要目标。

  • 确保与最新的州标准保持一致
  • 识别知识差距
  • 分配知识深度(DOK)更新具有文化相关性的内容

“我们认为人工智能是一种由人类编程、由人类监督并由人类分析的工具。”

- Jim Newhouse, 前第10区数据解决方案助理主任

教育服务中心还需要考虑几个重要因素,然后才开始实施新技术以简化流程:

  • 在整个过程中需要保持人类监督
  • 不断调整和完善内容
  • 减少对齐项目的时间,以便有更多时间来增强和开发更多问题

第10区在2023年3月与Prometric的Finetune团队取得了联系。Finetune迅速理解了教育服务中心的挑战,并开始实施Finetune Catalog™,这是一种用于内容对齐的人工智能与人类混合工具,提供了有关题库和学习材料的深入见解。

“Catalog的实施仅用了几周时间,而不是预计的六个月,并将所需的承包商人数从十个减少到仅三个。使用Finetune Catalog来完成对齐任务节省了时间和金钱,并提高了整体生产力。”

Jim Newhouse

前区域10数据解决方案助理主任

结果

第10区为Finetune提供了学习材料,如考试蓝图、标准、题库等。Finetune利用这些内容构建了一个定制的Catalog AI模型,以分析他们的内容,并查看其与Webb的知识深度的对齐程度。在第一次对齐后,Catalog报告了96%的准确率,这让第10区的团队对他们内容的未来发展和改进感到兴奋和乐观。那些需要对齐改进的“稻草堆中的针”是可以修复的,他们将能够比以往更快、更便宜、更精确地完成这项工作。

除了第一次对齐的准确性,ESC还提供了一个在未来评估构建中有用的理由。这一复杂的理由已成为一组变革性的新的数据,他们能够通过评估平台提供给考试构建者和教师。

现在,每个核心内容领域(包括数学、英语语言艺术和阅读(ELAR)、科学和社会研究)节省了约100,000美元,第10区可以重新投资于制作新内容,以增加其当前的题库。TEKSbank现在配备了25%(20,000)前沿的、技术增强的问题,这提供了更深入的知识评估和更准确的学生技能评估。

下载成功案例