德克薩斯州第10區通過定制人工智能改變教育

第10區的K-12高風險德克薩斯州學術準備評估考試需要改進內容,但只有Prometric AI能夠快速、經濟有效地銀行和對齊9萬項目。

Transforming Education with the Power of Customized AI Solutions

背景

德克薩斯州第10區教育服務中心(ESC)在促進學生成功和塑造該州教育格局方面發揮著關鍵作用。作為其他20個ESC的合作夥伴,第10區為德克薩斯州120個公立和特許學區,超過3,000所學校以及超過900,000名學生提供服務。ESC 創建、分發並支持一個名為 TEKSbank 的項目庫,該項目庫被600個學區和特許學校、5000多所學校以及300多萬名學生使用。從課程開發和教學支援到領導力培訓和特殊教育服務,第10區致力於賦予教育工作者權力,豐富學習體驗,並為各種背景和能力的學生帶來積極的成果。

挑戰

地區10發布一個題庫,TEKSbank,供學區幫助學生準備高風險考試,德克薩斯州學術成績評估(STAAR®)。這90,000道TEKSbank考題與該州課程標準——德克薩斯州基本知識與技能(TEKS)相符,同時也包括其他標籤,如Webb的認知深度(DOK)和布魯姆的分類。

隨著教育趨勢的變化和州標準的更新,地區10投入了大量精力來確保題庫的對齊性和相關性。

為確保內容與州課程標準一致,並包含各種難度級別,地區10每年進行多個對齊項目。承包商被聘請來逐個進行分析。有些項目需要每個12個年級水平的課程專家來審查高達2,000個項目。這些審查過程不僅耗時,而且手動審查導致更新項目之間缺乏準確性和一致性。

地區10在維護內容對齊性上花費了大量時間和資源,幾乎沒有時間優先考慮內容的增長和改進。每年花費高達$150,000僅用於更新現有內容的標準或標籤並不罕見。在2023年,德克薩斯州的教育格局發生了重大變革,引入了技術增強項目(TEIs)和在線評估。這標誌著傳統評估方法的離開,並挑戰教育工作者準備學生迎接強調批判性思維和知識精湛展示的新範式。為了支援老師,並引領他們走向這個新的前沿,地區10面臨著創建20,000個高質量TEIs的挑戰。

Finetune對K-12課程和標準有很好的了解。儘管我們沒有描述的技術AI知識,但與他們談論我們想要的事情很容易。

吉姆·紐豪斯

前區域10數據解決方案助理總監

合作策略

Region 10 最初概述了他們試圖通過尋找新合作夥伴來實現的四個主要目標。

  • 確保符合最新的州標準
  • 辨識知識差距
  • 指定知識深度(DOK) 更新具有文化相關性的內容

“我們把人工智慧視為一種由人類編程、由人類監督、並由人類分析的工具。”

- Jim Newhouse,前Region 10數據解決方案助理主任

ESC 還需在實施新技術以優化實踐之前考慮幾個重要因素:

  • 需要在整個過程中保持人類監督
  • 不斷調整和完善內容
  • 減少對齊項目的時間,以便有更多時間來增強和開發更多問題

Region 10 於2023年3月與 Prometric 的 Finetune 團隊取得了聯繫。Finetune 迅速理解了 ESC 的挑戰,並開始工作,實施 Finetune Catalog™,一種用於內容對齊的人工智慧混合工具,可提供對項目庫和學習材料的深入見解。

Catalog的實施僅花費了幾週,而不是預計的六個月,所需的承包商數量從十家減少到只有三家。使用Finetune Catalog來完成對齊任務釋放了時間和金錢,並提高了整體生產力。

吉姆·紐豪斯

前區域10數據解決方案助理主任

結果

區域10向Finetune提供了學習材料,如考試藍圖、標準、項目庫等。Finetune利用這些內容建立了一個定制的 Catalog AI 模型,用於分析他們的內容,並查看它與韋伯認知深度的契合程度。在第一次對齊後,Catalog 報告了96% 的準確率,讓區域10的團隊對未來內容的發展和改進感到興奮和樂觀。那些需要對齊改進的「大海中的針」是可解決的,他們將能夠比以往更快、更便宜、更精確地完成。

除了第一次對齊的準確性外,ESC 還提供了一個有助於未來評估建立的理由。這個複雜的理據已成為一個變革性的新數據集合,他們能夠通過評估平台向試題制作者和教師提供。

現在,每個核心內容領域節省約10萬美元,包括數學、英語語言藝術和閱讀(ELAR)、科學和社會研究,區域10可以重新投資於製作新內容,以擴大其現有的項目庫。TEKSbank 現在配備了25%(20,000個)尖端的技術增強問題,這提供了更深入的知識評估和更準確的學生技能評估。

下載成功故事