背景
テキサス州の地域教育サービスセンター（ESC）第10地区は、学生の成功を促進し、州全体の教育環境を形成する上で重要な役割を果たしています。第10地区は他の20のESCのパートナーとして、120の公立およびチャータースクール地区、3,000を超える学校、90万人以上の学生をサポートしています。このESCは、600の学校地区とチャーター、5,000を超える学校、300万人以上の学生に利用されるアイテムバンクTEKSbankを作成、配布、支援しています。カリキュラム開発や指導支援からリーダーシップトレーニング、特別支援教育サービスまで、第10地区は教育者を支援し、学習体験を豊かにし、すべての背景や能力を持つ学生のためにポジティブな成果を促進することにコミットしています。
課題
第10地区は、州の学力評価であるテキサス州学力準備度テスト（STAAR®）に向けて学生を準備するためのアイテムバンクTEKSbankを公開しています。90,000のTEKSbankテスト問題は、州のカリキュラム基準であるテキサス必須知識・技能（TEKS）およびウェブの知識の深さ（DOK）やブルームのタキソノミーなどの他のタグに沿ったものです。
教育のトレンドが変わり、州が基準を更新する中で、第10地区はバンクの整合性と関連性を確保するために多くの努力をしています。
コンテンツが州のカリキュラム基準に沿い、さまざまな難易度を含むことを保証するために、第10地区は毎年複数の整合性プロジェクトを実施しています。契約者が各アイテムを手動で分析するために雇われます。一部のプロジェクトでは、12学年ごとに1人のカリキュラム専門家が最大2,000のアイテムをレビューする必要があります。これらのレビュープロセスは時間がかかるだけでなく、手動のレビュープロセスは更新されたアイテムの正確性と一貫性の欠如を招きました。
第10地区は、コンテンツの整合性を維持するためにかなりの時間とリソースを費やしており、コンテンツの成長と改善に優先順位を付ける時間がほとんどありませんでした。既存のコンテンツの基準やタグを更新するためだけに年間$150,000を費やすことは珍しくありませんでした。これは、2023年にテキサスの教育環境がテクノロジー強化アイテム（TEI）やオンライン評価の導入に伴い大きな変革を遂げたとき、さらに重要な問題となりました。これは従来の評価方法からの逸脱であり、教育者に対して、批判的思考と高度な知識の実証を強調した新しいパラダイムに向けて学生を準備させる挑戦をもたらしました。教師を支援し、この新しいフロンティアに導くために、第10地区は20,000の高品質なTEIを作成するという課題に直面しました。
第10地区は、新しいパートナーを探す際に達成しようとしている4つの主要な目標を初めに明確にしました。
- 最新の州基準に沿った整合性を確保する
- 知識のギャップを特定する
- 知識の深さ（DOK）を割り当てる
- 文化的関連性を持つコンテンツを更新する
ESCは、新しいテクノロジーの実装を開始する前に、いくつかの重要な要素を考慮する必要がありました：
- プロセス全体での人間の監視の維持が必要
- コンテンツの常時調整と改善
- 整合性プロジェクトの時間を短縮し、より多くの質問を強化・開発するための時間を確保する
第10地区は2023年3月にプロメトリックのファインチューンチームと接続しました。ファインチューンはESCの課題を迅速に理解し、アイテムバンクや学習資料全体の深い洞察を持つコンテンツ整合性のためのAI-人間ハイブリッドツールであるファインチューンカタログ™の実装に取り組み始めました。
「ファインチューンはK-12のコンテンツと基準を非常によく理解していました。私たちが求めていることについて、技術的なAIの知識がなくても、彼らと会話をするのは簡単でした。」
- ジム・ニューハウス、元第10地区データソリューションアシスタントディレクター
成果
第10地区は、試験のブループリント、基準、アイテムバンクなどの学習資料をファインチューンに提供しました。ファインチューンはこのコンテンツを取り込み、ウェブの知識の深さにどの程度整合しているかを分析するためのカスタマイズされたカタログAIモデルを構築しました。最初の整合性の後、カタログは96％の精度を報告し、第10地区のチームは将来のコンテンツの発展と改善に対して興奮と楽観を抱きました。「干し草の中の針」と呼ばれる整合性の改善が必要なアイテムは修正可能であり、これまで以上に迅速かつ安価、かつ正確に行えることがわかりました。
最初の整合性の精度に加えて、ESCは将来の評価の構築に役立つ根拠を提供されました。この複雑な根拠は、評価プラットフォームを通じてテストビルダーや教師に提供できる新しいデータの変革的なコレクションとなりました。
「カタログの実装は、予想された6ヶ月ではなく、わずか数週間で完了し、必要な契約者の数を10人から3人に減らしました。ファインチューンカタログを使用して整合性のタスクを達成することで、時間とお金が節約され、全体的な生産性が向上しました。」
- ジム・ニューハウス、元第10地区データソリューションアシスタントディレクター
現在、数学、英語言語芸術および読書（ELAR）、科学、社会科を含む各コアコンテンツエリアで約$100,000の節約を行っている第10地区は、新しいコンテンツを生産して現在のアイテムバンクを成長させるために再投資することができます。TEKSbankは現在、25％（20,000）の最先端のテクノロジー強化質問を備えており、より深い知識の評価と学生のスキルのより正確な評価を提供します。
「私たちはAIを、人間がプログラムし、人間が監視し、人間が分析するツールとして考えています。」- ジム・ニューハウス、元第10地区データソリューションアシスタントディレクター
ダウンロード成功事例