試験がコンピューターベースであるか、紙で提供されるかにかかわらず、セキュリティ、心理測定の編集またはレビュー、法的弁護など、開発に関する課題は同じままです。これらの「古い」問題に加えて、コンピューターまたはインターネットベースの試験はより広く配信されるため、特に試験のセキュリティに関して、リスクの層が追加されます。
現在進行中の新しいテストの課題に対処するため、テスト項目の開発と心理測定の編集のための標準的な一連のプロセスに従うことで、組織は十分に役立っています。たとえば、多くの組織では、複数のアイテムライターを使用して試験コンテンツを開発しています。これは一般的な慣行ですが、テスト項目のスタイル、形式、または難易度にばらつきが生じる可能性があります。テンプレートとアイテム開発の標準およびルールを含むスタイルガイドは、アイテムの一貫性、形式、および多様性の向上に大いに役立ちます。さらに、コンテンツ開発トレーニングにより、ライターは、同じ質問のさまざまなバリエーションを作成するために使用できる信頼できる防御可能なアイテムおよびアイテムテンプレートを開発するためのツールを使用できるようになります。
現場のテスト項目の統計的評価は、特定の項目のパフォーマンス、暴露レベル、回答パターン、認知レベルに関するフィードバックを得るために重要です。このインテリジェンスにより、アイテム開発プロセスの改訂と特定のテストアイテム開発者へのフィードバックが可能になり、フィールドで効果的なものとアイテムの運命を判断するのに役立ちます。これにより、組織はアイテムの保持、変更、および割り当てを決定することもできます。使用状況と露出に関する測定値は、アイテムバンクを更新するか、新しいアイテムを完全に作成する必要があるかどうかを判断するのに役立ちます。
テストを開発または管理する組織は、アイテムの難易度の評価を含む心理測定編集プロセスを意識し、文法、感度、スタイルなどを考慮に入れる必要があります。サイコメトリックスは、並行オプション、質問に回答するのに十分な情報、回答の長さなど、テスト項目の形式と機能のレビューも提供します。
アイテムとテストの開発における客観性は非常に重要であるため、心理測定の編集は、主題の専門家やアイテム作成者ではなく、テスト開発の専門家が行うのが最適です。心理測定編集の複雑さを訓練された個人は、主題の専門家やアイテム作成者とは異なる、より重要な観点からアイテムを評価します。それは、主題の専門家がプロセスに不可欠ではないという意味ではありません。それどころか。適切な分野の各分野の専門家による最終的な編集済みアイテムのレビューと承認を得ることが重要です。
あらゆる形式のテスト用に開発されたアイテムは、法的異議が発生した場合に組織が保護されることを保証するために法的に防御可能でなければなりません。前述のように、アイテム開発と心理測定レビューの標準プロセスを実装すると、組織の防御力を最大限に高めることができます。
法的弁護の評価には、教育および心理テストの標準に従って試験が開発されたことを確認するために、内容と心理測定の両方の観点から試験を批判的にレビューすることが含まれます。問題の試験の信頼性を評価する場合、裁判所は基準に従います。法的弁護は、いくつかの方法論によって達成できます。開発プロセスの最も重要な側面は、標準化された方法論に従い、文書化し、プロセスに適切なテスト開発担当者を含めることです。テスト開発プロセスにはさまざまなステップがあり、各ステップで使用できる方法論は異なります。たとえば、試験のカットスコアを決定するとき、Modified AngoffやBookmark Methodなどのプロセスを使用して、合格するための適切な基準を決定できます。各メソッドは、異なる手法を使用して、合格ステータスを取得するために候補者が到達する必要があるバーを決定します。
また、テスト内容が定期的に更新される大規模なテストアイテムバンクを開発すると、テスト会社のアイテムの過剰露出のリスクが軽減されます。大規模なテスト開発者と管理者からリードして、コンピューターベースのテストまたはインターネットベースのテストを管理する組織は、候補者が同じアイテムまたはデザインを見ることがないように、拡張アイテムバンクとスケジュール済みテストアイテムの更新を使用することを検討します。再テストの状況で、候補者が情報を共有したり、以前に使用した質問を認識したりする可能性。
多くのハイステークテストプログラムでは、テスト管理者がフォレンジックデータを収集および検査して、テスト候補者が特定のテストアイテムにさらされる頻度、候補者がアイテムに費やす平均時間、およびアイテムに対する候補者の応答が時間と露出によってどのように変化するかを測定します。これにより、アイテム開発プロセスとコンテンツの継続的な調整が保証され、信頼性、合法性、およびセキュリティが確保されます。
テスト開発中に考慮すべき多数の要因は、試験自体に信頼性と完全性を与えます。テストプログラムの設計と実装を慎重に検討できる組織は、デューデリジェンスを行わず、試験を急いで発行しない組織よりも積極的に対応できます。アイテムの開発と編集のリソース、およびセキュリティとITパラメーターを考慮したプロアクティブなアプローチは、テストの妥当性、候補者の公平性を高め、法的課題に対するより高いレベルの保護を提供するため、組織が長距離にわたってより良く機能します。
「次世代」のアイテムバンキングソリューションの多くは、これらの機能すべてを実行します。テスト開発の重要なコンポーネントを利用し、それらのアプリケーションを容易にします。 1つの強力な「次世代」アイテムバンキングツールを使用すると、テスト開発ライフサイクル全体を変換できます。アイテムバンキングツールは、アイテムの開発方法の合理化、テストプログラムの維持方法の変更、品質管理プロセスの進化、アイテムセキュリティのアップグレード、アイテムの複数の側面の収集と統合、アイテムプールの品質の改善、テストプログラムの全体的な管理を容易にします。健全で有効かつ効果的なテストを作成することは、かつてないほど容易になりました。