Um die Sicherheit einer Prüfung zu gewährleisten und die Langlebigkeit sowie Gültigkeit ihrer Zertifikate sicherzustellen, entscheiden sich viele der Organisationen, mit denen wir bei der Erstellung und Pflege eines Bewertungsprogramms zusammenarbeiten, dafür, ihre Tests durch bankbasierte Prüfungen zu sichern. Bankbasierte Prüfungen ermöglichen es Ihrer Organisation, ein Prüfungsformular zufällig und automatisch zu generieren, eine Strategie, die Betrug verhindert, die Lebensdauer Ihrer Testelemente verlängert und die Integrität Ihrer Prüfungsbank aufrechterhält. Die wichtigsten Arten bankbasierter Prüfungen umfassen Lineares On-the-Fly-Testing (LOFT), LOFT mit Testlets, Computerisierte Adaptive Tests (CAT-FL, CAT-VL) und Computerisierte Mastery-Tests (CMT). Jede dieser Banktypen hat ihre Vorteile und kann eingesetzt werden, um die spezifischen Bedürfnisse Ihrer Testpläne zu erfüllen.
Lineares On-the-Fly-Testing (LOFT)
Was ist LOFT? LOFT ist die Erstellung eines Prüfungsformulars zum Zeitpunkt der Prüfung, kurz vor oder sogar während der Durchführung des Tests, und wird verwendet, um einzigartige vergleichbare Formulare für jeden Prüfling zu generieren. LOFT erfordert, dass alle Elemente vorgetestet und auf einer gemeinsamen Skala platziert werden, und dass der Test, der LOFT verwendet, mittels computerbasierter Prüfung durchgeführt wird.
Hauptvorteil:
Testlet-ebene LOFT ist eine ideale Strategie, wenn der Prüfungsplan einfach genug ist, um mit einem einzelnen Testlet beprobt zu werden, oder wenn der Testelementepool groß genug ist, um mehrere parallele Testlets zu erstellen. Darüber hinaus ist die Anzahl der Elemente, die für LOFT mit Testlets benötigt werden, kleiner als bei konventionellem LOFT, und erfordert etwa fünf vollständige Prüfungsformulare. Dies gibt Testlet-ebene LOFT eine größere Flexibilität bei Bewertungen mit kleineren Elementepools und bietet gleichzeitig Sicherheit, um die Integrität und Langlebigkeit einer Prüfung zu schützen.
Computerisierte Adaptive Tests (CAT-FL, CAT-VL)
Was ist CAT? Ein computerisierter adaptiver Test ist einer, der Testelemente nahe dem Fähigkeitsniveau eines Prüflings bereitstellt und sich schrittweise an deren Antworten anpasst, während die Prüfung voranschreitet. CAT basiert auf einem iterativen Algorithmus, der ein erhebliches Maß an Variabilität im Prüfungsformular zwischen den Tests bietet.
Hauptvorteil:
Da sich CAT an jeden Prüfling anpasst, hängt die Sicherheit des Prüfungsformulars und der Elemente von deren Antworten ab, was bedeutet, dass die Formulare stark auf die Antworten zugeschnitten sind und ein hohes Maß an Sicherheit aufweisen, da es für potenzielle Betrüger schwierig ist, vorherzusagen, welche Elemente sie während des Tests erhalten. Dies bedeutet auch, dass CAT präzise Ergebnisse mit kürzeren Prüfungsformularen liefern kann, da die Fähigkeits-Skala in jedes Element kalibriert ist. Während dies einen ordnungsgemäß kalibrierten Testelementepool erfordert, ist dies eine ideale Prüfungsbankmethode für große Zielgruppen von Prüflingen, da die Kombination aus weniger benötigten Elementen, um ein präzises Ergebnis zu erreichen, und der reduzierten Zeit, die erforderlich ist, um die gesamte Prüfung abzuschließen, erhebliche Einsparungen darstellt. Wie bei der LOFT-Testdurchführung muss CAT mittels computerbasierter Prüfung durchgeführt werden.
Computerisierte Mastery-Tests (CMT)
Was ist CMT? Computerisierte Mastery-Tests bieten ein zusätzliches Maß an Verifizierung über die CAT-Methoden der Durchführung hinaus. CAT kann Klassifikationsfehler in seinen Bestehen-Nichtbestehen-Entscheidungen aufweisen, sei es durch falsch-positive oder falsch-negative Ergebnisse, was bedeutet, dass Personen fälschlicherweise bestanden oder nicht bestanden werden, basierend auf einer begrenzten Anzahl von Bewertungs-kriterien. CMT ermöglicht es, „intermediate“ Testlets an Personen bereitzustellen, die die anfänglichen Bestehen-Nichtbestehen-Kriterien nicht erfüllen, und bietet ein umfassenderes Testszenario für die Bewertung eines Programms.
Hauptvorteil:
Ein wesentlicher Vorteil von CMT ist die Toleranz, mit der Ihre Organisation Fehler spezifizieren kann. Sie entscheiden über das Gewicht jeder Bestehen/Nichtbestehen-Entscheidung, ob es Follow-ups benötigt, um diese Entscheidung zu erkunden, und wie nachfolgende Antworten bewertet werden. Kurz gesagt, CMT ermöglicht ein besseres kontextuelles Verständnis komplexer Antworten bei der Bewertung eines Testergebnisses. Folglich ist ein zweiter Vorteil von CMT, dass weniger Fragen erforderlich sind, um einen Testlet-Pool zu erstellen als bei konventionellem CAT.
Schlussgedanken
Jede der hier besprochenen Prüfungsbankstrategien kann Ihrem Bewertungsprogramm die Sicherheit, Flexibilität und Anpassungsfähigkeit bieten, die notwendig sind, um die Langlebigkeit Ihrer Prüfungen sicherzustellen. Mit unserer Erfahrung in der Erstellung von Bewertungen für unsere Kunden und der psychometrischen Expertise, die wir bereitstellen, ist die Erstellung eines neuen Bewertungsprogramms oder das Wachstum einer bestehenden Prüfung ein reibungsloser Prozess. Bereit, mehr zu erfahren? Sehen Sie, wie Sie die neuesten Möglichkeiten in der KI nutzen können, um Ihre Elementebank durch die schnelle Produktion von Elementen mit bis zu 10-facher Geschwindigkeit zu erhöhen.
Erfahren Sie mehr heute!