A Prometric nagy tapasztalattal rendelkezik a programok átállításában a papír alapú kézbesítésről a számítógépes kézbesítésre. A tesztfejlesztési osztály olyan pszichometrikus személyzettel dolgozik, akik közvetlenül részt vettek a módszertan kutatásában és alkalmazásában annak érdekében, hogy egy ilyen átmenet során minimális hatást lehessen biztosítani a jelölt teljesítményére.
Kutatás
Mivel a számítógépes tesztelés (CBT) rendkívül bőséges lett az elmúlt 10–15 évben, a papír alapú és a számítógépes vizsgák összehasonlíthatóságával kapcsolatos ipari kutatások száma jelentősen megnőtt. Mint várható lenne, a számítógépek kezdeti bevezetésekor a vizsgálati populációban gyakori kutatási eredmények már nem relevánsak a vizsgáló környezetbe belépő jelölt populációk számára. Ahogy a jelölt populációk fejlődtek az expozíciójuk, a hozzáférésük és a számítógépek megismerésének lehetőségei miatt, a számítógépes vizsgák bevezetésének hatása jelentősen csökkent. Ez igaz a több jelölt szegmensre is, mivel a számítógépek rendelkezésre állása exponenciálisan nőtt az összes népesség alcsoportja között.
Összegezve az elmúlt 5–10 évben végzett többszörös tanulmányok eredményeit (a legutóbbi 1997-ben készült), a kutatási terület főbb pontjai a következők:
- A papír alapú és a számítógépes tesztelés során a vizsga teljesítményére gyakorolt hatás nagysága általában statisztikailag jelentéktelen (p> 0,05), ami arra utal, hogy nincs lényeges különbség a két tesztelési módszer között.
- A különféle cikkek funkcionalitásának (DIF) elemzése az egyes, papíralapú vagy számítógépes alapon szállított tételek esetében általában azt jelzi, hogy ha az elemtípusok elősegítik mindkét kézbesítési módszertant, akkor az elemek teljesítménye mindkét kézbesítési csatornában összehasonlítható.
- A számítógépes vizsga kézbesítésével kapcsolatos egyértelmű kommunikáció a jelölt medencével tovább csökkentheti annak lehetőségét, hogy a kézbesítési mód befolyásolja a végső jelölt teljesítményét.
- Az előkészítés és a gyakorlat szimulált tesztelési környezetben (gyakorlati vizsga és / vagy az élő tesztelés előtti bemutató útján) csökkentheti a jelölt teljesítmény szorongását és tovább hozzájárulhat a méltányos tesztelési eredményhez.
A tesztelési iparban rendelkezésre álló elméleti kutatásokon kívül a Prometric gyakorlati tapasztalattal is rendelkezik a jelöltteljesítmény értékelésében és összehasonlításában több szállítási csatornán keresztül. Nagyon sok ügyfelet sikeresen áttelepítettünk egyik kézbesítési módból a másikba, és következetesen értékeljük a jelölt teljesítményét annak biztosítása érdekében, hogy minden jelölt számára tisztességes lehetőséget biztosítsunk tudásuk bemutatására (a használt csatornától függetlenül). Ezen felül a Prometric számos olyan ügyfelet használ, akik kettős kézbesítési modellt használnak (mind papír alapú, mind számítógépes alapú), amely lehetővé teszi a vizsga teljesítményének és az egyes elemek teljesítményének összehasonlíthatóságának folyamatos ellenőrzését a többféle tesztelési környezetben. A Prometr megállapításai következetesen tükrözik az általános tesztelési közösség fentiekben megfigyelt eredményeit, és képesek voltunk olyan megközelítéseket kifejleszteni és továbbfejleszteni, amelyek biztosítják a kívánt eredményt.
Gyakorlat
A vizsgaprogramok migrációja során több lépést kell figyelembe venni. Noha számos egyedi feladat van, a fő tevékenységek a következők:
- A jelenlegi tételbank értékeléseA jelenlegi papír alapú cikkbank értékelését általában a projekt kezdetén végzik, hogy biztosítsák a számítógépes környezetben való alkalmazhatóságot, és kiindulási statisztikákat gyűjtsenek a jövőbeli értékeléshez.
- Az elem bemutatásának módosítása Ha szükséges, a Prometric ajánlásokat fogalmaz meg az egyes elemek módosítására, hogy növelje annak valószínűségét, hogy a teljes vizsga során a számítógépes környezetben a méltányos teljesítmény teljesüljön.
- Készítsen elő egy kommunikációs erőfeszítést a jelöltek számára. Arometric együttműködik az ügyfelekkel annak biztosítása érdekében, hogy egy új kommunikációs modell bevezetése előtt megfelelő kommunikációs kampányt dolgozzanak ki a jelölt lakosság számára.
- Mintavizsga és / vagy oktatóanyagok előkészítéseA Prometric gyakorlati vizsgákat és / vagy oktatóanyagokat készít, amelyeket a jelölteknek élő vizsga előtt biztosítanak, hogy javítsák a jelölt populáció kényelmi szintjét a teszt átadási modelljével.
- Vizsga és elem elemzéseA 2. lépésben összegyűjtött kiindulási adatok felhasználásával a Prometric értékeli a vizsga és az elem szintjét, hogy biztosítsa a jelölt teljesítményét.
- Folyamatos figyelemmel kísérés és karbantartásA szállítási modell értékelése nem áll le az összehasonlíthatóság kezdeti megerősítése után. A prometrikus pszichometrikusok folyamatosan figyelemmel kísérik az USPS tételeinek és vizsgáinak teljesítését, hogy megbizonyosodjanak arról, hogy az elfogadható statisztikai paramétereken belül teljesítenek-e, és hogy előre jelezzék a teszt jövőbeli fejlesztési igényeit.
A Prometris beágyazza a fenti módszertant a tesztfejlesztési és a kézbesítési folyamatokba annak érdekében, hogy minden jelölt számára tisztességes, érvényes és jogi szempontból megvédhető folyamatot biztosítson. A számítógépes vizsgák sikeres végrehajtásával kapcsolatos tapasztalataink megfelelnek a bevált folyamatoknak, amelyek biztosítják a termék minőségét és a teljesítményt a vizsgák teljes életciklusa alatt.