A számítógépes teszteket fejlesztő és szállító szervezetek ugyanazokkal a kihívásokkal szembesülnek, mint a hagyományos papír- és ceruzatesztekkel dolgozók, ideértve a biztonsággal, a pszichometriai szerkesztéssel és a jogi védekezéskel kapcsolatos kérdéseket is. Új kérdések merülnek fel a számítógépes tesztelés (CBT) kapcsán is, különösen mivel a teszteket szélesebb körben adminisztrálják az interneten keresztül. Ezek a problémák magukban foglalják a jelölt csalás és az elemek túlzott expozíciójának fokozott kockázatát.
A tesztelés által jelentett kihívások, valamint a CBT-t érintő új kérdések kezelése érdekében a szervezeteknek követniük kell a próbadarab-fejlesztési és pszichometrikus szerkesztési eljárásokat. Például több elemíró használata a teszttartalom fejlesztésére általános gyakorlat, ám változásokhoz vezethet a teszt elem stílusa, formátuma és nehézségei. A sablonokkal, elemfejlesztési szabványokkal és szabályokkal ellátott stíluskalauz messze megy a cikk egységességének, formátumának és változatosságának javításában. Ezenkívül a tartalomfejlesztési képzés biztosíthatja, hogy az írók rendelkezzenek eszközökkel hiteles, védekező cikkek és cikksablonok kifejlesztésére, amelyek felhasználhatók ugyanazon kérdés különböző variációinak létrehozására, ezáltal rövidebb időn belül növelve az elembank méretét.
A tesztelemek statisztikai kiértékelése a területen lehetővé teszi a szervezetek számára, hogy visszajelzést kapjanak a tárgyak teljesítménye és kognitív szintjeiről. Ez az intelligencia lehetővé teszi az elemfejlesztési folyamatok felülvizsgálatát és a visszajelzést az egyes tesztelő elem-fejlesztők számára - segít meghatározni, hogy mi a hatékony, és hogy az elemek hogyan viselkednek a terepen. Ez lehetővé teszi a szervezet számára, hogy döntéseket hozzon az elemek megőrzéséről, módosításáról és kiosztásáról.
A teszteket kidolgozó vagy adminisztráló szervezeteknek tisztában kell lenniük a pszichometrikus szerkesztési folyamattal - amely magában foglalja az elem nehézségi szintjének kiértékelését és figyelembe veszi a nyelvtant, az érzékenységet és a stílust. A pszichometria a teszt elemének és funkciójának - például a párhuzamos lehetőségeknek - a felülvizsgálatát is biztosítja, elegendő információval szolgál a kérdés megválaszolásához és a válasz hosszúságához.
Az objektivitás fontosságával a pszichometrikus szerkesztést legjobban a tesztfejlesztési szakemberek hajtják végre, nem pedig a téma szakértői vagy az írók. A pszichometrikus szerkesztés bonyolultságára kiképzett egyének más, kritikus fényben értékelik az elemeket, mint a tárgy szakértői vagy az írók. Fontos azonban, hogy a végleges, szerkesztett tételt a megfelelő terület szakértői is áttekintsék és jóváhagyják.
A CBT és a PPT számára kifejlesztett termékeknek jogilag védendőnek kell lenniük, hogy jogi megtámadás esetén biztosítsák a védelmet. A jogi védekezés biztosítása érdekében a szervezeteknek a tárgyalás és a pszichometriai áttekintés standard eljárását kell végrehajtaniuk, amint azt fentebb tárgyaltuk.
A jogi védekezés értékelése magában foglalja a vizsga kritikai felülvizsgálatát mind tartalom, mind pszichometriai szempontból annak biztosítása érdekében, hogy a vizsga az oktatási és pszichológiai tesztelés szabványa szerint készüljön . A bíróságok a kérdéses vizsga hitelességének értékelésekor elhalasztják a szabványokat. A jogi védekezés több módszertanon keresztül valósítható meg. A fejlesztési folyamat legfontosabb szempontja a szabványosított módszertan követése és dokumentálása, valamint a megfelelő tesztfejlesztési személyzet bevonása a folyamatba. A tesztfejlesztési folyamatban sok különféle lépés létezik, és az egyes lépésekhez különféle módszerek alkalmazhatók. Például, ha meghatározzák egy vizsga legkisebb pontját, az olyan eljárások, mint például a módosított lecsúszás vagy a könyvjelző módszer, meghaladhatják a megfelelő szabványt. Mindegyik módszer eltérő technikát alkalmaz annak meghatározására, hogy a jelölést melyik jelöltnek el kell érnie ahhoz, hogy átjáró státuszt kapjon.
A tételek túlzott kitettsége kockázatának csökkentése érdekében a tesztelő társaságok nagy tesztelési tételeket dolgoznak ki, amelyekből a teszt tartalma rendszeresen frissül. A nagy tesztfejlesztők és adminisztrátorok vezetésével a számítógépes teszteket adminisztráló szervezetek mérlegelni fogják a kibővített bankok és az ütemezett tesztelem-frissítés alkalmazását annak biztosítása érdekében, hogy a jelöltek ne látják ugyanazokat az elemeket vagy mintákat, általában csökkentve a jelöltek megosztásának valószínűségét. információ.
Számos magas szintű tesztelési programban a tesztelési adminisztrátorok gyűjtik és megvizsgálják a kriminalisztikai adatokat annak mérése céljából, hogy a tesztelő jelöltek milyen gyakran vannak kitéve bizonyos vizsgálati tételeknek, az átlagos idő, amelyet a jelöltek az egyes tárgyakra fordítanak, és hogy a jelöltek válaszai az elemekre az idő múlásával és az expozícióval változnak. Ez biztosítja az elemfejlesztési folyamat és a tartalom folyamatos kiigazítását a hitelesség, a jogszerűség és a biztonság érdekében.
Különböző módszerek léteznek, amelyek a vizsgáztatás után a jelölt eredmények elemzésével megvalósíthatók. Az elemzések egyik típusa a differenciális elemzés, amely kiértékeli a vizsgálati tételek csoportteljesítményét (a csoportokat nem, etnikai hovatartozás vagy egyéb tényezők határozhatják meg). Azokat a tételeket, amelyek jelentősen eltérően teljesítenek a jelöltcsoportok között, azután újraértékelik, hogy meghatározzák a jövőbeli felhasználást.
A számítógépes tesztelés tartalmának fejlesztésekor figyelembe veendő tényezők sokasága hitelességet és integritást kölcsönöz magának a vizsganak. Azok a szervezetek, amelyek képesek körültekintően mérlegelni a tesztelési programjaik tervezését és végrehajtását, jobban járnak, mint azok a szervezetek, amelyek sietve vándorolnak át a számítógépes tesztelésre. A proaktív megközelítés, amely figyelembe veszi az elemfejlesztést és az erőforrás-szerkesztést, valamint a biztonsági és IT-paramétereket, jobban szolgálja a szervezetet hosszú távon, mivel növeli a teszt érvényességét, a jelölt tisztességét és magasabb szintű védelmet kínál a jogi kihívásokkal szemben.