Organizacije, ki razvijajo in izdajajo računalniške teste, se srečujejo z mnogimi enakimi izzivi kot tiste, ki delajo s tradicionalnimi testi papirja in svinčnikov, vključno z vprašanji, ki se nanašajo na varnost, psihometrično urejanje in pravno zaščito. Nove težave se pojavljajo tudi pri računalniškem testiranju (CBT), zlasti ker se testi bolj razširjajo prek interneta. Ta vprašanja vključujejo večje tveganje za goljufanje kandidatov in prekomerno izpostavljenost.
Da bi reševale trenutne izzive, ki jih predstavlja testiranje na splošno, pa tudi nekatera nova vprašanja v zvezi s CBT, morajo organizacije slediti standardnim postopkom za razvoj testnih izdelkov in psihometrično urejanje. Na primer, uporaba več piscev elementov za pripravo vsebine preizkusov je običajna praksa, vendar lahko privede do razlik v slogu, obliki in težavah preskusnih elementov. Vodnik po slogu s predlogami in standardi in pravili za razvoj artiklov bo lahko izboljšal skladnost, obliko in raznolikost. Poleg tega lahko usposabljanje za razvoj vsebine piscem zagotovi orodja za razvoj verodostojnih, zaščitljivih elementov in predlog, ki jih lahko uporabite za ustvarjanje različnih različic istega vprašanja, s čimer povečate velikost banke elementov v krajšem času.
Statistično vrednotenje testnih točk na terenu omogoča organizacijam, da dobijo povratne informacije o določenih rezultatih in kognitivni ravni. Ta inteligenca omogoča revizijo procesov razvoja izdelkov in povratne informacije za določene razvijalce preizkusnih izdelkov - pomaga ugotoviti, kaj je učinkovito in kako se lahko izdelki lotijo na terenu. To tudi organizaciji omogoča sprejemanje odločitev o hrambi, spremembi in dodelitvi izdelkov.
Vsaka organizacija, ki razvija ali izvaja teste, se mora zavedati postopka psihometričnega urejanja - tista, ki vključuje ocenjevanje težavnosti posameznih elementov in upošteva stvari, kot so slovnica, občutljivost in slog. Psihometrija omogoča tudi pregled oblike in funkcije testnega predmeta, kot so vzporedne možnosti, dovolj informacij za odgovor na vprašanje in dolžino odgovorov.
Zaradi pomembnosti objektivnosti psihometrično urejanje najbolje izvajajo strokovnjaki za razvoj testov, ne strokovnjaki ali pisci predmetov. Posamezniki, usposobljeni za kompleksnost psihometričnega urejanja, ocenjujejo predmete v drugačni kritični luči kot strokovnjaki za zadeve ali pisci predmetov. Pomembno pa je tudi, da končno, urejeno postavko pregledajo in odobrijo strokovnjaki za zadevne zadeve.
Predmeti, razviti za CBT in PPT, morajo biti pravno zaščitljivi za zagotovitev zaščite v primeru pravnega izziva. Za zagotovitev pravne zaščite morajo organizacije izvesti standardni postopek za razvoj izdelkov in psihometrični pregled, kot je razloženo zgoraj.
Vrednotenje pravne zaščitnosti vključuje kritični pregled izpita z vsebinskega in psihometričnega vidika, da se zagotovi, da je bil izpit izdelan v skladu s Standardom za izobraževalno in psihološko testiranje . Sodišča odstopajo od standardov, ko ocenjujejo verodostojnost zadevnega izpita. Pravna zaščitljivost je mogoče doseči z več metodologijami. Najpomembnejši vidik razvojnega procesa je sledenje in dokumentiranje standardiziranih metodologij ter vključevanje ustreznega testnega razvojnega osebja v postopek. V procesu razvoja preizkusa je veliko različnih korakov in različnih metodologij, ki jih je mogoče uporabiti za vsak korak. Na primer pri določanju rezalnega rezultata za izpit lahko za določitev ustreznega standarda za opravljanje izpitov uporabimo postopke, kot sta Modified Angoff ali Bookmark Method. Vsaka od metod uporablja drugačno tehniko za določitev vrstice, ki jo mora doseči kandidat, da dobi status prehoda.
Za zmanjšanje tveganja prekomerne izpostavljenosti izdelkov testirajoče družbe razvijejo velike banke testnih postavk, iz katerih se vsebina testiranja rutinsko osvežuje. Organizacije, ki upravljajo računalniške teste, bodo prevzele vodilno vlogo pri velikih razvijalcih in skrbnikih preizkusov, zato bodo želele razmisliti o uporabi razširjenih bank elementov in načrtovane osvežitve testnih postavk, da bi zagotovili, da kandidati ne bodo videli istih elementov ali modelov, kar na splošno zmanjšuje verjetnost izmenjave kandidatov informacije.
V številnih programih testiranja z visokimi vložki skrbniki preskusov zbirajo in pregledujejo forenzične podatke, da bi lahko ocenili, kako pogosto so kandidati za testiranje izpostavljeni določenim testnim izdelkom, povprečen čas, ki ga kandidati porabijo za predmete, in kako se odzivi kandidatov na predmete spreminjajo skozi čas in izpostavljenost. To zagotavlja nenehno prilagajanje procesa razvoja vsebine in vsebine, da se zagotovi verodostojnost, zakonitost in varnost.
Obstajajo tudi različne metodologije, ki jih je mogoče uporabiti za analizo rezultatov kandidata po izpitu. Ena od takšnih vrst analiz je diferencialna analiza izdelkov, ki ocenjuje uspešnost skupine na testnih predmetih (skupine so lahko opredeljene glede na spol, narodnost ali druge dejavnike). Predmeti, ki se med skupinami kandidatov izvajajo bistveno drugače, se nato ponovno ocenijo, da se določi prihodnja uporaba.
Množica dejavnikov, ki jih je treba upoštevati pri razvijanju vsebine za računalniško testiranje, vse verodostojnost in integriteto posoja samemu izpitu. Organizacije, ki so sposobne premišljeno razmisliti o oblikovanju in izvajanju svojih programov testiranja, so proaktivnejše kot organizacije, ki se v naglici selijo na računalniško testiranje. Proaktivni pristop, ki upošteva razvoj in urejanje izdelkov, pa tudi varnostne in informacijske parametre, služi organizaciji bolje na dolgi razdalji, saj povečuje veljavnost preizkusa, poštenost kandidatov in nudi višjo raven zaščite pred pravnimi izzivi.