To je pravni izziv
Organizacije, ki razvijajo in upravljajo spletne teste, morajo razumeti, da je za razvoj testnega predmeta več kot zgolj pisanje vprašanj. Za zaščito kandidatov in organizacije za testiranje morajo biti spletni preizkusni predmeti sposobni soočiti se s pravnimi izzivi. Izpit, ki ga je treba pravno zaščititi, je tisti, ki je zasnovan tako, da vsem kandidatom zagotavlja enake možnosti za izkazovanje svojega znanja in ne diskriminira skupine na podlagi rase, barve, nacionalnega porekla, spola, vere ali zaščitene invalidnosti.
Kako pa lahko organizacije zagotovijo, da so njihovi spletni preizkusi pravno zaščitljivi? Vključitev številnih najboljših praks pri razvoju izdelkov v program testiranja lahko pomaga, da testni predmeti natančno in pošteno merijo znanje, spretnosti in sposobnosti za vse kandidate v skupini.
Najprej in najpomembneje je, da je za pravno zaščito spletnih testnih izdelkov ključnega pomena upoštevanje standardnega postopka za razvoj testnih izdelkov. Ta postopek mora vključevati standardizirano usposabljanje za vse pisce predmetov ter strog postopek pregleda in odobritve. Postopek pregleda vključuje ocenjevanje stvari, kot so občutljivost, slog, pravilnost, kognitivna raven in celotna struktura vseh testnih točk. Del standardiziranega postopka pregleda izvajajo strokovnjaki, del pa psihometri in strokovnjaki za razvoj testov. Ker je pregled psihometričnega in preizkusnega razvoja testov objektivnost, ga najbolje izvajajo strokovnjaki za razvoj testov, ne le strokovnjaki za zadeve ali pisci predmetov. Posamezniki, ki so usposobljeni za kompleksnost psihometričnega vrednotenja predmetov v drugačni, bolj kritični luči kot strokovnjaki za zadeve ali pisci predmetov, so bolj učinkoviti pri zagotavljanju objektivnosti preskusnih predmetov.
Drugič, organizacije lahko izboljšajo pravno zaščito spletnih testov s tekočim zbiranjem podatkov in analizo rezultatov testov. Z uporabo meritev za oceno uspešnosti spletnih preizkusnih postavk na terenu in določitev vzorcev odzivov test lahko zagotovimo, da se nobena skupina ne odziva drugače na vprašanja v celotni skupini.
Analiza podatkov o odzivih na postavke (način, kako kandidati odgovorijo na postavko) lahko ugotovi, ali terminologija ali opisi znotraj predmeta niso primerni za določene dele populacije kandidatov. Presenetljivo je, da lahko sprememba le nekaj besed v izpitnem delu bistveno vpliva na uspešnost kandidata. Na primer, ko je razvijal predmete za določen licenčni izpit, je bilo ugotovljeno, da določeni pisatelj predmetov namesto "krade" rabi besedo "steber". Ker beseda "kradec" ni imela pomena za licenčno območje, ki se preskuša, in beseda "ukrasti" je bolj pogosta beseda, znana v različnih etničnih in socialno-ekonomskih skupinah, s tem da je ena beseda ustvarila bolj veljaven izdelek za celotno testiranje populacija. Analiza po uporabi je potrdila, da sprememba ustvarja bolj pravično uspešnost postavk.
Nazadnje, pisni zapis o nenehnem razvoju in oceni testnega programa lahko služi kot zaščita v primeru pravnih izpodbijanj. Proces razvoja testa je veljaven le, če je dokumentiran. Dokumentacija bi morala vključevati analizo dela, iz katere temeljijo pisne naloge, ter usposobljenost strokovnjakov za zadeve in osebja za testiranje, ki je vključeno v cikle razvoja in pregleda predmeta. Podatke na ravni predmeta in izpitov je treba hraniti tudi po oceni skupaj s standardnimi informacijami o nastavitvah in pripadajočimi metodologijami ocenjevanja.
Pri opravljanju pregleda izpitov, ki so bili izpodbijani na sodišču, hitro postane očitno, da niso vedno "najboljši" izpiti uspešni pred pravnim izzivom. Izpiti, ki zdržijo pravni izziv, so običajno tisti izpiti, ki so sledili standardiziranim, industrijsko sprejetim praksam razvoja testov in dokumentirali njihove korake na tej poti. Brez postopka in dokumentacije celo izpiti, ki so dobro opravljeni, ne morejo navdušiti na sodiščih.
Organizacije, ki razvijajo in upravljajo spletne preizkuse, morajo vedno načrtovati svojo izpitno vsebino in točkovanje s potencialno neugodnimi pravnimi scenariji. Vključitev teh najboljših praks v obstoječi postopek testiranja bo daleč v smeri zmanjšanja verjetnosti pravnih izzivov in po potrebi reševanja sporov:
- Standardizacija razvoja testnih izdelkov
- Strogi postopki pregleda in odobritve izdelkov
- Tekoče zbiranje in analiza rezultatov izpitov in predmetov
- Dokumentiranje postopkov razvoja testov in tekoče vrednotenje
Znanje, ki ga organizacije poskušajo izmeriti, je objektivno, organizacije pa lahko z izvajanjem zgornjih najboljših praks pomagajo zagotoviti, da so tudi njihovi izpiti objektivni.