Mae sefydliadau sy'n datblygu ac yn cyflwyno profion cyfrifiadurol yn dod ar draws llawer o'r un heriau â'r rhai sy'n gweithio gyda phrofion papur a phensil traddodiadol, gan gynnwys materion yn ymwneud â diogelwch, golygu seicometrig ac amddiffynadwyedd cyfreithiol. Mae materion newydd hefyd yn codi gyda phrofion cyfrifiadurol (CBT), yn benodol gan fod profion yn cael eu gweinyddu'n ehangach trwy'r Rhyngrwyd. Mae'r materion hyn yn cynnwys risg uwch o dwyllo ymgeiswyr a gor-ddatgelu eitemau.
Er mwyn mynd i'r afael â'r heriau parhaus a gyflwynir gan brofion yn gyffredinol yn ogystal â rhai o'r materion newydd sy'n ymwneud â CBT, mae angen i sefydliadau ddilyn prosesau safonol ar gyfer datblygu eitemau prawf a golygu seicometrig. Er enghraifft, mae defnyddio ysgrifenwyr eitemau lluosog i ddatblygu cynnwys prawf yn arfer cyffredin, ond gall arwain at amrywiad yn arddull, fformat ac anhawster eitem prawf. Gall canllaw arddull gyda thempledi a safonau a rheolau datblygu eitemau fynd yn bell o ran gwella cysondeb, fformat ac amrywiaeth eitemau. Yn ogystal, gall hyfforddiant datblygu cynnwys sicrhau bod gan ysgrifenwyr yr offer i ddatblygu eitemau credadwy, amddiffynadwy a thempledi eitemau y gellir eu defnyddio i greu amrywiadau gwahanol o'r un cwestiwn, a thrwy hynny gynyddu maint y banc eitemau mewn cyfnod byrrach o amser.
Mae'r gwerthusiad ystadegol o eitemau prawf yn y maes yn galluogi sefydliadau i gael adborth ar berfformiad eitemau penodol a lefelau gwybyddol. Mae'r wybodaeth hon yn caniatáu adolygu prosesau datblygu eitemau ac adborth ar gyfer datblygwyr eitemau prawf penodol - gan helpu i benderfynu beth sy'n effeithiol a sut mae'r eitemau'n teithio yn y maes. Mae hyn hefyd yn galluogi'r sefydliad i wneud penderfyniadau ar gadw, addasu ac aseinio eitemau.
Dylai unrhyw sefydliad sy'n datblygu neu'n gweinyddu profion fod yn ymwybodol o'r broses golygu seicometrig - un sy'n cynnwys gwerthuso lefelau anhawster eitemau ac yn ystyried pethau fel gramadeg, sensitifrwydd ac arddull. Mae seicometreg hefyd yn darparu ar gyfer adolygu ffurf a swyddogaeth eitem prawf, fel opsiynau cyfochrog, digon o wybodaeth i ateb hyd y cwestiwn ac ateb.
Gyda'r pwysigrwydd a roddir ar wrthrychedd, gweithwyr golygu prawf sy'n gwneud y gorau o olygu seicometrig, nid arbenigwyr pwnc nac ysgrifenwyr eitemau. Mae unigolion sydd wedi'u hyfforddi yng nghymhlethdod golygu seicometrig yn gwerthuso eitemau mewn goleuni beirniadol gwahanol nag arbenigwyr pwnc neu ysgrifenwyr eitemau. Fodd bynnag, mae'n bwysig hefyd cael adolygiad a chymeradwyaeth o'r eitem derfynol, wedi'i golygu gan arbenigwyr pwnc yn y maes priodol.
Rhaid i eitemau a ddatblygwyd ar gyfer CBT a PPT fod yn gyfreithiol amddiffynadwy i sicrhau amddiffyniad os bydd her gyfreithiol. Er mwyn sicrhau amddiffynadwyedd cyfreithiol, rhaid i sefydliadau weithredu proses safonol ar gyfer datblygu eitemau ac adolygiad seicometrig, fel y trafodwyd uchod.
Mae gwerthuso amddiffynadwyedd cyfreithiol yn cynnwys adolygiad beirniadol o'r arholiad o safbwynt cynnwys a seicometrig i sicrhau bod yr arholiad wedi'i ddatblygu yn unol â'r Safon ar gyfer Profi Addysgol a Seicolegol . Mae'r llysoedd yn gohirio i'r Safonau wrth werthuso hygrededd yr arholiad dan sylw. Gellir cyflawni amddiffynadwyedd cyfreithiol trwy sawl methodoleg. Agwedd bwysicaf y broses ddatblygu yw dilyn a dogfennu methodolegau safonedig a chynnwys personél datblygu profion priodol yn y broses. Mae yna lawer o wahanol gamau yn y broses datblygu profion a gwahanol fethodolegau y gellir eu defnyddio ar gyfer pob cam. Er enghraifft, wrth bennu'r toriad ar gyfer arholiad, gellir defnyddio prosesau fel yr Angoff wedi'i Addasu neu'r Dull Llyfrnodi i bennu'r safon briodol ar gyfer pasio. Mae pob un o'r dulliau'n defnyddio techneg wahanol i bennu'r bar y mae'n rhaid i ymgeisydd ei gyrraedd er mwyn derbyn statws pasio.
Er mwyn lliniaru'r risg o or-ddatgelu eitemau, mae cwmnïau profi yn datblygu banciau eitemau prawf mawr y mae cynnwys profion yn cael eu hadnewyddu fel mater o drefn. Gan gymryd yr awenau gan ddatblygwyr a gweinyddwyr y profion mawr, bydd sefydliadau sy'n gweinyddu profion cyfrifiadurol eisiau ystyried defnyddio banciau eitemau estynedig a lluniaeth eitemau prawf wedi'u hamserlennu i sicrhau nad yw ymgeiswyr yn gweld yr un eitemau na dyluniadau, gan leihau'r tebygolrwydd y bydd ymgeiswyr yn rhannu. gwybodaeth.
Mewn llawer o raglenni profi polion uchel, mae gweinyddwyr profion yn casglu ac yn archwilio data fforensig er mwyn mesur pa mor aml y mae ymgeiswyr sy'n profi yn agored i eitemau prawf penodol, yr amser cyfartalog y mae ymgeiswyr yn ei dreulio ar eitemau a sut mae ymatebion ymgeiswyr i eitemau yn newid dros amser ac amlygiad. Mae hyn yn sicrhau addasiad parhaus y broses datblygu eitem a'i chynnwys i sicrhau hygrededd, cyfreithlondeb a diogelwch.
Mae yna hefyd fethodolegau gwahanol y gellir eu gweithredu wrth ddadansoddi canlyniadau'r ymgeisydd ar ôl yr arholiad. Un o'r mathau hynny o ddadansoddiadau yw dadansoddiad eitem wahaniaethol, sy'n gwerthuso perfformiad grŵp ar eitemau prawf (gellir diffinio grwpiau yn ôl rhyw, ethnigrwydd neu ffactorau eraill). Yna caiff eitemau sy'n perfformio'n sylweddol wahanol ar draws grwpiau o ymgeiswyr eu hail-werthuso i bennu defnydd yn y dyfodol.
Mae'r llu o ffactorau i'w hystyried wrth ddatblygu cynnwys ar gyfer profi cyfrifiadurol i gyd yn rhoi hygrededd ac uniondeb i'r arholiad ei hun. Mae sefydliadau sy'n gallu ystyried dyluniad a gweithrediad eu rhaglenni profi yn rhagweithiol yn gwneud yn well na sefydliadau sy'n mudo i brofion cyfrifiadurol ar frys. Mae dull rhagweithiol sy'n cyfrif am ddatblygu eitemau a golygu adnoddau ynghyd â pharamedrau diogelwch a TG yn gwasanaethu'r sefydliad yn well dros y pellter hir, gan ei fod yn cynyddu dilysrwydd profion, tegwch ymgeiswyr ac yn cynnig lefel uwch o ddiogelwch rhag heriau cyfreithiol.
Dychwelwch i Dudalen Effeithlonrwydd Prawf ac Amddiffynadwyedd Cyfreithiol