Ez a dokumentum azokat az általános irányelveket írja le, amelyek alapján a prometrikus belső pszichometrikusok értékelik és megjelölik a belső elemeket további felülvizsgálat céljából. Ez az útmutató azokra a programokra vonatkozik, amelyek klasszikus tesztelméletet használnak.
|
Az űrlap-összeállítás és a statisztikai áttekintés elemei |
Műszaki adatok / Szabványok |
|---|---|
|
1. Az elem nehézségei |
P-értékek = .30 - .89 (optimális) * |
|
2. Célérték (ek) az elem diszkriminációs mutatókhoz |
rpBis> 0,20 |
|
3. Céltartományok a belső konzisztencia megbízhatóságának becsléséhez |
Alfa> 0,80 |
| 4. A besorolási konzisztencia vagy megbízhatóság becslésének céltartományai | Livingston> .80 |
|
Az elfogadható tartományok meghaladják az optimális tartományokat, és az alábbiakban ismertetjük azokat |
Tervezett cikkek nehézségei
| P-érték = 0,30 - 0,89 |
|---|
A prometrikus munkatársakat felkészítik annak felismerésére, hogy az egyes p-értékek nem jelentenek abszolút, megismételhető értéket, és nem indokolják a konkrét értelmezést. A prometrikus pszichometrikusok inkább áttekintik a rendelkezésre álló elem elemzési információkat a trendek értékeléséhez. Megjegyzés: önmagában a p-értékek nem elegendőek a legtöbb elem értelmezéséhez. Az összes alapvető cikk-áttekintés magában foglalja a p-értékeket és az rpBis-t, mielőtt az elemek elrendezési döntései megtörténnének.
| p-érték (könnyű-kemény) | Tétel értelmezése |
|---|---|
|
1,00–0,96 |
Nem elfogadható, minimális mérési értékű tételek, amelyeket a kkv-k eltávolításukhoz vagy felülvizsgálatához meg kell jelölni. |
|
0,90–0,95 |
Nagyon könnyű (esetleg elfogadhatatlan) elemek: ellenőrizze az rpBis-et a megfelelő diszkrimináció szempontjából. Felülvizsgálhatom a kkv-kat. |
|
0,89-0,80 |
Elég könnyű (elfogadható) tételek: ellenőrizze az rpBis-et a megkülönböztetés megerősítése érdekében. |
|
0,79 - 0,40 |
Nehéz vagy közepesen könnyű (elfogadható) tételek: használja, ha az rpBis a specifikáción belül van. |
| 0,39 - 0,30 | Nehéz (elfogadható) tételek: alaposan ellenőrizze az rpBis-t, használja, ha az rpBis az előírásokon belül van. |
| 0,29 - 0,20 | Nagyon nehéz (esetleg elfogadhatatlan) tételek: ellenőrizze az rpBis-et a megfelelő diszkrimináció szempontjából. A kkv-kat felül kell vizsgálni. |
| 0,19 - 0,00 | Elfogadhatatlan tárgyak: Megfelelően nehéz vagy egyéb módon hibás. A kkv-kat eltávolításukhoz vagy felülvizsgálathoz meg kell jelölni. |
Ha egy elem marginálisnak bizonyul, a fejlesztõk megvizsgálják az elem rpBis-jét. Ha az rpBis magas, akkor nagyobb toleranciát kell adni arra, hogy ezt az elemet a vizsgán tartsák.
Célérték (ek) az elem diszkriminációs mutatókhoz
| rpBis = 0,20 - 1,00 |
|---|
A biserial pontot (rpBis) a prometrikus pszichometrikusok használják az egyes elemek megkülönböztethetőségének meghatározására. Más klasszikus statisztikákhoz hasonlóan az rpBis használata nem pontos tudomány. Egyes esetekben az alacsony rpBis-értékek különösen magas vagy alacsony p-értékek, alacsony tételek szórása a valószínűtlen zavaró tényezők miatt, alacsony pontozási variancia a jelöltek homogenitása miatt, vagy rendkívül ferde pontozási eloszlások. Ezért a prometrikus pszichometrikusoktól számos statisztikát kell figyelembe venni, amikor elemzik az elemzéseket. A 3. táblázat összefoglalja azokat az irányelveket, amelyeket a fejlesztők használnak az elemek megkülönböztetésének áttekintésekor. Ne feledje, hogy ezek az irányelvek feltételezik, hogy az elem megfelelően van kulcstartva, és a jelöltek mintája elegendő.
|
RpBis (erős vagy gyenge) |
Tétel értelmezése |
|---|---|
|
1,00–0,50 |
Nagyon erős (elfogadható) |
|
0,49 - 0,30 |
Erős (elfogadható) |
|
0,29 - 0,20 |
Elfogadható (de szükség lehet felülvizsgálatra) |
|
0,19–0,10 |
Marginális (esetleg elfogadhatatlan) tételek: alaposan vizsgálja meg a szöveget és a zavarókat. |
| 0,09 - 0,00 | Gyenge (elfogadhatatlan) tételek: a p-értékek valószínűleg nagyon magasak. Jelölés a kkv-k általi eltávolításhoz vagy felülvizsgálathoz. |
| -0.01 és –0.20 között |
Elfogadhatatlan tárgyak: alkalmatlanul nehéz vagy egyébként hibás. A kkv-kat eltávolításukhoz vagy felülvizsgálathoz meg kell jelölni. |
A 4. táblázat felsorolja az értelmezéseket, amelyeket a pszichometriai csapat alkalmaz az alfa együtthatók különböző tartományaira.
|
Alpha |
Belső konzisztencia megbízhatóság értelmezése |
|---|---|
|
Kevesebb, mint 0,60 |
Elfogadhatatlan együtthatók, amelyek új formákat igényelnek |
|
0,60–0,69 |
Rossz együtthatók, amelyek az űrlap felülvizsgálatát vagy eltávolítását igénylik |
|
0,70–0,79 |
Margális együtthatók, amelyek megkövetelhetik az űrlap felülvizsgálatát / felülvizsgálatát |
|
0,80–0,89 |
Jó együtthatók |
|
0,90 vagy annál magasabb |
Kiváló együtthatók |
A jóváhagyási / sikertelen döntés besorolási konzisztenciájának vagy megbízhatóságának becslésére szolgáló céltartomány
|
r = 0,80 vagy nagyobb |
|---|
Prometrikusan kiválasztott Livingston négyzetes hibavesztési módszer a döntési következetesség megbízhatóságának kiszámításához. Ezt a módszert választották, mert értelmezhető más megbízhatósági mutatókhoz hasonlóan (fentebb tárgyalt). Sokkal kevésbé bonyolult, mint a küszöbvesztéses módszerek, és minden egyszeri beadási forma esetében futtatható. Ennek a statisztikának a felhasználása megfelel az oktatási és pszichológiai tesztelési standardok 2.3. 20.
Prometrikus ajánlások - Tétel bankarány
A Prometr belső standardjait és ügyfélajánlatait az elembankokhoz az alábbi 1. táblázat tartalmazza.
|
Ajánlási szint |
Hatótávolság |
|---|---|
|
1. Minimális céltartomány |
Az űrlaponkénti 1,5–2-szeres cikkszám |
|
2. Elfogadható céltartomány |
Az űrlaponkénti 2-3-szoros darabszám |
|
3. Optimális céltartomány |
Az űrlaponkénti háromszor-ötszörös darabszám |