Οι οργανισμοί που αναπτύσσουν και παραδίδουν ηλεκτρονικές δοκιμές αντιμετωπίζουν πολλές από τις ίδιες προκλήσεις με εκείνους που εργάζονται με τις παραδοσιακές δοκιμές χαρτιού και μολύβι, συμπεριλαμβανομένων των θεμάτων που αφορούν την ασφάλεια, την ψυχομετρική επεξεργασία και τη νομική ευπάθεια. Καινούρια ζητήματα προκύπτουν επίσης με τις δοκιμές βάσει υπολογιστή (CBT), ειδικά καθώς οι δοκιμές διανέμονται ευρύτερα μέσω του διαδικτύου. Αυτά τα θέματα περιλαμβάνουν αυξημένο κίνδυνο υποψίας υποψίας και υπερβολικής έκθεσης.
Για την αντιμετώπιση των συνεχιζόμενων προκλήσεων που παρουσιάζονται από τις δοκιμές γενικά καθώς και μερικά από τα νέα θέματα που αφορούν το CBT, οι οργανώσεις πρέπει να ακολουθήσουν τις τυποποιημένες διαδικασίες για την ανάπτυξη τεμαχίων και την ψυχομετρική επεξεργασία. Για παράδειγμα, η χρήση συγγραφέων πολλαπλών στοιχείων για την ανάπτυξη περιεχομένου δοκιμών είναι μια κοινή πρακτική, αλλά μπορεί να οδηγήσει σε διακύμανση του στυλ, της μορφής και της δυσκολίας του στοιχείου δοκιμής. Ένας οδηγός στυλ με πρότυπα και πρότυπα και κανόνες ανάπτυξης αντικειμένων μπορεί να προχωρήσει πολύ στη βελτίωση της συνέπειας, της μορφής και της ποικιλίας των στοιχείων. Επιπλέον, η κατάρτιση για την ανάπτυξη περιεχομένου μπορεί να εξασφαλίσει ότι οι συγγραφείς έχουν τα εργαλεία για την ανάπτυξη αξιόπιστων, αξιόπιστων αντικειμένων και προτύπων στοιχείων που μπορούν να χρησιμοποιηθούν για τη δημιουργία διαφορετικών παραλλαγών του ίδιου ερωτήματος, αυξάνοντας έτσι το μέγεθος της τράπεζας στοιχείων σε μικρότερο χρονικό διάστημα.
Η στατιστική αξιολόγηση των αντικειμένων δοκιμής στο πεδίο επιτρέπει στους οργανισμούς να λαμβάνουν ανατροφοδότηση σχετικά με τα επιδόματα συγκεκριμένων στοιχείων και τα γνωστικά επίπεδα. Αυτή η ευφυΐα επιτρέπει την αναθεώρηση των διαδικασιών ανάπτυξης αντικειμένων και την ανατροφοδότηση για συγκεκριμένους προγραμματιστές - βοηθώντας να προσδιορίσετε τι είναι αποτελεσματικό και πώς τα αντικείμενα παραδίδονται στον τομέα. Αυτό επιτρέπει επίσης στον οργανισμό να λαμβάνει αποφάσεις σχετικά με τη διατήρηση, την τροποποίηση και την ανάθεση των στοιχείων.
Κάθε οργάνωση που αναπτύσσει ή διαχειρίζεται δοκιμές θα πρέπει να έχει επίγνωση της διαδικασίας της ψυχομετρικής επεξεργασίας - η οποία περιλαμβάνει την αξιολόγηση των επιπέδων δυσκολίας των αντικειμένων και λαμβάνει υπόψη τα πράγματα όπως η γραμματική, η ευαισθησία και το στυλ. Τα ψυχομετρικά στοιχεία παρέχουν επίσης την ανασκόπηση της μορφής και της λειτουργίας του στοιχείου δοκιμής, όπως παράλληλες επιλογές, επαρκείς πληροφορίες για την απάντηση στο ερώτημα και το μήκος απάντησης.
Με τη σημασία που αποδίδεται στην αντικειμενικότητα, η ψυχομετρική επεξεργασία γίνεται καλύτερα από τους επαγγελματίες της εξέτασης δοκιμών, όχι από εμπειρογνώμονες του αντικειμένου ή συγγραφείς αντικειμένων. Τα άτομα που εκπαιδεύονται στην πολυπλοκότητα της ψυχομετρικής επεξεργασίας αξιολογούν τα στοιχεία σε ένα διαφορετικό, κρίσιμο φως από τους ειδικούς του αντικειμένου ή τους συγγραφείς στοιχείων. Είναι σημαντικό, ωστόσο, να επανεξετάσουμε και να εγκρίνουμε το τελικό, επεξεργασμένο θέμα από εμπειρογνώμονες του αντικειμένου στον κατάλληλο τομέα.
Τα στοιχεία που αναπτύσσονται για το CBT και το PPT πρέπει να είναι νομικά αξιόπιστα για να εξασφαλίσουν προστασία σε περίπτωση νομικής πρόκλησης. Για να διασφαλιστεί η νομική υπερασπιστία, οι οργανισμοί πρέπει να εφαρμόσουν μια τυποποιημένη διαδικασία για την ανάπτυξη αντικειμένων και την ψυχομετρική αναθεώρηση, όπως προαναφέρθηκε.
Η αξιολόγηση της νομικής ευπάθειας περιλαμβάνει μια κριτική εξέταση της εξέτασης, τόσο από άποψη περιεχομένου όσο και από ψυχομετρική άποψη, ώστε να διασφαλιστεί ότι η εξέταση αναπτύχθηκε σύμφωνα με το Πρότυπο Εκπαιδευτικών και Ψυχολογικών Δοκιμών . Τα δικαστήρια παραπέμπουν στα πρότυπα κατά την αξιολόγηση της αξιοπιστίας των εν λόγω εξετάσεων. Η νομική ευπάθεια μπορεί να επιτευχθεί μέσω διαφόρων μεθοδολογιών. Η πιο σημαντική πτυχή της αναπτυξιακής διαδικασίας είναι η παρακολούθηση και τεκμηρίωση τυποποιημένων μεθοδολογιών και η συμπερίληψη του κατάλληλου προσωπικού εξέλιξης της εξέτασης στη διαδικασία. Υπάρχουν πολλά διαφορετικά βήματα στη διαδικασία ανάπτυξης δοκιμών και διαφορετικές μεθοδολογίες που μπορούν να χρησιμοποιηθούν για κάθε βήμα. Για παράδειγμα, κατά τον προσδιορισμό της περικοπής για μια εξέταση, διαδικασίες όπως η τροποποιημένη Angoff ή η μέθοδος Bookmark μπορούν να χρησιμοποιηθούν για τον προσδιορισμό του κατάλληλου προτύπου για το πέρασμα. Κάθε μία από τις μεθόδους χρησιμοποιεί μια διαφορετική τεχνική για να καθορίσει τη ράβδο που πρέπει να φτάσει ένας υποψήφιος για να λάβει μια κατάσταση διέλευσης.
Για να μετριαστεί ο κίνδυνος υπερέκθεσης των στοιχείων, οι εταιρείες δοκιμών αναπτύσσουν μεγάλες τράπεζες στοιχείων δοκιμών από τις οποίες ανανεώνεται συστηματικά το περιεχόμενο των δοκιμών. Λαμβάνοντας το προβάδισμα από τους μεγάλους προγραμματιστές δοκιμών και τους διαχειριστές, οι οργανισμοί που διαχειρίζονται υπολογιστικές δοκιμές θα θελήσουν να εξετάσουν τη χρήση ανανεωμένων τραπεζών στοιχείων και την προγραμματισμένη ανανέωση στοιχείου δοκιμής, προκειμένου να διασφαλίσουν ότι οι υποψήφιοι δεν βλέπουν τα ίδια στοιχεία ή σχέδια, μειώνοντας γενικά την πιθανότητα συμμετοχής των υποψηφίων πληροφορίες.
Σε πολλά προγράμματα δοκιμών υψηλού σταδίου, οι διαχειριστές δοκιμών συλλέγουν και εξετάζουν τα ιατροδικαστικά δεδομένα για να μετρήσουν πόσο συχνά δοκιμάζονται οι υποψήφιοι σε συγκεκριμένα τεστ, ο μέσος χρόνος που δαπανούν οι υποψήφιοι για τα αντικείμενα και πώς οι απαντήσεις των υποψηφίων σε στοιχεία αλλάζουν με την πάροδο του χρόνου και την έκθεση. Αυτό εξασφαλίζει τη συνεχή προσαρμογή της διαδικασίας ανάπτυξης και του περιεχομένου για την εξασφάλιση της αξιοπιστίας, της νομιμότητας και της ασφάλειας.
Υπάρχουν επίσης διάφορες μεθοδολογίες που μπορούν να υλοποιηθούν με ανάλυση των υποψηφίων αποτελεσμάτων μετά την εξέταση. Ένας από τους τύπους αυτών των αναλύσεων είναι μια ανάλυση διαφορικού στοιχείου, η οποία αξιολογεί την απόδοση των ομάδων στα τεστ (οι ομάδες μπορούν να ορίζονται ανάλογα με το φύλο, την εθνικότητα ή άλλους παράγοντες). Τα στοιχεία που εκτελούν σημαντικά διαφορετικά μεταξύ των ομάδων υποψηφίων επανεκτιμώνται για τον προσδιορισμό της μελλοντικής χρήσης.
Ο πλήθος των παραγόντων που πρέπει να εξεταστούν κατά την ανάπτυξη περιεχομένου για δοκιμές με βάση τον υπολογιστή, προσδίδουν αξιοπιστία και ακεραιότητα στην ίδια τη διδασκαλία. Οι οργανώσεις που είναι σε θέση να σκεφτούν προσεκτικά το σχεδιασμό και την εφαρμογή των προγραμμάτων δοκιμών τους προληπτικά προχωρούν καλύτερα από τις οργανώσεις που μεταναστεύουν σε δοκιμές με βάση τον υπολογιστή σε μια βιασύνη. Μια προληπτική προσέγγιση που αφορά την ανάπτυξη στοιχείων και την επεξεργασία στοιχείων καθώς και τις παραμέτρους ασφάλειας και πληροφορικής εξυπηρετεί καλύτερα την οργάνωση σε μακρινές αποστάσεις, καθώς αυξάνει την εγκυρότητα της δοκιμής, την δικαιοσύνη των υποψηφίων και προσφέρει υψηλότερο επίπεδο προστασίας από νομικές προκλήσεις.
Επιστροφή στη σελίδα Δοκιμαστική απόδοση και Νομική ευπάθεια