Η Prometric έχει μεγάλη εμπειρία στη μετάβαση προγραμμάτων από την παράδοση σε χαρτί σε παραδόσεις με βάση τον υπολογιστή. Το τμήμα ανάπτυξης δοκιμών στελεχώνεται με ψυχομετρικούς παράγοντες που έχουν συμμετάσχει άμεσα στην έρευνα και την εφαρμογή μεθοδολογιών που συμβάλλουν στην εξασφάλιση ελάχιστης επίδρασης στην υποψήφια απόδοση κατά τη διάρκεια μιας τέτοιας μετάβασης.
Ερευνα
Δεδομένου ότι ο έλεγχος βάσει υπολογιστή (CBT) έχει καταστεί εξαιρετικά παραγωγικός τα τελευταία 10-15 χρόνια, ο όγκος της έρευνας στη βιομηχανία σχετικά με τη συγκρισιμότητα μεταξύ εξετάσεων με βάση το χαρτί και υπολογιστών έχει αυξηθεί σημαντικά. Όπως θα ήταν αναμενόμενο, τα ευρήματα της έρευνας που ήταν κοινά κατά την αρχική εισαγωγή των υπολογιστών στον πληθυσμό δοκιμών δεν είναι πλέον σχετικά με τους υποψήφιους πληθυσμούς που εισέρχονται στο περιβάλλον δοκιμών σήμερα. Καθώς οι υποψήφιοι πληθυσμοί έχουν εξελιχθεί στην έκθεση, την πρόσβαση και την εξοικείωσή τους με τους υπολογιστές, τα αποτελέσματα της εισαγωγής εξετάσεων με βάση υπολογιστή έχουν μειωθεί σημαντικά. Αυτό ισχύει για όλα τα υποψήφια τμήματα, καθώς η διαθεσιμότητα υπολογιστών έχει αυξηθεί εκθετικά σε όλες τις υποομάδες του πληθυσμού.
Συνοψίζοντας τα συμπεράσματα των πολλαπλών μελετών τα τελευταία 5-10 χρόνια (τα πιο πρόσφατα πραγματοποιήθηκαν το 1997), τα κυριότερα σημεία που εντοπίστηκαν στον ερευνητικό τομέα ως εξής:
- Τα μεγέθη των επιπτώσεων στις επιδόσεις των εξετάσεων για δοκιμές βασισμένες σε χαρτί και υπολογιστή βασίζονται γενικά στατιστικά ασήμαντα (p> 0,05), γεγονός που υποδηλώνει ότι δεν υπάρχουν ουσιαστικές διαφορές μεταξύ των δύο μεθοδολογιών δοκιμών.
- Ανάλυση διαφορικού στοιχείου Λειτουργικότητα (DIF) σε μεμονωμένα αντικείμενα που παραδίδονται σε χαρτί και βασίζεται σε υπολογιστή υποδηλώνουν χαρακτηριστικά ότι όταν οι τύποι στοιχείων συμβάλλουν και στις δύο μεθοδολογίες παράδοσης, η απόδοση σε στοιχεία και στα δύο κανάλια παράδοσης είναι συγκρίσιμη.
- Η σαφής επικοινωνία με την υποψήφια ομάδα σχετικά με την παράδοση εξετάσεων με υπολογιστή μπορεί να μειώσει περαιτέρω την πιθανότητα εμφάνισης του τρόπου παράδοσης στην τελική υποψήφια απόδοση.
- Η προετοιμασία και η πρακτική άσκηση σε προσομοιωμένο περιβάλλον δοκιμών (μέσω εξετάσεων πρακτικής και / ή διδακτικού υλικού πριν από τη δοκιμή σε πραγματικό χρόνο) μπορεί να μειώσει την ανησυχία των υποψήφιων επιδόσεων και να συμβάλει περαιτέρω σε ένα δίκαιο αποτέλεσμα των δοκιμών.
Εκτός από τη θεωρητική έρευνα που διατίθεται στο πλαίσιο της βιομηχανίας δοκιμών, η Prometric έχει επίσης πρακτική εμπειρία στην αξιολόγηση και σύγκριση των επιδόσεων των υποψηφίων σε πολλαπλά κανάλια παράδοσης. Με επιτυχία μετεγκαταστάσαμε έναν μεγάλο αριθμό πελατών από έναν τρόπο παράδοσης σε άλλο και αξιολογήσαμε σταθερά την απόδοση των υποψηφίων για να διασφαλίσουμε ότι όλοι οι υποψήφιοι έχουν δίκαιη ευκαιρία να εμφανίσουν τις γνώσεις τους (ανεξάρτητα από το χρησιμοποιούμενο κανάλι). Επιπλέον, η Prometric διαθέτει πολλούς πελάτες που χρησιμοποιούν μοντέλο διπλής παράδοσης (τόσο σε χαρτί όσο και σε υπολογιστή), γεγονός που επιτρέπει επίσης τη συνεχή παρακολούθηση της συγκρισιμότητας της απόδοσης των εξετάσεων και της επίδοσης των επιμέρους αντικειμένων στα πολλαπλά περιβάλλοντα δοκιμών. Τα ευρήματα της Prometric αντικατοπτρίζουν σταθερά αυτά που σημειώθηκαν παραπάνω από τη γενική δοκιμαστική κοινότητα και μπορέσαμε να αναπτύξουμε και να προωθήσουμε προσεγγίσεις που εξασφαλίζουν το επιθυμητό αποτέλεσμα.
Πρακτική
Κατά τη μετάβαση σε προγράμματα εξέτασης, υπάρχουν πολλά βήματα που πρέπει να ληφθούν υπόψη. Αν και υπάρχει μεγάλος αριθμός ατομικών καθηκόντων, οι κύριες δραστηριότητες περιλαμβάνουν τα εξής:
- Αξιολόγηση της τρέχουσας τράπεζας στοιχείων Μια αξιολόγηση της τρέχουσας τράπεζας ειδών με βάση το χαρτί γίνεται συνήθως στην αρχή του έργου για να διασφαλιστεί η δυνατότητα εφαρμογής σε ένα περιβάλλον υπολογιστή και να συγκεντρωθούν στατιστικά στοιχεία για τη μελλοντική αξιολόγηση.
- Τροποποίηση της παρουσίασης αντικειμένων Εάν είναι απαραίτητο, το Prometric κάνει συστάσεις για μεμονωμένες τροποποιήσεις αντικειμένων για να αυξήσει την πιθανότητα δίκαιης απόδοσης στη συνολική εξέταση σε περιβάλλον υπολογιστή.
- Προετοιμασία μιας προσπάθειας επικοινωνίας με τους υποψήφιους Προσωπικούς συνεργάτες με τους πελάτες ώστε να διασφαλιστεί ότι θα αναπτυχθεί μια κατάλληλη εκστρατεία επικοινωνίας για τον υποψήφιο πληθυσμό πριν από την εισαγωγή ενός νέου μοντέλου παράδοσης.
- Προετοιμάστε εξετάσεις δειγμάτων και / ή μαθήματαPrometric προετοιμάζει τις εξετάσεις πρακτικής και / ή τα μαθήματα που παρέχονται στον υποψήφιο πριν από μια ζωντανή εξέταση για να αυξήσει το επίπεδο άνεσης του υποψήφιου πληθυσμού με το μοντέλο δοκιμής παράδοσης.
- Εξετάσεις και ανάλυση αντικειμένων Χρησιμοποιώντας τα στοιχεία της βασικής γραμμής που συλλέχθηκαν στο βήμα # 2, η Prometric θα αξιολογήσει τις επιδόσεις των εξετάσεων και των επιπέδων στοιχείων για να εξασφαλίσει τη συγκρισιμότητα των επιδόσεων των υποψηφίων.
- Συνεχής παρακολούθηση και συντήρηση Η αξιολόγηση του μοντέλου παράδοσης δεν σταματά μετά την αρχική επιβεβαίωση της συγκρισιμότητας. Οι προμετρικοί ψυχομετρικοί θα παρακολουθούν συνεχώς την απόδοση των αντικειμένων και των εξετάσεων των USPS για να διασφαλίζουν ότι εκτελούν εντός αποδεκτών στατιστικών παραμέτρων και για να προβλέψουν τις μελλοντικές ανάγκες ανάπτυξης δοκιμών.
Η Prometric ενσωματώνει τις παραπάνω μεθοδολογίες στο πλαίσιο των διαδικασιών εξέλιξης και παράδοσης δοκιμών, προκειμένου να διασφαλίσει μια δίκαιη, έγκυρη και νομικά αξιόπιστη διαδικασία για όλους τους υποψηφίους. Η εμπειρία μας από την επιτυχή εφαρμογή εξετάσεων με υπολογιστή βασίζεται στις δοκιμασμένες διαδικασίες μας για την εξασφάλιση της ποιότητας του προϊόντος και των επιδόσεων καθ 'όλη τη διάρκεια του κύκλου ζωής των εξετάσεων.