Ya sea que un examen esté basado en computadora o en papel, los desafíos relacionados con su desarrollo, incluida la seguridad, la edición o revisión psicométrica y la defensa legal, siguen siendo los mismos. Además de estos problemas de "vejez", los exámenes informáticos o basados en Internet, dado que se entregan más ampliamente, brindan una capa adicional de riesgo, especialmente con respecto a la seguridad de los exámenes.
Para abordar los desafíos de pruebas en curso y nuevos, las organizaciones están bien atendidas siguiendo un conjunto estándar de procesos para el desarrollo de elementos de prueba y la edición psicométrica. Por ejemplo, muchas organizaciones usan múltiples escritores de elementos para desarrollar el contenido del examen. Si bien esta es una práctica común, puede provocar variaciones en el estilo, el formato o la dificultad del elemento de prueba. Una guía de estilo con plantillas y normas y normas de desarrollo de elementos puede ser muy útil para mejorar la consistencia, el formato y la variedad de elementos. Además, la capacitación en desarrollo de contenido puede garantizar que los escritores tengan las herramientas para desarrollar elementos y plantillas de elementos creíbles y defendibles que se puedan usar para crear diferentes variaciones de la misma pregunta, aumentando así el tamaño del banco de elementos en un período de tiempo más corto.
La evaluación estadística de los ítems de prueba en el campo es crítica para obtener retroalimentación sobre el desempeño del ítem específico, niveles de exposición, patrones de respuesta y niveles cognitivos. Esta inteligencia permite la revisión de los procesos de desarrollo de elementos y la retroalimentación para desarrolladores de elementos de prueba específicos, lo que ayuda a determinar qué es efectivo y cómo funcionan los elementos en el campo. Esto también permite a la organización tomar decisiones sobre la retención, modificación y asignación de elementos. Las mediciones relacionadas con el uso y la exposición son útiles para determinar cuándo es necesario actualizar los bancos de artículos o crear nuevos artículos por completo.
Cualquier organización que desarrolle o administre pruebas debe ser consciente del proceso de edición psicométrica que incluye la evaluación de los niveles de dificultad de los ítems y toma en cuenta cosas como la gramática, la sensibilidad y el estilo. La psicometría también proporciona la revisión de la forma y la función del elemento de prueba, como las opciones paralelas, información suficiente para responder la pregunta y la longitud de la respuesta.
La objetividad en el desarrollo de ítems y pruebas es extremadamente importante, y como tal, la edición psicométrica es mejor realizada por profesionales de desarrollo de pruebas, no por expertos en la materia o escritores de ítems. Las personas capacitadas en la complejidad de la edición psicométrica evalúan los artículos bajo una luz diferente y más crítica que los expertos en la materia o los escritores de artículos. Eso no significa que los expertos en la materia no sean parte integral del proceso; de lo contrario. Es importante que los expertos en la materia revisen y aprueben el artículo final editado en el campo correspondiente.
Los elementos desarrollados para cualquier forma de prueba deben ser legalmente defendibles para garantizar que la organización esté protegida en caso de un desafío legal. La implementación de un proceso estándar para el desarrollo de ítems y la revisión psicométrica, como se discutió anteriormente, puede maximizar la capacidad de defensa de una organización.
La evaluación de la defensa legal incluye una revisión crítica del examen, tanto desde una perspectiva de contenido como psicométrica, para garantizar que el examen se desarrolló de acuerdo con el Estándar para Pruebas Educativas y Psicológicas. Los tribunales difieren de las Normas cuando evalúan la credibilidad del examen en cuestión. La defensa legal se puede lograr a través de varias metodologías. El aspecto más importante del proceso de desarrollo es seguir y documentar metodologías estandarizadas e incluir personal de desarrollo de pruebas apropiado en el proceso. Hay muchos pasos diferentes en el proceso de desarrollo de pruebas y diferentes metodologías que se pueden utilizar para cada paso. Por ejemplo, al determinar el puntaje de corte para un examen, se pueden usar procesos como el Angoff modificado o el Método de marcador para determinar el estándar apropiado para aprobar. Cada uno de los métodos utiliza una técnica diferente para determinar la barra que debe alcanzar un candidato para recibir un estado de aprobación.
El desarrollo de grandes bancos de elementos de prueba a partir de los cuales el contenido de prueba se actualiza rutinariamente también mitiga el riesgo de sobreexposición de elementos para las empresas de prueba. Tomando el liderazgo de los grandes desarrolladores y administradores de pruebas, las organizaciones que administran pruebas basadas en computadora o pruebas basadas en Internet querrán considerar el uso de bancos de elementos ampliados y la actualización programada de elementos de prueba para garantizar que los candidatos no vean los mismos elementos o diseños, generalmente disminuyendo probabilidad de que los candidatos compartan información o reconozcan preguntas utilizadas anteriormente durante una nueva prueba.
En muchos programas de pruebas de alto riesgo, los administradores de pruebas recopilan y examinan datos forenses para medir con qué frecuencia los candidatos a pruebas están expuestos a elementos de prueba particulares, el tiempo promedio que los candidatos pasan en los elementos y cómo las respuestas de los candidatos a los elementos cambian con el tiempo y la exposición. Esto asegura el ajuste continuo del proceso de desarrollo del artículo y el contenido para garantizar credibilidad, legalidad y seguridad.
La multitud de factores a considerar durante el desarrollo de la prueba le otorga credibilidad e integridad al examen en sí. Las organizaciones capaces de considerar cuidadosamente el diseño y la implementación de sus programas de prueba se desempeñan mejor de manera proactiva que las organizaciones que no realizan la debida diligencia y publican los exámenes rápidamente. Un enfoque proactivo que tenga en cuenta el desarrollo de elementos y los recursos de edición, así como los parámetros de seguridad y TI, sirve mejor a la organización a largo plazo, ya que aumenta la validez de la prueba, la imparcialidad del candidato y ofrece un mayor nivel de protección contra desafíos legales.
Muchas de las soluciones de banca de artículos de la "próxima generación" realizan todas estas funciones y más, tomando los componentes críticos del desarrollo de pruebas y facilitando su aplicación. El uso de una poderosa herramienta de banco de artículos de "próxima generación" puede transformar todo el ciclo de vida de desarrollo de pruebas. Las herramientas de banca de artículos pueden optimizar la forma en que se desarrollan los artículos, cambiar la forma en que se mantienen los programas de prueba, evolucionar el proceso de control de calidad, actualizar la seguridad de los artículos, reunir e integrar múltiples aspectos de los artículos, mejorar la calidad de los grupos de artículos y facilitar la administración general de los programas de prueba . Crear una prueba sólida, válida y efectiva nunca ha sido tan fácil.
Regresar a la página de Eficiencia de prueba y Defensibilidad legal