Líder en contenido digital transforma la creación de ítems de examen con inteligencia artificial.

Con casi 200 exámenes y más de 18,000 elementos, los métodos tradicionales de creación de exámenes se convirtieron en un obstáculo para el crecimiento. Las nuevas tecnologías de inteligencia artificial permitieron una mayor capacidad y ahorros significativos de costos.

Shutterstock 417879736

Antecedentes

Un pionero en innovación digital, este líder de la industria ha evolucionado continuamente para satisfacer las cambiantes necesidades de creadores de contenido y desarrolladores en todo el mundo. Desde sus inicios como empresa de software hasta convertirse en uno de los principales proveedores de herramientas de contenido digital, encarna un compromiso con la innovación y la adaptabilidad.

El Desafío

A medida que el portafolio de productos de la organización se expandió y su influencia en el ámbito digital creció, también lo hizo la demanda de programas de certificación. Desde 2018, la empresa ha escalado sus ofertas de certificación más de cinco veces para mantenerse al día con esta demanda. Con más de 170 exámenes y más de 18,000 elementos, mantener la trayectoria del desarrollo de exámenes se volvió casi imposible.

Esta rápida expansión presentó varios desafíos, como:

  • La necesidad de una solución más ágil y rentable para actualizar el contenido de los exámenes sin sobrecargar a los equipos.
  • Medidas de seguridad mejoradas para hacer frente a las crecientes amenazas cibernéticas.
  • La demanda de elementos adicionales de examen para respaldar pruebas prácticas y programas de recertificación.

Reconociendo la necesidad de una solución sólida, la organización buscó un socio que pudiera apoyar estos esfuerzos con un compromiso con la colaboración, la innovación y el logro de objetivos específicos:

  • Desarrollo de un banco de elementos mejorado con elementos originales y seguros.
  • La capacidad de producir más formas de examen para respaldar material de pruebas prácticas.
  • Establecer un proceso para incorporar tecnología de IA.

Evaluamos muchas plataformas y soluciones para desarrollar elementos de examen y elegimos Finetune de Prometric. Todo se redujo a cómo el sistema puede ser entrenado basado en nuestros parámetros en lugar de genéricos.

Jefe Global del Programa de Certificación Digita

Estrategia de colaboración

A finales de 2022, la organización respondió a estos desafíos formando una asociación estratégica con Finetune by Prometric, una empresa especializada en soluciones de desarrollo de pruebas mejoradas con IA. Juntos, se propusieron revolucionar el programa de certificación implementando Finetune Generate®, una solución de generación de elementos híbridos de IA patentada que combina IA avanzada con la revisión de expertos en la materia.

Los equipos colaboraron para adaptar Finetune Generate a las necesidades únicas de la organización y descubrieron que la solución cumplía con todos los requisitos críticos.

La seguridad fue una preocupación primordial, por lo que las capacidades personalizables y controladas por acceso de Finetune Generate permitieron a la empresa entrenar al modelo con sus propias preguntas, referencias de elementos, esquemas de exámenes, descripciones de nivel cognitivo y reglas de redacción de elementos en un entorno controlado, protegiéndose contra interferencias externas. Este enfoque otorgó a la organización la propiedad completa del contenido creado en la plataforma, asegurando una confianza total en la seguridad.

El Proceso de Implementación

La asociación siguió un enfoque de implementación de cuatro pasos, refinando continuamente el modelo con la retroalimentación de las PYMES y talleres de desarrollo de elementos. Aprovechando la experiencia de Prometric en el desarrollo de elementos y la experiencia en el dominio de la empresa, el equipo ajustó el modelo de IA, asegurando elementos psicométricamente válidos.

Como resultado, la asociación produjo 26 nuevos modelos de IA para respaldar el desarrollo de elementos, reduciendo el tiempo de creación de elementos de 90 minutos a 30 minutos por elemento, una disminución del 67% en el tiempo de desarrollo. La organización espera mejoras adicionales a medida que la herramienta se perfecciona.

"Este paso es donde realmente ocurre la magia. Todo el contenido se entrega a Prometric, y comienzan a construir el modelo. Un gran equipo de científicos de IA y datos etiqueta todo y construye el modelo según nuestras necesidades."

- Gerente Senior de Examen y Desarrollo de Contenidos

"Nuestra inversión en inteligencia artificial es crucial para manejar la escala y complejidad de nuestros programas. Sin Finetune Generate, mantener este nivel de desarrollo de exámenes sería inmanejable."

Jefe Global del Programa de Certificación Digita

Resultado

Colaborar con Prometric permitió a la empresa acelerar la creación de contenido de exámenes único, asegurando al mismo tiempo el alineamiento con las últimas normas de la industria y actualizaciones de productos. A través de la tecnología de IA de Generate, la organización adoptó un enfoque más ágil para el desarrollo de ítems, lo que permitió una rápida adaptación a los avances de la industria.

Este enfoque innovador se extendió por todo el ecosistema de certificación, incluyendo exámenes de recertificación, exámenes de práctica y evaluaciones al final del curso. Esto garantizó una experiencia consistente de alta calidad para todos los participantes, abordando las necesidades en evolución del programa.

Metas Logradas a Través de Finetune Generate de Prometric con IA:

  1. Tiempo al Mercado Optimizado: Ciclos de desarrollo y lanzamiento acelerados para exámenes de certificación, permitiendo actualizaciones oportunas para cumplir con las normas de la industria.
  2. Ahorros de Costos: La adopción de la tecnología de IA condujo a más del 60% de ahorro de costos por ítem, haciendo el proceso más eficiente.
  3. Utilización Eficiente de la Experiencia: Al reducir el tiempo de creación de ítems en un 67%, la empresa optimizó eficazmente los recursos de los expertos.

Con Finetune de Prometric, la organización encontró un socio estratégico capaz de eliminar obstáculos en el desarrollo eficiente y seguro de exámenes. La integración de la IA transformó la creación de ítems de un proceso manual en una operación que ahorra tiempo y costos, mejorando la productividad y permitiendo una mayor expansión.

A medida que el sistema de IA continúa mejorando con datos adicionales, la organización ha logrado una ventaja competitiva en el espacio de certificación. La capacidad de Finetune para generar ítems seguros y robustos ha ayudado a optimizar los recursos y ha demostrado ahorros significativos de tiempo y costos. Con este éxito, se están planificando integraciones de Generate en más ofertas y cursos.

El Jefe Global del Programa de Certificación Digital anticipa más reducciones de costos a medida que el sistema Finetune se vuelva más avanzado. "Aprovechemos el potencial de la IA", concluyó.

Descargar Historia de Éxito