Búsqueda
Historias de Éxito / CompTIA aprovecha Finetune AI

CompTIA aprovecha Finetune AI para escalar rápidamente sin sacrificar calidad.

CompTIA acelera el desarrollo de evaluaciones al crear elementos de prueba de alta calidad con Finetune AI, escalando su programa de certificación global para satisfacer las demandas laborales.

Shutterstock 2463474777

Antecedentes

CompTIA es el principal proveedor mundial de formación y certificaciones en tecnologías de la información independientes de los fabricantes. En asociación con miles de instituciones, CompTIA dota a los estudiantes de habilidades listas para el mercado laboral a través de herramientas de aprendizaje de alta calidad, credenciales respetadas y un completo apoyo profesional.

Para satisfacer la creciente demanda global, especialmente para su examen A+, CompTIA se asoció con Prometric, aprovechando Finetune AI para una solución de inteligencia artificial personalizada. Esta colaboración permitió un proceso de creación de contenido más rápido manteniendo la calidad, rigor psicométrico y supervisión experta, lo que contribuye a la misión de CompTIA de ofrecer credenciales eficientes y listas para la carrera profesional.

El Desafío

A medida que la demanda global aumentaba, CompTIA necesitaba acelerar la creación de contenido en 16 programas centrales. Certificaciones de alto volumen como A+ representaban un desafío particular. Cada elemento debía cumplir con rigurosos estándares psicométricos de equidad, confiabilidad y defensibilidad legal.

  • Mantener la calidad es demasiado lento
  • La inteligencia artificial general limita la propiedad intelectual
  • Los expertos en la materia necesitan tener más control

El modelo de desarrollo tradicional no podía mantener el ritmo. Era exhaustivo pero lento, demasiado lento para las necesidades en evolución de CompTIA. El equipo necesitaba un enfoque que preservara la participación de los expertos en la materia, el rigor editorial y la plena propiedad intelectual, al tiempo que permitiera una producción más rápida.

Shutterstock 2325628103

"Los modelos especializados son mucho menos propensos a tener alucinaciones porque han sido entrenados para filtrarlas, dándonos solo lo bueno."

Wendy Gavin

Gerente de Producto Senior, Finetune AI

Asociación Estratégica

CompTIA lanzó una colaboración de varios años con Finetune AI para aprovechar la inteligencia artificial en el desarrollo de ítems. Juntos, crearon un modelo de IA específico de dominio llamado Finetune Generate®.

A diferencia de herramientas de propósito general como ChatGPT o Copilot, Finetune AI es el único modelo de IA personalizado y patentado en los EE. UU. diseñado para y por profesionales de evaluación, minimizando alucinaciones y alineándose con estrictos estándares editoriales. La certificación A+ sirvió como piloto debido a su contenido estructurado y alto volumen de ítems.

El proyecto reunió a expertos en IA de Finetune, equipos de desarrollo de contenido de CompTIA y SME para entrenar el modelo en planos exclusivos, guías de estilo y objetivos. La IA apoyó, pero nunca reemplazó, la autoría de los SME, potenciando una redacción y una iteración más rápidas.

Innovando con Finetune Generate

CompTIA incorporó Finetune Generate® en un flujo de trabajo híbrido diseñado para escalar. El modelo fue entrenado con los materiales propietarios de CompTIA, asegurando que las salidas se alinearan con el tono, estructura y objetivos de aprendizaje. A menudo, los expertos en la materia hicieron pocas, si es que hicieron alguna, revisión a los borradores generados por inteligencia artificial.

CompTIA retuvo la propiedad total del contenido asistido por IA, manteniendo el control y la seguridad. La herramienta tuvo un rendimiento excepcional en los objetivos de los niveles 2 y 3 de Bloom, frecuentes en certificaciones de nivel inicial como A+.

Beneficios Clave:

  • Entrenamiento de Modelo Personalizado
  • Redacción Eficiente
  • Propiedad Intelectual Segura
  • Ideal para Niveles Cognitivos Bajos

“Utilizamos Generate de una manera que resulta en claras ventajas en eficiencia de control de calidad.”

- Danielle Castelli, Directora de Desarrollo de Exámenes, CompTIA

Una revisión psicométrica de las versiones 1101 y 1102 del examen A+ validó el enfoque. Los expertos en la materia produjeron 5.7 elementos por hora, en comparación con los 3.3 anteriores, y la mayoría necesitaban ediciones mínimas. Los puntos de referencia psicométricos (dificultad, discriminación, confiabilidad) se mantuvieron dentro de los rangos esperados, y los elementos se movieron con éxito de la prueba previa al estado puntuado después de las pruebas de campo.

"Trabajando con [Prometric], hemos podido mejorar nuestro programa de desarrollo de exámenes para hacer el proceso más eficiente de una manera que tanto nuestros desarrolladores de pruebas como los expertos en la materia se han beneficiado."

Danielle Castelli Danielle Castelli

Director, Desarrollo de Exámenes, CompTIA CompTIA

Resultado

Hoy en día, CompTIA continúa utilizando Finetune Generate® para certificaciones con demandas cognitivas estructuradas de nivel inferior, donde la velocidad y la escalabilidad son clave. Este proceso mejorado con inteligencia artificial permite a los expertos en la materia concentrarse en la validación en lugar de en los primeros borradores.

  • Mayor Producción
  • Efficiencia Editorial
  • Equivalencia Estadística
  • Viabilidad del Contenido

Mirando hacia el futuro, CompTIA está explorando casos de uso adicionales donde la inteligencia artificial enfocada y responsable puede ofrecer un valor similar en todo su portafolio de certificaciones, siempre con un énfasis en la calidad y el control.

Descargar Historia de Éxito