Pesquisa
Histórias de Sucesso / CompTIA aproveita a Inteligência Artificial Finetune

CompTIA aproveita a IA da Finetune para escalar rapidamente sem sacrificar a qualidade

A CompTIA acelera o desenvolvimento da avaliação através da criação de itens de teste de alta qualidade com o Finetune AI, escalando seu programa de certificação global para atender às demandas da força de trabalho.

Shutterstock 2463474777

Contexto

A CompTIA é o principal provedor mundial de treinamento e certificações de TI neutras em relação a fornecedores. Em parceria com milhares de instituições, a CompTIA capacita os aprendizes com habilidades prontas para a carreira através de ferramentas de aprendizado de ponta, credenciais respeitadas e suporte profissional abrangente.

Para atender à crescente demanda global—particularmente para o exame A+—a CompTIA se associou à Prometric, aproveitando o Finetune AI para uma solução de IA personalizada. Essa parceria possibilitou um processo de criação de conteúdo mais rápido, mantendo a qualidade, rigor psicométrico e supervisão especializada—avançando a missão da CompTIA de fornecer credenciais eficientes e prontas para a carreira.

O Desafio

Com a demanda global em alta, a CompTIA precisava acelerar a criação de conteúdo em 16 programas principais. Certificações de alto volume como A+ representavam um desafio particular. Cada item precisava atender a rigorosos padrões psicométricos de equidade, confiabilidade e defensabilidade legal.

  • Manter a qualidade é muito lento
  • A inteligência artificial geral limita a propriedade intelectual
  • Os SMEs precisam ter mais controle

O modelo tradicional de desenvolvimento não conseguia acompanhar. Era minucioso, mas lento — muito lento para as necessidades em evolução da CompTIA. A equipe precisava de uma abordagem que preservasse o envolvimento dos SMEs, o rigor editorial e a propriedade intelectual completa, ao mesmo tempo que permitisse uma produção mais rápida.

Shutterstock 2325628103

"Modelos especializados são muito menos propensos a alucinações porque foram treinados para filtrá-las, nos dando apenas o que há de bom."

Wendy Gavin

Gestor de Produto Sénior, Finetune AI

Parceria Estratégica

A CompTIA lançou uma colaboração plurianual com a Finetune AI para aproveitar a inteligência artificial no desenvolvimento de itens. Juntos, criaram um modelo de IA específico de domínio Finetune Generate®.

Ao contrário de ferramentas de propósito geral como ChatGPT ou Copilot, a Finetune AI é o único modelo de IA personalizado e patenteado nos EUA, projetado para e por profissionais de avaliação, minimizando alucinações e alinhando-se a padrões editoriais rigorosos. A certificação A+ serviu como piloto devido ao seu conteúdo estruturado e alto volume de itens.

O projeto reuniu especialistas da Finetune AI, equipes de desenvolvimento de conteúdo da CompTIA e SMEs para treinar o modelo em blueprints proprietários, guias de estilo e objetivos. A IA apoiou—mas nunca substituiu—a autoria dos SMEs, permitindo uma redação e iteração mais rápidas.

Inovação com o Finetune Generate

A CompTIA incorporou o Finetune Generate® em um fluxo de trabalho híbrido projetado para escalar. O modelo foi treinado com base nos materiais proprietários da CompTIA, garantindo que as saídas estivessem alinhadas com o tom, estrutura e objetivos de aprendizagem. Os SMEs geralmente faziam poucas - se houvesse alguma - revisões nos rascunhos gerados pela IA.

A CompTIA manteve a propriedade total do conteúdo assistido por IA, mantendo o controle e a segurança. A ferramenta teve um desempenho excepcional nos objetivos dos Níveis 2 e 3 de Bloom - frequentes em certificações de nível básico como A+.

Benefícios Principais:

  • Treinamento de Modelo Personalizado
  • Rascunho Eficiente
  • IP Seguro
  • Ideal para Níveis Cognitivos Inferiores

"Usamos o Generate de uma maneira que resulta em claras vantagens na eficiência de QC."

- Danielle Castelli, Diretora, Desenvolvimento de Exames, CompTIA

Uma revisão psicométrica das versões dos exames A+ 1101 e 1102 validou a abordagem. Os SMEs produziram 5,7 itens por hora - um aumento em relação aos 3,3 anteriores - sendo que a maioria precisava de poucas edições. Os benchmarks psicométricos (dificuldade, discriminação, confiabilidade) permaneceram dentro das faixas esperadas, e os itens foram movidos com sucesso do pré-teste para o status de pontuação após os testes de campo.

"Trabalhando com [Prometric], conseguimos melhorar nosso programa de desenvolvimento de exames para tornar o processo mais eficiente de uma forma que tanto nossos desenvolvedores de testes quanto os SMEs se beneficiaram."

Danielle Castelli

Diretor, Desenvolvimento de Exames, CompTIA CompTIA

Resultado

Hoje, a CompTIA continua a usar o Finetune Generate® para certificações com demandas cognitivas estruturadas e de nível inferior, onde velocidade e escalabilidade são essenciais. Esse processo aprimorado por IA permite que os Especialistas em Assuntos do Domínio (SMEs) se concentrem na validação, em vez de nos primeiros rascunhos.

  • Produção Aumentada
  • Eficiência Editorial
  • Equivalência Estatística
  • Viabilidade de Conteúdo

Olhando para o futuro, a CompTIA está explorando casos de uso adicionais nos quais a IA focada e responsável pode oferecer valor semelhante em todo o seu portfólio de certificações, sempre com ênfase na qualidade e controle.

História de sucesso para download