Para preservar a segurança de um exame e garantir a longevidade e validade de suas credenciais, muitas das organizações com as quais trabalhamos na construção e manutenção de um programa de avaliação optam por proteger seus testes com testes baseados em banco. Os testes baseados em banco permitem que sua organização gere aleatoriamente e automaticamente um formulário de teste, uma estratégia que previne a trapaça, estende a vida útil dos itens do seu teste e mantém a integridade do seu banco de exames. Os principais tipos de testes baseados em banco incluem Teste Linear em Tempo Real (LOFT), LOFT com Testlets, Teste Adaptativo Computadorizado (CAT-FL, CAT-VL) e Teste de Maestria Computadorizado (CMT). Cada um desses tipos de banco tem suas vantagens e pode ser implementado para atender às necessidades específicas de seus planos de teste.
Teste Linear em Tempo Real (LOFT)
O que é LOFT? LOFT é a montagem de um formulário de teste no momento da avaliação, logo antes ou até mesmo durante a administração do teste, e é usado para gerar formulários comparáveis únicos para cada testando. LOFT requer que todos os itens sejam pré-testados e colocados em uma escala comum, e que o teste utilizando LOFT seja administrado por meio de testes computadorizados.
Principal Vantagem:
LOFT a nível de testlet é uma estratégia ideal quando o plano de teste é simples o suficiente para ser amostrado com um único testlet, ou quando o pool de itens do teste é grande o suficiente para criar múltiplos testlets paralelos. Além disso, o número de itens necessários para LOFT com testlets é menor do que o LOFT convencional, exigindo cerca de cinco formulários de teste completos em termos de itens. Isso confere ao LOFT a nível de testlet maior flexibilidade com avaliações que possuem pools de itens menores, enquanto ainda oferece segurança para proteger a integridade e longevidade de um exame.
Teste Adaptativo Computadorizado (CAT-FL, CAT-VL)
O que é CAT? Um teste adaptativo computadorizado é aquele que administra itens de teste próximos ao nível de habilidade de um testando, ajustando-se progressivamente às suas respostas à medida que o exame avança. O CAT é construído em torno de um algoritmo iterativo, proporcionando um nível substancial de variabilidade no formulário do teste entre os testes.
Principal Vantagem:
Como o CAT se adapta a cada testando, a segurança do formulário de teste e dos itens depende de suas respostas, o que significa que os formulários são altamente personalizados para as respostas e têm um alto nível de segurança, pois é difícil para potenciais trapaceiros prever quais itens receberão à medida que o teste avança. Isso também significa que o CAT pode gerar pontuações precisas com formulários de teste mais curtos, uma vez que a escala de habilidade é calibrada em cada item. Embora isso exija um pool de itens devidamente calibrado, é um método ideal de banco de exames para grandes públicos-alvo de testandos, pois a combinação de menos itens necessários para alcançar uma pontuação precisa e o tempo reduzido necessário para completar o exame geral apresenta uma economia significativa. Assim como a entrega de testes LOFT, o CAT deve ser administrado por meio de testes computadorizados.
Teste de Maestria Computadorizado (CMT)
O que é CMT? O Teste de Maestria Computadorizado proporciona um nível adicional de verificação além dos métodos de administração do CAT. O CAT pode apresentar erros de classificação em suas decisões de aprovação-reprovação, seja através de falsos positivos ou falsos negativos, o que significa que indivíduos são aprovados ou reprovados incorretamente com base em um número limitado de critérios de pontuação. O CMT permite que uma avaliação sirva “testlets intermediários” para indivíduos que não atendem aos critérios iniciais de aprovação-reprovação, proporcionando um cenário de teste mais aprofundado para a avaliação de um programa.
Principal Vantagem:
Uma das principais vantagens do CMT é a tolerância com a qual sua organização pode especificar o erro. Você decide o peso de cada decisão de aprovação/reprovação, se precisa haver um acompanhamento para explorar essa decisão e como pontuar as respostas subsequentes. Em resumo, o CMT permite uma compreensão contextual maior de respostas complexas na pontuação de um resultado de teste. Subsequentemente, uma segunda vantagem do CMT é que menos perguntas são necessárias para criar um pool de testlets do que no CAT convencional.
Pensamentos Finais
Cada uma das estratégias de banco de exames discutidas aqui pode fornecer ao seu programa de avaliação a segurança, flexibilidade e adaptabilidade necessárias para garantir a longevidade de seus exames. Com nossa experiência em construir avaliações para nossos clientes e a expertise psicométrica que fornecemos, criar um novo programa de avaliação ou expandir um exame existente é um processo simplificado. Pronto para aprender mais? Veja como você pode aproveitar as últimas capacidades em IA para aumentar seu banco de itens produzindo rapidamente itens a uma velocidade de até 10 vezes.
Saiba mais hoje!