Pesquisa
Histórias de Sucesso / SOA Inova para Testar Configurações do Mundo Real

SOA Melhora o Desenvolvimento de Itens com Novas Soluções Inovadoras

A Sociedade de Atuários (SOA) precisava medir a competência em análise preditiva, então ela se associou à Prometric para desenvolver itens inovadores que medem o conhecimento em configurações do mundo real.

Innovative Item Development Revolutionizing predictive analytics and actuary testing

Contexto

A Sociedade dos Atuários (SOA) é a maior organização profissional atuarial do mundo, com mais de 30.000 membros. Através da educação e pesquisa, a SOA promove os atuários como líderes na medição e gestão de riscos para melhorar os resultados financeiros de indivíduos, organizações e do público em geral. Em 2017, a SOA buscou aprimorar seus esforços educacionais em todas as etapas do ciclo de credenciamento (da pré-qualificação ao desenvolvimento profissional) ao adicionar mais conteúdo sobre análise preditiva. Enquanto conseguiram avançar rapidamente no desenvolvimento profissional, a adição de análise preditiva à sua educação de pré-qualificação fazia parte de um projeto de reestruturação mais amplo para o currículo de associado (ASA).

Situação

Reconhecendo a crescente necessidade de avaliar candidatos de uma forma que reflita como eles executam suas funções diárias e sabendo que o tópico não se adequava aos métodos de exame tradicionais, SOA precisava de uma maneira de incorporar ferramentas de software usadas por atuários ao realizar análises preditivas, incluindo Word, Excel e R/RStudio. Além disso, o exame precisava ser supervisionado e concluído em uma área segura para medir da melhor forma possível o conhecimento dos candidatos sobre o material e abordagens de modelagem preditiva.

No entanto, desenvolver esse tipo de item inovador exigiria superar vários obstáculos, incluindo questões de licenciamento para produtos do Word e Excel, disponibilidade de centros de testes para evitar sobrecarregar os candidatos e protocolos de segurança adequados para garantir a eficácia do exame.

Estratégia

Sabendo que precisavam de um parceiro de desenvolvimento de testes com solução de licenciamento de software, uma rede estabelecida de centros de testes globais, procedimentos de segurança comprovados e disposição para avançar no desenvolvimento de exames, a SOA lançou um RFP especificamente para esta iniciativa. Alavancando nossa relação de mais de 10 anos e nossa capacidade de atender a todos os requisitos da SOA delineados no processo de licitação competitiva, a Prometric foi escolhida pela SOA para desenvolver um item inovador que melhor testaria e capturaria a capacidade de um atuário de realizar análises preditivas.

Juntas, Prometric e SOA começaram a colaborar no desenvolvimento do tipo de item de análise preditiva, com a Prometric desenvolvendo uma solução que integrasse as três ferramentas desejadas na avaliação. O item inovador, administrado duas vezes por ano, requer:

  • Candidatos para completar 10-12 tarefas ao longo de 5+ horas via respostas construídas.
  • Os candidatos a testes para demonstrar sua capacidade de trabalhar em cada tarefa fornecendo arquivos e documentos de apoio via Word e R/RStudio, com Excel disponível se necessário.
  • Avaliação humana realizada pela SOA.

A Prometric também trabalhou em estreita colaboração com a SOA para desenvolver uma demonstração online para ajudar os candidatos a entender como navegar no exame antecipadamente.

A partir daí, a Prometric e a SOA avançaram com uma instalação segura do software em toda a rede global de centros de testes. Um piloto foi realizado com especialistas em conteúdo (SMEs) em várias localidades ao redor do mundo, com equipe da SOA e da Prometric presentes para garantir um lançamento bem-sucedido.

"O desenvolvimento e lançamento deste tipo de item é um grande avanço para os candidatos atuariais da Sociedade de Atuários. Isso permite que os candidatos demonstrem proficiência em áreas críticas usando ferramentas comuns no local de trabalho. O desenvolvimento deste tipo de item exigiu esforços inovadores de uma equipe de desenvolvimento conjunta SOA-Prometric. A SOA está ansiosamente aguardando a adaptação deste conceito para outros componentes do nosso caminho de credenciamento."

Diretor de Educação da Sociedade de Atuários.

Resultado

Com a tecnologia da Prometric e a disposição para combinar vários aspectos de teste e suporte tecnológico e a flexibilidade da SOA em reformular o tipo de item e resolver rapidamente os problemas que surgiram, após um ano de desenvolvimento e o lançamento piloto para SME, o primeiro teste real foi administrado aos candidatos em dezembro de 2018.

O novo tipo de item permitiu uma análise de dados em um nível mais elevado, ao mesmo tempo que serve como um diferenciador em relação à concorrência. Não apenas a SOA foi a primeira na indústria atuarial a fornecer esse tipo de teste do mundo real, eles também têm direitos exclusivos sobre o design exclusivo do teste.

Em 2019, a SOA e a Prometric decidiram renovar a parceria em curso por mais sete anos; durante este tempo, continuaremos trabalhando juntos para construir sobre o sucesso do tipo de item inovador e encontrar maneiras de diferenciar e fortalecer a SOA e seus exames.

História de Sucesso para Download

Avance seu programa de avaliação com as soluções da Prometric.

Parceria Conosco