디지털 콘텐츠 리더, AI로 시험 항목 제작 혁신

200개에 가까운 시험과 18,000개 이상의 항목으로 인해 전통적인 시험 제작 방법이 성장의 장애물이 되었습니다. 새로운 AI 기술은 더 큰 용량과 상당한 비용 절감을 가능하게 했습니다.

Shutterstock 417879736

배경

디지털 혁신의 선구자인 이 업계 리더는 전 세계 콘텐츠 제작자와 개발자의 역동적인 요구를 충족하기 위해 지속적으로 발전해 왔습니다. 소프트웨어 회사로 시작하여 디지털 콘텐츠 도구의 주요 공급자가 되기까지, 혁신과 적응에 대한 헌신을 embodied하고 있습니다.

도전 과제

조직의 제품 포트폴리오가 확장되고 디지털 영역에서의 영향력이 커짐에 따라 인증 프로그램에 대한 수요도 증가했습니다. 2018년 이후, 이 회사는 이러한 수요에 부응하기 위해 인증 제공을 5배 이상 확장했습니다. 170개 이상의 시험과 18,000개 이상의 항목으로, 시험 개발의 궤적을 유지하는 것은 거의 불가능해졌습니다.

이러한 빠른 확장은 여러 가지 도전 과제를 제시했습니다:

  • 팀에 과도한 부담을 주지 않고 시험 내용을 업데이트할 수 있는 보다 민첩하고 비용 효율적인 솔루션의 필요성.
  • 증가하는 사이버 보안 위협에 대응하기 위한 보안 강화 조치.
  • 모의 시험 및 재인증 프로그램을 지원하기 위한 추가 시험 항목에 대한 수요.

강력한 솔루션의 필요성을 인식한 조직은 협업, 혁신 및 특정 목표 달성을 위한 헌신으로 이러한 노력을 지원할 수 있는 파트너를 찾았습니다:

  • 독창적이고 안전한 항목으로 항목 은행 개발 강화.
  • 모의 시험 자료를 지원하기 위한 더 많은 시험 양식을 생산할 수 있는 능력.
  • AI 기술을 통합하기 위한 프로세스 수립.

파트너십 전략

2022년 말, 조직은 AI 강화 시험 개발 솔루션을 전문으로 하는 Finetune by Prometric과 전략적 파트너십을 형성하여 이러한 도전 과제에 대응했습니다. 그들은 특허받은 Finetune Generate®를 구현하여 인증 프로그램을 혁신하기 위해 함께 나섰습니다. 이는 고급 AI와 전문가 주제 전문가(SME) 검토를 결합한 AI 하이브리드 항목 생성 솔루션입니다.

팀은 Finetune Generate를 조직의 고유한 요구에 맞게 조정하기 위해 협력했으며, 이 솔루션이 모든 중요한 요구 사항을 충족한다는 것을 발견했습니다.

보안은 주요 관심사였으므로 Finetune Generate의 사용자 정의 가능한 접근 제어 기능을 통해 회사는 통제된 환경에서 자체 질문, 항목 참조, 시험 청사진, 인지 수준 설명 및 항목 작성 규칙으로 모델을 훈련할 수 있었습니다. 이 접근 방식은 외부 간섭으로부터 보호하여 플랫폼 내에서 생성된 콘텐츠에 대한 완전한 소유권을 조직에 부여하여 보안에 대한 완전한 신뢰를 보장했습니다.

구현 프로세스

파트너십은 네 단계의 구현 접근 방식을 따르며, SME와 항목 개발 워크숍의 피드백을 통해 모델을 지속적으로 개선했습니다. Prometric의 항목 개발 전문성과 회사의 도메인 전문성을 활용하여 팀은 AI 모델을 미세 조정하여 심리 측정적으로 유효한 항목을 보장했습니다.

그 결과, 파트너십은 항목 개발을 지원하기 위해 26개의 새로운 AI 모델을 생성하여 항목당 생성 시간을 90분에서 30분으로 단축시켰습니다. 이는 개발 시간을 67% 단축한 것입니다. 조직은 도구가 개선됨에 따라 추가적인 향상을 기대하고 있습니다.

 

"이 단계에서 마법이 정말로 일어납니다. 모든 콘텐츠가 Prometric에 전달되고, 그들이 모델을 구축하기 시작합니다. 훌륭한 AI 및 데이터 과학자 팀이 모든 것을 태그하고 우리의 필요에 따라 모델을 구축합니다."

- 수석 매니저 시험 및 콘텐츠 개발

결과

Prometric과의 협업을 통해 회사는 독특한 시험 콘텐츠 생성 속도를 높이고 최신 산업 표준 및 제품 업데이트에 맞게 조정할 수 있었습니다. Generate의 AI 기술을 통해 조직은 항목 개발에 보다 민첩한 접근 방식을 채택하여 산업 발전에 빠르게 적응할 수 있게 되었습니다.

이 혁신적인 접근 방식은 재인증 시험, 모의 시험 및 과정 종료 평가를 포함한 전체 인증 생태계에 걸쳐 확장되었습니다. 이는 모든 참가자에게 고품질의 일관된 경험을 보장하면서 프로그램의 진화하는 요구를 충족했습니다.

Prometric의 AI 기반 Finetune Generate를 통해 달성한 목표:

  1. 시장 출시 시간 최적화: 인증 시험의 개발 및 출시 주기를 가속화하여 산업 표준을 충족하는 적시 업데이트를 가능하게 했습니다.
  2. 비용 절감: AI 기술의 도입으로 항목당 60% 이상의 비용 절감이 이루어져 프로세스가 더 효율적이 되었습니다.
  3. 전문성의 효율적 활용: 항목 생성 시간을 67% 단축함으로써 회사는 SME 자원을 효과적으로 최적화했습니다.

"AI에 대한 우리의 투자는 프로그램의 규모와 복잡성을 처리하는 데 필수적입니다. Finetune Generate가 없다면 이 수준의 시험 개발을 유지하는 것은 관리할 수 없을 것입니다."

- 디지털 인증 프로그램 글로벌 책임자

Finetune by Prometric와 함께 조직은 효율적이고 안전한 시험 개발에서 장애물을 제거할 수 있는 전략적 파트너를 찾았습니다. AI의 통합은 항목 생성을 수동 프로세스에서 시간과 비용을 절감하는 작업으로 변화시켜 생산성을 향상시키고 추가 확장을 가능하게 했습니다.

AI 시스템이 추가 데이터와 함께 계속 개선됨에 따라, 조직은 인증 분야에서 경쟁 우위를 확보했습니다. Finetune의 안전하고 강력한 항목 생성 능력은 자원을 최적화하고 상당한 시간 및 비용 절감을 입증하는 데 도움이 되었습니다. 이러한 성공을 바탕으로 Generate를 더 많은 제공 및 과정에 통합할 계획이 진행 중입니다.

디지털 인증 프로그램 글로벌 책임자는 Finetune 시스템이 더욱 발전함에 따라 추가 비용 절감을 기대하고 있습니다. “AI의 잠재력을 수용합시다.”라고 그는 결론지었습니다.

다운로드 성공 사례