법적 도전에 맞서
온라인 테스트를 개발하고 관리하는 조직은 테스트 항목 개발이 단순히 질문을 작성하는 것 이상이라는 것을 이해해야합니다. 응시자와 테스트 조직을 모두 보호하려면 온라인 테스트 항목이 법적 문제를 견뎌 낼 수 있어야합니다. 법적으로 방어 할 수있는 시험은 모든 응시자에게 지식을 표시 할 수있는 동등한 기회를 제공하고 인종, 피부색, 출신 국가, 성별, 종교 또는 보호 된 장애에 근거한 그룹을 차별하지 않는 시험입니다.
그러나 조직은 온라인 테스트가 법적으로 방어 가능한지 어떻게 확인할 수 있습니까? 항목 개발의 여러 모범 사례를 테스트 프로그램에 통합하면 테스트 항목이 풀의 모든 후보자에 대한 지식, 기술 및 능력을 정확하고 공정하게 측정 할 수 있습니다.
가장 먼저, 테스트 항목 개발을위한 표준 프로세스를 따르는 것이 온라인 테스트 항목의 법적 방어에 필수적입니다. 이 프로세스에는 모든 항목 작성자를위한 표준화 된 교육과 엄격한 항목 검토 및 승인 프로세스가 포함되어야합니다. 검토 프로세스에는 민감도, 스타일, 정확성,인지 수준 및 모든 테스트 항목의 전체 구조와 같은 항목의 평가가 포함됩니다. 표준화 된 검토 프로세스의 일부는 주제 전문가가 수행하고 일부는 심리학자 및 테스트 개발 전문가가 수행합니다. 심리 측정 및 테스트 개발 검토의 초점은 객관성이므로 주제 전문가 또는 항목 작성자 만이 아니라 테스트 개발 전문가가 수행하는 것이 가장 좋습니다. 주제 전문가 또는 항목 작성자와 다른, 더 중요한 관점에서 항목의 심리 평가의 복잡성에 대해 훈련을받은 개인은 테스트 항목의 객관성을 보장하는 데 더 효과적입니다.
둘째, 조직은 지속적인 데이터 수집 및 테스트 결과 분석을 통해 온라인 테스트의 법적 방어력을 향상시킬 수 있습니다. 메트릭을 사용하여 현장에서 온라인 테스트 항목의 성능을 평가하고 테스트 응답 패턴을 결정하면 어느 그룹도 전체적으로 질문에 다르게 응답하지 않을 수 있습니다.
품목 응답 데이터 (후보자가 품목에 응답하는 방법)를 분석하면 품목 내의 용어 또는 설명이 후보 모집단의 특정 부분에 부적합한지를 식별 할 수 있습니다. 놀랍게도 시험 항목에서 몇 단어 만 수정하면 응시자 성능에 상당한 영향을 줄 수 있습니다. 예를 들어, 특정 라이센스 시험을 위해 아이템을 개발할 때 특정 아이템 작성자가 "훔치기"대신 "필퍼"라는 단어를 사용하는 것을 발견했습니다. "pilfer"라는 단어는 테스트중인 라이센스 영역에 의미가 없으며 "steal"이라는 단어는 다양한 인종 및 사회 경제적 그룹에서 알려진 일반적인 단어이므로 한 단어가 전체 테스트에 대해 더 유효한 항목을 만들었습니다. 인구. 사후 관리 분석을 통해 변경 사항이 더 평등 한 항목 성능을 생성했음을 확인했습니다.
마지막으로, 테스트 프로그램의 지속적인 개발 및 평가에 대한 서면 기록은 법적 문제의 경우 보호 역할을 할 수 있습니다. 테스트 개발 프로세스는 문서화 된 경우에만 유효합니다. 문서에는 항목 작성 과제의 기반이되는 직무 분석과 항목 개발 및 검토주기에 관련된 주제 전문가 및 테스트 개발 직원의 자격이 포함되어야합니다. 항목 및 시험 수준 데이터는 표준 설정 정보 및 관련 채점 방법과 함께 평가 후 저장해야합니다.
법정에서 이의를 제기 한 시험에 대한 검토를 수행 할 때 항상 법적 이의에 대해 성공적인 "최상의"시험이 아니라는 것이 명백해집니다. 법적인 문제에 견딜 수있는 시험은 일반적으로 업계에서 인정 된 표준화 된 시험 개발 관행에 따라 진행된 시험입니다. 절차와 문서가 없으면, 잘 수행되는 시험조차도 법원에 깊은 인상을 줄 수 있습니다.
온라인 테스트를 개발하고 관리하는 조직은 잠재적으로 불리한 법적 시나리오를 염두에두고 항상 시험 내용을 디자인하고 점수를 매겨 야합니다. 기존의 테스트 프로세스에 이러한 모범 사례를 추가하면 법적 문제의 가능성을 줄이고 필요한 경우 소송을 해결하는 데 많은 도움이됩니다.
- 시험 항목 개발 표준화
- 엄격한 품목 검토 및 승인 프로세스
- 시험 및 품목 결과에 대한 지속적인 데이터 수집 및 분석
- 테스트 개발 프로세스 및 지속적인 평가 문서
조직이 측정하려고한다는 지식은 객관적이며 위의 모범 사례를 구현함으로써 조직은 시험의 객관성을 보장 할 수 있습니다.