开发和提供计算机化考试的组织面临与使用传统纸笔考试的许多相同的挑战，包括与安全性，心理测验编辑和法律辩护有关的问题。基于计算机的测试（CBT）也出现了新的问题，特别是因为测试是通过Internet进行更广泛的管理。这些问题包括候选作弊和物品过度暴露的风险增加。
为了解决一般测试以及与CBT有关的一些新问题所带来的持续挑战，组织需要遵循标准流程来进行测试项目开发和心理计量编辑。例如，使用多个项目编写者来开发测试内容是一种常见的做法，但是可能导致测试项目样式，格式和难度的变化。带有模板以及项目开发标准和规则的样式指南可以大大改善项目的一致性，格式和多样性。此外，内容开发培训可以确保编写者拥有开发可靠，可辩护的项目和项目模板的工具，这些工具可用于创建同一问题的不同变体，从而在较短的时间内增加项目库的大小。
对现场测试项目的统计评估使组织能够获得有关特定项目性能和认知水平的反馈。这种智能功能可以修改项目开发流程并为特定的测试项目开发人员提供反馈，从而帮助确定有效的方法以及项目在现场的表现。这也使组织能够对项目保留，修改和分配做出决策。
任何开发或管理测试的组织都应意识到心理测验的编辑过程，该过程包括对项目难度级别的评估，并考虑语法，敏感性和风格等因素。心理计量学还提供对考试项目形式和功能的复习，例如并行选项，足够的信息来回答问题和回答时间。
由于高度重视客观性，因此最好由测试开发专业人员而不是主题专家或项目编写者来执行心理计量学编辑。受过心理计量学编辑的复杂性影响的个人对评估项目的评价与主题专家或项目撰写者的评价不同。但是，重要的是还要由相关领域的主题专家对最终编辑的项目进行审核和批准。
为CBT和PPT开发的物品必须在法律上具有防御性，以确保在遇到法律挑战时得到保护。为了确保法律上的可辩护性，组织必须执行标准的项目开发和心理测评流程，如上所述。
法律辩护评估包括从内容和心理学角度对考试进行严格审查，以确保考试是根据教育和心理测试标准进行的 。法院在评估有关考试的信誉时会遵循标准。可以通过几种方法来实现法律辩护。开发过程中最重要的方面是遵循并记录标准化方法，并在过程中包括合适的测试开发人员。测试开发过程中有许多不同的步骤，并且每个步骤都可以使用不同的方法。例如，在确定考试的分数时，可以使用诸如“改进的Angoff”或“书签方法”之类的过程来确定适当的通过标准。每种方法都使用不同的技术来确定候选人必须达到的门槛才能获得通过状态。
为了减轻项目过度暴露的风险，测试公司开发了大型测试项目库，定期从中更新测试内容。在大型测试开发人员和管理员的带领下，管理基于计算机的测试的组织将希望考虑使用扩展的项目库和计划的测试项目更新，以确保候选人看不到相同的项目或设计，从而总体上降低了候选人共享的可能性信息。
在许多高风险测试计划中，测试管理员收集并检查法证数据，以衡量应试者接触特定测试项目的频率，应试者在项目上花费的平均时间以及应试者对项目的反应随时间和暴露程度的变化。这样可确保对项目开发过程和内容进行持续调整，以确保信誉，合法性和安全性。
在检查后，还可以使用不同的方法来分析候选结果。这些类型的分析之一是差异项目分析，它评估测试项目上的组表现（组可以通过性别，种族或其他因素来定义）。然后，重新评估各组候选者之间表现显着不同的项目，以确定未来的用途。
在开发用于基于计算机的测试的内容时要考虑的众多因素都为考试本身带来了信誉和完整性。与那些匆忙迁移到基于计算机的测试的组织相比，能够沉思地主动考虑其测试程序的设计和实施的组织要好。从长远来看，考虑项目开发和编辑资源以及安全性和IT参数的主动方法可以更好地为组织服务，因为它可以提高测试的有效性，候选人公平性并提供更高级别的保护，以应对法律挑战。