《通用网络能力评估》美陆军2022最新109页报告

执行总结

研究要求

鉴于网络工作在美陆军中的重要性日益增加，以及网络工作所需能力与其他作战人员工作相比的独特性，建立一个有效的选拔和分类系统来识别和分配那些有很大潜力在这些工作中取得成功的新兵变得越来越重要。在这个项目中，我们开发了一个创新的评估，称为通用网络能力（C^3）测试，以衡量七个被认为与美陆军多个网络工作的成功相关的结构：主动学习、解决复杂问题、批判性思维、演绎推理、归纳推理、选择性注意和排除故障。

程序

为了识别那些目前不具备网络知识和技能的、在这些工作中具有很大成功潜力的新兵，C^3测试的一个关键规定是创建一个不需要网络或信息技术（IT）知识的评估。因为像复杂问题解决这样的构架不可能是完全无背景的，应试者需要解决的问题和他们可以利用的信息来解决这些问题。此外，为了测量主动学习，应试者需要一个学习的机会。为了满足这些需求，我们为C^3测试创建了一个虚构的情境，在这个情境中，应试者开始了一份新的工作，并得到了关于这份工作的信息。在开始他们的新工作时，应试者通过 "学习阶段"和 "应用阶段 "进行。这种两阶段的结构使应试者能够在评估的第一阶段学习相关信息，然后在评估的第二阶段应用这些信息来解决问题。

在C^3测试中，应试者扮演一个虚构的未来运输公司的新雇员，该公司使用真空管进行运输。在评估中，应试者必须首先通过一系列的培训模块来学习与工作相关的知识，这些模块描述了公司、真空管旅行的发展以及与他们的虚构工作相关的具体部件和设备。然后，应试者开始新的工作，并将这些知识应用于测试的应用阶段出现的问题。在这个整体评估的背景下，每一个C^3构架都是根据构架的定义和对现有措施的审查来操作的。初步数据是从67名完成C^3测试的受试者中收集的，这些受试者完成了少量的相关测量，一份人口统计问卷和一份反馈问卷。

研究发现

C^3测试的初步心理测量证据是很有希望的。大多数测量方法都有足够的方差，分数的分布也近乎正常。虽然有些分布稍有偏斜，表明对参与者来说，这些测量有些太容易或太难，但这些特征的原因很容易确定，可以在后续版本的测试中加以修正。有几个测量项目的分布显示出中心倾向的偏差，并将从增加方差的程序中受益。

许多C^3构架和子维度之间的相关关系显示出预期的模式。尽管在最初的研究中不可能为所有的测量方法收集构架有效性数据，但C^3构架和子维度之间的相关性提供了一些构架有效性的确认。大多数相互关系是显著的，但幅度很小到中等。相关性小到中等的事实表明，没有两个工具在测量相同的构架。由于每个C^3测试都被设计用来测量一个不同的构架，这提供了辨证有效性的初步证据。应该进行更多的研究，以更仔细地检查这些测量与其他类似测量的分歧。C^3构面和一般智力测验之间的相关性也是小到中等的，这表明与一般智力有分歧。未来的研究应该考察C^3测试的标准相关有效性，以及C^3构面在多大程度上可以预测超出一般智力的标准。

尽管受测者报告说发现测试很复杂，完成起来很有挑战性，但对于一个主要侧重于评估认知技能的测试来说，这在某种程度上是必要的。测试者的反馈和每个构架的具体结果都被详细地介绍和讨论。

研究结果的利用和传播：

本研究的结果可用于改进C^3测试，并为评估评估的标准相关有效性的研究做准备。一旦得到验证，C^3测试可以用来识别新兵和新战士的能力，这些能力是在网络相关工作中取得成功的关键，即使他们没有预先存在的网络知识和技能。此外，如果陆军的其他工作需要类似于C^3测试的能力，该测试也可以用来识别陆军其他工作的候选人。