在过去的几年里,人们已经接受了这样一个观点:相对于现有的典型认知测试,对个体认知能力的可靠测量需要参与者完成更多的试验或使用更大的效应量任务。该项目开发了一套认知控制测试,能够有效和可靠地测量认知控制能力,这对在时间压力下的高效表现至关重要。测试组是在Unity游戏引擎中实现的,并且只需要使用不安装的网页浏览器即可在线访问。游戏机制(如多样性、反馈、奖励和排行榜)和整合的故事情节能够在持续且苛刻的测试过程中维持用户粘性。该测试组实现了最突出的认知控制措施,包括:1)工作记忆(单一和双n-back任务),2)反应抑制(停止信号任务),3)冲突任务(Simon、Flanker和Stroop任务),4)多任务,5)任务切换。不同的度量可以灵活地组合在一个连贯的“房间清理”叙述中,并且独立的教程可以轻松地部署在线测试。冲突任务的新版本被开发出来,以增加效果大小和可靠性,并在一个在线实验中对它们进行测试。我们开发了一种严格的方法来量化测试产生可靠的个体差异测量的能力,并报告将其应用于实验数据的结果。我们的结论是,这些新的冲突任务产生了比以前实现的更可靠度量。
认知能力在具有挑战性和压力的条件下要求优异表现的职业中很重要,例如体育、民事高风险角色和军事[1,2,3]。这导致人们越来越重视认知准备[4,5,6],以优化复杂任务和社会技术系统中的团队表现,这是现代防御设置的一个日益普遍的特征[7]。人们不再强调身体健康[8],随之而来的是需要确定支撑被称为心理或认知健康的关键心理构念[9,10]。为了优化选择,评估新兴的认知训练方法和项目的成功或失败,可靠地测量支撑认知适应的关键结构的个体差异尤为重要[11,12,13]。
这篇论文描述了一组认知测试,在时间限制下测量认知能力至关重要的高性能。被称为“COGMISSION”的测试是使用Unity游戏引擎(https://unity.com)以视频游戏格式实现的。访问是通过“PlayUR”(https://playur.io)提供的,这是一个管理基于web的Unity实验的平台,使COGMISSION能够使用网页浏览器在线访问,而不需要安装。《认知使命》通过游戏机制(游戏邦注:如多样性、反馈、奖励和排行榜)和整合的故事情节(游戏邦注:旨在通过延长和苛刻的测试过程保持用户粘性)而得到增强。自包含的教程支持容易部署的大规模测试。在下一节中,我们将描述在COGMISSION中实现的任务、它们度量的结构,以及它们选择的基本原理。然后,我们回顾了“可靠性悖论”[14],它导致了测试认知适应性的核心构念之一——注意控制——的典型方法无法提供足够的个体差异测量。随后,我们描述了一种严格的新的统计方法来评估注意力控制任务的能力,以提供足够可靠的个体差异测量[15]。接下来,我们将报告将该方法应用于一个预先注册的实验结果(https://osf.io/y4sbh)的结果,该实验通过Amazon Mechanical Turk (https://www.mturk.com/)进行,这是一个面向在线员工的众包市场,评估在COGMISSION中实施的各种注意力控制任务。