这是一篇开放获取的文章,根据创作共用署名许可(https://creativecommons.org/licenses/by/4.0/)的条款发布,允许在任何媒介上无限制地使用、分发和复制,前提是正确引用最初发表在《医学互联网研究杂志》上的原创作品。必须包括完整的书目信息,//www.mybigtv.com/上的原始出版物的链接,以及此版权和许可信息。
近年来,人们对远程心理评估的发展越来越感兴趣。这些平台增加了可访问性,并允许临床医生监测重要的健康指标,从而为以患者为中心的治疗提供信息。
在这项研究中,我们报告了一种新的基于网络的神经认知评估电池的特性和可用性,并为未来使用提供了规范的数据集。
共有781名参与者完成了8项任务的一部分,这些任务记录了听觉处理、视觉-空间工作记忆、视觉-空间学习、认知灵活性和情绪处理的表现。一部分人(n=195)完成了一项5个问题的调查,以衡量任务的可接受性。
有252到426名参与者完成了每项任务。在8项任务中,年轻人有6项的表现优于老年人。因此,集中趋势数据度量使用7个不同的年龄箱。绝大多数参与者认为这些任务很有趣,很享受,并表示有兴趣在家里玩。195人中只有1人表示支持
总的来说,参与者普遍接受这些任务。使用诸如此类的基于网络的神经认知任务,可能会提高向更广泛的人群部署精确的数据知情干预的能力。
几十年来,神经心理学方法一直被用来理解和描述经历一系列神经精神综合征的个体的相对优势和劣势[
远程平台大大增加了心理测试的可及性。国家精神卫生研究所确定了一项优先事项,以覆盖服务不足的典型人群,如行动不便或生活在农村地区的个人[
除了可访问性之外,认知测试的数字远程方法鼓励使用纵向评估。重复的测量提供了超越单个性能快照的丰富信息[
尽管在无干扰的测试环境中,面对面的神经心理学方法无疑有其益处和最佳功能,但在这些独特的环境中收集的数据的普遍性受到了质疑[
数字方法还提供了一种衡量重要指标的方法,如反应时间(RT)和试验表现,这些指标也显示出与临床结果的相关性[
Posit Science Corporation实施的一种特殊的新型移动评估平台最近显示出了利用神经科学方法进行任务开发,捕捉精神疾病(如精神分裂症和抑郁症)常见的认知表现差异的效用[
因此,我们开始测试Posit Science开发的8个基于网络的认知任务,样本来自普通社区。感官感知、社会认知和执行功能通过数字方式与州博览会参与者进行了面对面评估,并通过对大学生的远程测试进行了评估。此外,在一部分参与者中研究了这种新电池的可用性和可行性。
所有的研究程序都由明尼苏达大学(UMN)的机构审查委员会批准。招聘和学习参与发生在明尼苏达州博览会(MSF)或远程课程学分在UMN。MSF是美国第二大参加人数最多的州博览会,每年大约有200万中西部人参观[
参与者人口统计样本。
人口统计资料 | 样本 | 总(N = 781) | |||||
|
大学(n = 202) | 州博览会(n=579) |
|
||||
|
|||||||
|
女性,n (%) | 144 (71.6) | 338 (58.6) | 482 (62.0) | |||
|
男性,n (%) | 57 (28.4) | 237 (41.1) | 294 (37.8) | |||
|
阴阳人,n (%) | 0 (0.0) | 2 (0.3) | 2 (0.3) | |||
年龄,平均值(SD) | 20.12 (2.28) | 44.82 (17.72) | 38.4 (18.7) | ||||
平均受教育年限(SD) | 14.59 (1.5) | 16.57 (2.77) | 16.1 (2.65) | ||||
平均绩点,平均值(SD)b | 3.45 (0.35) | N/Ac | 3.45 (0.35) | ||||
职业水平,平均值(SD)d | 5.16 (1.68) | 3.06 (1.84) | 3.81 (2.05) |
一个三名参与者倾向于不回应。
b平均绩点仅在本科生样本中收集。
cN/A:不适用。
d霍林黑德双因素指数:职业量表。
在获得知情同意后,研究参与者提供了人口统计信息,并完成了一系列认知任务。大学生们通过自己的个人设备(如平板电脑或个人电脑)远程参与测试,并要求他们找到一个稳定的互联网连接,在安静、私密的环境中使用耳机(最好是耳塞式耳机)完成任务。无国界医生组织的参与者使用苹果公司的实验室ipad和耳罩式耳机在一个封闭的结构中完成了研究程序。参与者被随机分配完成8项认知评估中的3到4项。由于“驱动发现州博览会”项目规定的时间限制,州博览会参与者完成了一部分措施。给予同意和完成人口统计信息、认知测量和问卷调查的时间最长为30分钟。参与者被随机分配完成2个认知单元中的1个,这些认知单元在长度上相等,在听觉、视觉和社会认知测试的数量上相当。
我们的工作旨在将基础认知神经科学的测量方法转化为对离散认知过程的简短的计算机化评估,个人可以在各种环境中轻松完成,只需最少的帮助[
开发评估套件的第一步是确定已知的认知领域和过程,这些领域和过程在个人学习新信息的能力、适应环境中的认知和情感挑战的能力以及适应新的学习需求的能力中起着关键作用。根据团队科学的原则,我们整合了来自人类和动物模型系统的认知神经科学家团队、临床研究人员和临床前转化行为神经科学家的理论观点、技术专长和经验知识。通过建立共识的过程,我们确定了3个关键的神经域:(1)感知处理(声音扫描和哔哔声搜索),(2)执行功能(气泡爆破,探路者和思维诱导),以及(3)社交情绪处理(面对面,敲击情绪和情绪脸)。在每个领域中,我们都确定了构念,即可以在行为层面测量的可定义的认知过程,为此存在明确假设和可测量的神经回路机制(例如,执行功能,设置转移)。我们确定了一种认知神经科学范式,可以在行为层面上选择性地和参数化地测量这些结构。在项目反应理论的指导下,这些评估使用自适应测试模型来根据用户调整难度级别,从而缩短测试的持续时间[
Beep seeker是一种听觉辨别任务,参与者会看到一个目标音调,并被要求在随后的试验中在其他两种干扰音调中识别出它。准确的识别目标音调提示后续的试验与更多相似的干扰音调。采用线性阶梯法在1到15分的范围内确定参与者的辨别阈值,得分越高表示表现越好。
声音扫描是一种听觉感知任务,在这项任务中,参与者会听到两个连续的音调,它们可能从低音扫到高音,也可能从高音扫到低音。参与者被要求确定每次清扫的方向。扫描声音的速度根据试验表现而变化,参与者的表现被测量为log10(平均RT(秒))。
弹泡泡是一项工作记忆任务,参与者被要求跟随一组目标泡泡,这些目标泡泡与其他分散注意力的泡泡一起在屏幕上独立移动。目标气泡的数量随性能的不同而不同。准确性是通过使用2上1下的楼梯法正确跟踪气泡的数量来衡量的。
探路者是一个学习测试。给出了一个15个节点的路径。参与者然后尝试从记忆中重新创建路径。如果错过了一个节点,试验将结束,并再次显示路径(总共5次试验)。准确性的衡量标准是在节点总数中正确召回的节点的百分比。
思维扭曲是一项任务,指导参与者在违反既定规则的图像周围识别出符合既定规则的图像。性能以日志的形式进行测量10(正确的试验RT,单位为毫秒)。
“情感点击”要求参与者在看到快乐或悲伤的面孔时点击屏幕,而当看到中性面孔时,则抑制了点击屏幕的优势反应。以中性试验的平均准确性来衡量疗效。
一张带有特定情绪的脸,接着是一系列带有各种情绪的脸。参与者被要求在一系列面孔中首先识别出目标情绪。这项任务的难度通过改变所呈现的情绪的数量和可供选择的面孔的数量来改变。性能以日志的形式进行测量10(目标刺激呈现持续时间)。
情绪脸提供了一种执行注意力的测量方法,在这种方法中,表情脸被显示出来,并覆盖上一个一致或不一致的词(Stroop效应)。对不一致刺激组合增加的RT捕获了解决冲突的能力。通过将正确一致试验的平均RT减去正确不一致试验的平均RT来衡量性能。
这个实验室设计的测量要求参与者用李克特5分制表示他们对一系列5个陈述的同意程度,范围从
所有主要结果均进行了正常筛查。虽然有些测量显示偏度和峰度(例如,哔哔搜索,点击情绪,和面对面),所有都有足够的方差。任务分布显示在
计算了每个ONA的一般趋势、离散度指标以及与人口统计学变量的关联。由于力量不足,共有2个被认定为双性人的个体被排除在ONA绩效的性别比较之外。考虑到8个ONAs中有6个与年龄有显著关联,任务表现也在7个不同的年龄范围内进行了总结。为了研究跨ONAs的并发效度和判别效度,总结了一个Spearman秩序相关矩阵;然而,由于跨样本完成的措施重叠效率低,随后缺乏动力,因此没有进行因子分析。
总共有781人完成了至少一项ONA(大学,n=202;无国界医生组织,n = 579)。
通过在线神经认知评估进行规范统计。
评估 | 参与者,n (%) | 任务度量,平均值(SD) | 最低一个 | 最大b |
Beep导引头 | 269 (34.4) | 5.01 (4.63) | 1.00 | 15.00 |
声音扫c | 269 (34.4) | 0.98 (0.33) | 0.00 | 1.70 |
泡沫流行 | 293 (37.5) | 5.07 (1.20) | 1.00 | 7.80 |
路径查找器 | 323 (41.4) | 52.32 (24.97) | 1.00 | 100.00 |
介意本德c | 256 (32.8) | −9.09 (1.03) | −11.60 | −6.80 |
挖掘情感 | 426 (54.5) | 78.48 (17.88) | 20.00 | 100.00 |
面对面地c | 339 (43.4) | −2.03 (0.42) | −3.45 | −1.50 |
情感的脸 | 252 (32.3) | 53.19 (80.11) | −169.00 | 342.90 |
一个最小值是指在给定任务中参与者的最低任务指标。
b最大值指的是给定任务中参与者的最高任务指标。
c原始任务输出颠倒过来,因此分数越高,表现越好。
超过96.4%(188/195)的参与者认为ONAs至少是
任务与人口统计学变量之间的关系,如性别、年龄和教育
在线神经认知评估与人口统计学变量(性别、年龄和教育)的关联。
评估 | 人口统计资料 | ||||||||||||||||||
|
性别 | 年龄(年) | 教育(年) | ||||||||||||||||
|
学生双尾 |
Wilcoxon秩和 | 皮尔森相关 | 斯皮尔曼秩序相关 | 皮尔森相关 | 斯皮尔曼秩序相关 | |||||||||||||
|
|
|
W |
|
|
|
ρ |
|
|
|
ρ |
|
|||||||
Beep导引头 | - - - - - -一个 | - - - - - - | 6927 | . 01 | - - - - - - | - - - - - - | 0.10 | 厚 | - - - - - - | - - - - - - | 0.10 | 厚 | |||||||
声音扫b | −2.12 (163.65) | .04点 | - - - - - - | - - - - - - | −0.33 | <措施 | - - - - - - | - - - - - - | < 0.001 | 获得 | - - - - - - | - - - - - - | |||||||
泡沫流行 | −1.09 (185.61) | 陈霞 | - - - - - - | - - - - - - | −0.50 | <措施 | - - - - - - | - - - - - - | −0.13 | 03 | - - - - - - | - - - - - - | |||||||
路径查找器 | −4.11 (264.93) | <措施 | - - - - - - | - - - - - - | −0.38 | <措施 | - - - - - - | - - - - - - | −0.10 | 07 | - - - - - - | - - - - - - | |||||||
介意本德b | −1.39 (145.12) | 。 | - - - - - - | - - - - - - | −0.41 | <措施 | - - - - - - | - - - - - - | −0.13 | .04点 | - - - - - - | - - - - - - | |||||||
挖掘情感 | - - - - - - | - - - - - - | 19480年 | 陈霞 | - - - - - - | - - - - - - | −0.24 | <措施 | - - - - - - | - - - - - - | −0.16 | 措施 | |||||||
面对面地b | - - - - - - | - - - - - - | 12984年 | .85 | - - - - - - | - - - - - - | −0.19 | <措施 | - - - - - - | - - - - - - | −0.01 | .85 | |||||||
情感的脸 | 1.70 (223.3) | .09点 | - - - - - - | - - - - - - | −0.03 | 收 | - - - - - - | - - - - - - | 0.01 | 总共花掉 | - - - - - - | - - - - - - |
一个非参数检验提供给定的违反正态性。
b原始任务输出颠倒过来,因此输出越大表示性能越好。
在线神经认知评估与人口统计学变量(职业水平和平均绩点)的关联。
评估 | 人口统计资料 | ||||||||
|
职业水平 | 平均绩点 | |||||||
|
皮尔森相关 | 斯皮尔曼秩序相关 | 皮尔森相关 | 斯皮尔曼秩序相关 | |||||
|
|
|
ρ |
|
|
|
ρ |
|
|
Beep导引头 | - - - - - -一个 | - - - - - - | 0.15 | 02 | - - - - - - | - - - - - - | 0.07 | .57 | |
声音扫b | −0.16 | 03 | - - - - - - | - - - - - - | 0.08 | 点 | - - - - - - | - - - - - - | |
泡沫流行 | −0.17 | . 01 | - - - - - - | - - - - - - | 0.04 | 正 | - - - - - - | - - - - - - | |
路径查找器 | −0.24 | <措施 | - - - - - - | - - - - - - | 0.13 | 点 | - - - - - - | - - - - - - | |
介意本德b | −0.21 | 措施 | - - - - - - | - - - - - - | 0.08 | .41点 | - - - - - - | - - - - - - | |
挖掘情感 | - - - - - - | - - - - - - | −0.20 | <措施 | - - - - - - | - - - - - - | 0.02 | 点 | |
面对面地b | - - - - - - | - - - - - - | −0.09 | .10 | - - - - - - | - - - - - - | 0.01 | 公布 | |
情感的脸 | −0.04 | 56 | - - - - - - | - - - - - - | 0.04 | .74点 | - - - - - - | - - - - - - |
一个非参数检验提供给定的违反正态性。
b原始任务输出颠倒过来,因此输出越大表示性能越好。
年龄17-50岁的标准数据。
评估 | 年龄箱(年) | ||||||||||
|
17日 | 21 - 30 | 31-40 | 每周 | |||||||
|
参与者,n | 意思是(SD) | 参与者,n | 意思是(SD) | 参与者,n | 意思是(SD) | 参与者,n | 意思是(SD) | |||
Beep导引头 | 76 | 3.76 (4.06) | 63 | 5.11 (4.57) | 22 | 6.91 (5.87) | 32 | 6.50 (4.94) | |||
声音扫 | 102 | 1.08 (0.29) | 62 | 1.04 (0.32) | 19 | 0.84 (0.33) | 22 | 0.88 (0.27) | |||
泡沫流行 | 94 | 5.59 (0.95) | 68 | 5.41 (1.13) | 23 | 5.04 (1.01) | 33 | 4.93 (1.17) | |||
路径查找器 | 91 | 61.86 (21.22) | 70 | 59.79 (25.02) | 25 | 55.16 (24.87) | 33 | 46.18 (21.99) | |||
介意本德 | 97 | −8.7 (0.95) | 56 | −8.9 (0.94) | 20. | −8.82 (0.96) | 23 | −9.59 (0.84) | |||
挖掘情感 | 136 | 86.29 (10.91) | 108 | 74.76 (20.27) | 32 | 72.56 (21.05) | 39 | 74.32 (18.31) | |||
面对面地 | 154 | −1.96 (0.41) | 80 | −1.95 (0.38) | 22 | −2.17 (0.35) | 25 | −2.09 (0.42) | |||
情感的脸 | 62 | 56.42 (76.89) | 63 | 53.82 (73.4) | 24 | 67.65 (91.75) | 32 | 36.49 (64.09) |
标准数据按年龄分类,年龄为51-80岁。
评估 | 年龄箱(年) | |||||||
|
51-60 | 61 - 70 | 71 - 80 | |||||
|
参与者,n | 意思是(SD) | 参与者,n | 意思是(SD) | 参与者,n | 意思是(SD) | ||
Beep导引头 | 35 | 6.29 (4.93) | 34 | 3.97 (3.66) | 7 | 3.71 (4.11) | ||
声音扫 | 28 | 0.89 (0.28) | 29 | 0.79 (0.38) | 7 | 0.7 (0.40) | ||
泡沫流行 | 32 | 4.57 (1.08) | 33 | 3.93 (0.99) | 10 | 3.68 (0.92) | ||
路径查找器 | 49 | 45.96 (25.25) | 45 | 34.98 (21.28) | 10 | 35.7 (21.89) | ||
介意本德 | 28 | −10.05 (1.07) | 28 | −9.62 (0.74) | 4 | −9.43 (0.48) | ||
挖掘情感 | 51 | 78.80 (14.93) | 48 | 75.6 (18.52) | 12 | 62.92 (25.71) | ||
面对面地 | 30. | −2.11 (0.39) | 24 | −2.33 (0.56) | 4 | −2.29 (0.25) | ||
情感的脸 | 35 | 55.09 (73.18) | 30. | 52.26 (107.65) | 6 | 38.07 (110.4) |
大多数视觉任务彼此显著相关,斯皮尔曼rho系数在0.19到0.42之间,表明一些预期的共享方差和测量独特结构的证据(
在线神经认知评估的相关矩阵。
评估 | Beep导引头 | 声音扫 | 泡沫流行 | 路径查找器 | 介意本德 | 挖掘情感 | 面对面地 | |
|
||||||||
|
ρ一个 | N/Ab | - - - - - -c | - - - - - - | - - - - - - | - - - - - - | - - - - - - | - - - - - - |
|
|
N/A | - - - - - - | - - - - - - | - - - - - - | - - - - - - | - - - - - - | - - - - - - |
|
||||||||
|
ρ | 0.28 | 0.18 | - - - - - - | - - - - - - | - - - - - - | - - - - - - | - - - - - - |
|
|
.002 | 0。 | - - - - - - | - - - - - - | - - - - - - | - - - - - - | - - - - - - |
|
||||||||
|
ρ | 0.1 | 0.36 | N/A | - - - - - - | - - - - - - | - - - - - - | - - - - - - |
|
|
口径。 | <措施 | N/A | - - - - - - | - - - - - - | - - - - - - | - - - - - - |
|
||||||||
|
ρ | 0.24 | 0.31 | 0.19 | 0.23 | - - - - - - | - - - - - - | - - - - - - |
|
|
0。 | <措施 | 0。 | .005 | - - - - - - | - - - - - - | - - - - - - |
|
||||||||
|
ρ | 0.02 | 0.16 | 0.22 | 0.25 | 0.42 | - - - - - - | - - - - - - |
|
|
点 | .04点 | 措施 | .006 | <措施 | - - - - - - | - - - - - - |
|
||||||||
|
ρ | 0.09 | 0.20 | 0.14 | 0.23 | 0.23 | 0.19 | - - - - - - |
|
|
点 | .006 | 酒精含量 | .003 | 措施 | .005 | - - - - - - |
|
||||||||
|
ρ | −0.21 | N/A | −0.09 | 0.11 | N/A | 0.07 | −0.05 |
|
|
.005 | N/A | .35点 | 38 | N/A | 收 | 55 |
一个ρ:斯皮尔曼等级相关系数。
bN/A:不适用;这些任务不包括在同一个电池中。
c冗余信息。
在这项研究中,我们测试了一种新的基于网络的神经认知评估电池,用于一般社区的个体。通过8个任务收集了规范性指标,分别测量听觉辨别、听觉感知、视觉-空间工作记忆、视觉-空间学习、认知灵活性、情绪检测、情绪识别和情绪抑制控制。
参与者发现,这些评估在各个年龄段都被广泛接受。年龄与参与者能够理解任务指令的程度呈负相关;然而,绝大多数年龄较大的人认为这些任务是可以理解的。尽管如此,这些任务的未来迭代应该考虑调整以更好地满足这些个体,例如改进任务说明,增加练习试验,嵌入视频教程,或降低起始难度以减少初始挫败感。尽管人们普遍认为这些任务很有趣,也很享受,但很少有人对在家玩游戏感兴趣。这种差异可能表明,很少有参与者会选择将这些任务作为休闲活动,但如果他们的健康护理团队成员推荐,他们可能会愿意完成这些任务。需要注意的是,与调查措辞相反,这些任务不被视为游戏,不应该被这样解释。与传统的神经心理学评估相比,这些测量方法很简单,允许临床医生在相对较短的时间内收集丰富的认知信息。这些发现强调了电池的可接受性和效率。
参与者的年龄与8项任务中的6项有关,年轻的参与者比年长的参与者表现得更好。这一趋势在认知文献中已被广泛观察到[
男性在视觉学习任务中表现更好,这证实了之前关于涉及空间导航和操作的学习任务的性别发现[
虽然之前的研究已经证明了认知能力和教育测试之间的联系,但我们的任务组在控制年龄后并没有显示出与GPA或教育年限的关系[
正如预期的那样,大多数以视觉为主的ONAs彼此之间的关联很小,这表明它们可能会利用独特的性能领域。Beep seeker和bubble pop(分别测量听觉和视觉空间领域的感觉记忆和工作记忆)是相关的。之前的研究支持了这种联系,并为两种记忆系统的类似神经机制提供了证据。
尽管最近发展了各种数字认知评估工具,但很少有研究发布了规范的数据集,从而限制了从这些任务中获得的信息。在解释临床人群的认知表现之前,从一般社区收集规范数据是重要和必要的第一步。当前的全球健康危机已经阻止了在临床和研究环境中进行传统的面对面认知评估的能力。开发有效、可靠、可远程交付的评估平台已变得至关重要。
尽管我们的研究结果很有优势,但仍有一些局限性需要考虑。虽然样本中的74.1%(579/781)来自普通社区,但也有一部分参与者是通过在大型公立大学机构就读而招募的。因此,在这个样本中,年轻人的表现可能与一般人群有所不同。由于每个参与者完成的测量方法的有限重叠,我们无法评估任务的子集是否由共同的潜在因素来解释,以调查结构的有效性。同样,考虑到执行每项任务的个体数量的可变性,应谨慎解释任务之间的相关性。在本研究中也没有收集有关参与者种族和民族的数据。此外,2个被确定为阴阳人的个体阻止了我们可靠地预测更大数量的阴阳人如何执行所提出的任务的能力。未来的工作应旨在更具体地评估种族和性别少数群体,以更好地了解这些人群的表现和可行性。
在患者家中进行的体验式认知评估可能有助于更好地了解他们的真实认知状态,但这也增加了个人缺乏注意力或动机来正确参与测试的可能性[
这些和其他数字评估的可访问性提供了一个机会,将客观的行为评估直接集成到医疗记录中,以指导护理。鉴于健康信息学领域仍处于萌芽阶段,未来的工作应该评估这些任务捕获独特差异的程度,并在其他数据中预测结果。
这项研究展示了来自一般社区的个人的表现,使用一种可以远程使用的新型认知评估工具。参与者发现这些任务具有互动性,易于使用。诸如此类基于网络的任务的开发和验证,广泛扩大了认知评估对农村群体和其他身体活动受限的新人群的可及性,还可能提高卫生从业人员进行重复测试的能力。具有远程功能的快速、易于使用的数字评估平台可能有助于使该领域更接近实现更有效的以患者为中心的护理。
补充材料包括在线神经认知评估任务链接和任务分配。
在线神经认知评估的参与者可用性反馈。
平均绩点
明尼苏达州博览会
在线神经认知评估
反应时间
明尼苏达大学
RC协助项目开发,进行分析,并撰写了初稿。MF和BB协助项目开发,监督分析,并修改和优化了手稿的进一步版本。SV主导了项目开发和手稿的修订工作。NG、AC、KF、NA参与数据收集和审稿。所有作者都贡献了最终稿,并已批准。
BB是Posit Science公司的资深科学家,该公司生产认知训练和评估软件。本研究中描述的评估由Posit Science免费提供用于研究目的。SV一直是美国国立卫生研究院SBIR授予Positscience Inc.的一个网站PI。