发表在第9卷第8期(2022):8月

本文的预印本(早期版本)可在以下网站获得https://preprints.www.mybigtv.com/preprint/39885,第一次出版
用于covid -19相关压力减轻的电子精神卫生资源:覆盖范围、可用性和用户感知的混合方法研究

用于covid -19相关压力减轻的电子精神卫生资源:覆盖范围、可用性和用户感知的混合方法研究

用于covid -19相关压力减轻的电子精神卫生资源:覆盖范围、可用性和用户感知的混合方法研究

原始论文

1尼古丁依赖服务,成瘾和心理健康中心,加拿大多伦多

2多伦多大学家庭与社区医学系,加拿大多伦多

3.多伦多大学医学科学研究所,加拿大安大略省多伦多

4多伦多大学药理学和毒理学系,加拿大多伦多

5成瘾和心理健康中心,加拿大安大略省多伦多

6多伦多大学精神学系,多伦多,加拿大

7加拿大多伦多大学卫生政策、管理和评价研究所

8坎贝尔家庭心理健康研究所,成瘾和心理健康中心,加拿大多伦多

9加拿大多伦多大学达拉拉纳公共卫生学院

通讯作者:

Peter Selby, MBBS, MHSc

尼古丁依赖的服务

成瘾和心理健康中心

皇后街西1025号

多伦多,ON, M6H 1H4

加拿大

电话:1 416 535 8501

电子邮件:peter_selby@camh.net


背景:COVID-19及其公共卫生应对措施正在对人们的心理健康产生深远影响。为了在这些时期提供支持,加拿大最大的精神卫生和成瘾教学医院(成瘾和心理卫生中心[CAMH])于2020年3月18日启动了精神卫生和COVID-19大流行网站。本网站旨在为因COVID-19和公共卫生应对大流行而遭受轻度至中度痛苦的人提供非污名化的心理教育资源。

摘要目的:这项研究的目的是检查CAMH心理健康和COVID-19大流行网站的覆盖范围、可用性和用户感知。

方法:本研究采用混合方法的序贯解释设计方法,包括以下两个不同的阶段:(1)定量数据收集和分析(2)定性半结构化访谈。在第一阶段,我们分析了谷歌Analytics的数据,以了解有多少人访问了网站,哪些是访问最多的页面。我们进行了一项调查,以确定用户的社会人口背景,并使用系统可用性量表(System availability Scale)评估网站的可用性,使用感知压力量表(PSS-10)评估用户的主观压力水平。在第二阶段,我们进行了半结构化的访谈,以探索用户体验;用户动机、参与、满意度和对压力减轻策略的感知;网站功能、易用性、导航和设计的反映;以及改进建议。

结果:谷歌分析结果显示,从2020年6月到2021年3月,有146,978名独立用户。大多数用户来自加拿大(130,066,88.5%)。在2021年2月20日至6月4日期间,有152名用户完成了调查。大多数用户自称为白人女性,至少拥有大学学位。根据PSS-10分数,大多数参与者在访问网站时都经历了中等到高度的压力。用户对网站的可用性评价为可接受。10名用户在2021年5月至2021年6月期间完成了深度访谈。与内容相关的积极反馈是,该网站是一个值得信赖的心理健康信息来源,提供了有帮助的循证减压策略。需要改进的地方包括网站的文字设计、更广泛的传播/营销,以及提高网站的易读性,以满足不同人群的需要。

结论:在受人尊敬的机构的网站上添加减压资源,可能是在危机时期提高认识和获得循证减压资源的实际方法,在危机时期,通常的卫生保健联系受到严重干扰。需要努力确保这些资源得到更广泛的利用,特别是让不同的人口获得这些资源。

JMIR Ment Health 2022;9(8):e39885

doi: 10.2196/39885

关键字



2019冠状病毒病大流行及其公共卫生应对措施正在对社会各方面产生深远影响,包括心理健康[1].采取公共卫生措施,如隔离、旅行限制和关闭学习和商业场所,是减少COVID-19传播的应对措施的一部分[2-4].隔离、社会隔离和围绕大流行的不确定性已知会对心理健康产生负面影响[5].例如,一项针对2003年在安大略省多伦多SARS大流行期间被隔离的个体的研究发现,31%的样本出现了创伤后应激障碍症状,29%的样本表现出与临床诊断的抑郁症患者相似的抑郁症状严重程度[6].

为应对当前COVID-19大流行期间现场护理的中断,卫生系统迅速采用了虚拟护理选项[7].在可能的情况下,通过电话或视频会议平台和网络应用程序提供虚拟护理,这在精神健康疾病患者中尤其适用,也更有可能实现[7].不是每个人都需要或想要面对面的临床服务,而是希望获得可信赖的心理教育,以管理与疾病本身有关的不确定性相关的压力和焦虑,以及对他们生活的影响[89].这导致人们担心,在缺乏可信的加拿大消息来源的情况下,大多数人会通过社交媒体获取未经策划的信息[10-12].在加拿大,安大略省的精神健康和戒毒服务能力也令人关切[13].即使在大流行之前,安大略的精神卫生和成瘾服务基础设施负担过重,资金不足[14].因此,期望这个系统对轻度到中度痛苦的人做出反应被认为是不合适的。

鉴于越来越多的证据表明,可通过使用数字精神卫生技术取得积极成果[15-20.], 2020年3月18日(世界卫生组织宣布COVID-19为大流行的同月),加拿大多伦多成瘾和精神卫生中心(CAMH) [21]在CAMH网站上推出新冠肺炎资源页面[22].该网站旨在为因COVID-19而遭受轻度至中度痛苦的加拿大人提供数字、简洁的语言、非污名化的心理教育资源。由于与不断发展的流行病有关的不确定性,压力被认为是普遍存在的。应对措施将在不同程度上影响那些已经患有或没有患有精神疾病的人,大多数人会经历轻度到中度的痛苦,但在缺乏资源的情况下,这可能会使专注于控制COVID-19的卫生保健系统不堪重负。该网站提供了基于认知行为疗法的实用解决问题的技巧,有英语和法语两种语言。具体来说,它包括(1)一个经过调节的讨论板,(2)关于COVID-19期间管理心理健康的书面内容,(3)使用广泛性焦虑障碍-7 (GAD-7)量表对焦虑进行自我评估,使用感知压力量表(PSS)对感知压力和恢复力进行评估,(4)公众就亲密伴侣暴力和悲伤等特定主题对常见问题(FAQs)的一系列回答。那些被诊断为焦虑和抑郁的人可能会有更严重的压力反应,这反过来又阻碍了对数字精神健康干预的参与[23].首席开发人员(PS和RD)认为,这些人应该被指导去寻求临床服务或亲自或虚拟的,因为他们可能需要更密集的服务。

为尽量减少COVID-19对公共精神卫生的负面影响而制定的数字战略的迅速发展超过了对数字卫生干预措施的评估[24-26],使我们对干预措施的效用和质量的理解出现了差距[27].在这项研究中,我们报告了CAMH COVID-19网站的覆盖范围、可用性和用户感知。


研究设计

本研究采用混合方法的序贯解释设计方法,包括以下两个不同的阶段:(1)定量数据收集和分析(2)定性半结构化访谈。在报告这项研究时,我们遵守《混合方法研究良好报告指南》(GRAMMS) [28].

招聘及资料收集

阶段1:可达性(谷歌分析)和可用性(自我管理调查)

在第一阶段,谷歌Analytics数据被用来确定唯一用户的数量,与用户相关的国家和城市,他们访问的页面和顺序,以及驱动最多流量的渠道(如Twitter和Facebook)。我们收集了谷歌Analytics从2020年6月至2021年3月的数据。

为了获得更多关于谁使用CAMH的COVID-19网站工具的描述性信息,我们在网站上发布了这项研究的广告,并发送了一条推特让人们知道。组织账号@CAMHnews和@PSQuitSmoking也发送了推文,询问用户/读者是否有兴趣参与这项研究。在征得同意后,参与者通过研究电子数据捕获(REDCap)完成了一项调查,其中包括社会人口统计问题;PSS-10是一个包含10个项目的工具,李克特量表采用5分制,评分范围从0(从不)到4(经常),用于评估主观压力水平[29];及系统可用性量表(SUS),以评估应用程式和服务的可用性[30.31].SUS是一份10个项目的问卷,包含从非常同意到非常不同意的回答选项。使用SUS工具来衡量可用性的决定是基于其有效性来有效区分可用和不可用系统[30.].SUS可以很容易地对参与者实施,并已被证明产生可靠的结果,即使样本量很小[30.].一旦参与者完成调查,他们通过REDCap被重定向到一个新页面,提供他们的联系方式,进入礼品卡抽奖。这是可选的,参与者可以选择不参加抽奖。研究人员还询问了参与者是否有兴趣参加面试,以及是否同意未来进行沟通(可选),并从有兴趣的参与者那里收集了联系信息(电子邮件和电话号码)。参与者被告知,从调查中收集的信息可能被CAMH用于未来的研究,在这种情况下,数据被识别,只报告汇总数据。我们收集了2021年2月20日至2021年6月4日的调查数据。

阶段2:用户感知(半结构化访谈)

为了探索和描述参与者对CAMH COVID-19网站的看法,在2021年5月25日至2021年6月29日期间进行了半结构化访谈。在完成CAMH COVID-19网站评估调查的152名参与者中,53人表示有兴趣接受采访。所有53名参与者在访问CAMH COVID-19网站时都有资格接受采访,他们的年龄都在18岁以上。我们通过电子邮件/电话联系了他们,并安排了与同意进行采访的个人进行同意讨论的时间。一旦参与者同意并使用REDCap签署知情同意书,他们将通过电话或视频会议系统预约30分钟的半结构化面谈。所有的采访都是录音和逐字转录。我们进行了十次访问,并评估数据足以进行深入的个案分析,从而深入了解用户使用网站的体验[32].我们多次尝试接触和招募不同类型的用户样本进行采访。然而,那些同意参与的人主要是受过大学教育的白人和女性。所有同意接受采访的参与者都来自安大略省;因此,我们的样本不能代表加拿大的全部人口。

更新完成后,采用定性的半结构化访谈来进一步阐述网站的可用性。可用性被定义为一个程序可以轻松、有效和令人满意地使用的程度[33].具体来说,访谈主题指南探索了参与者使用网站的体验,包括他们的动机、参与度、满意度或不满意度,以及他们对网站是否有助于减轻压力的感知体验。还探讨了参与者对CAMH COVID-19网站的功能和易用性/导航、整体外观/设计以及如何改进干预措施的看法。

项目活动时间表

图1提供项目活动的时间轴。该网站于2020年3月18日上线。在过去的一年里,该网站增加了内容,包括在苹果设备的app Store和安卓设备的谷歌Play Store上提供离线下载应用程序。根据大流行病的演变和规划委员会认为需要解决的问题,增加了专题(例如,养育子女、悲伤、创伤和损失、父母支持和重返学校)。2021年4月23日,基于这项研究的初步反馈和一名训练有素的行为心理学家和专业设计师对网站的审查,网站根据当时的情况进行了更新,以改进导航,消除重复,并包括额外的内容(例如,对护理人员的支持)。

图1。项目时间表。成瘾和心理健康中心;世卫组织:世界卫生组织。
把这个图

数据分析

阶段1:谷歌分析和自我管理调查

从2020年6月到2021年3月收集的分析数据导出到Microsoft Excel中,我们使用该Excel进行描述性统计。我们计算了平均数、标准差和适用的中位数。

使用SPSS(版本25;IBM公司)。在调查中,美国卫生与公众服务部提供的评分准则被用来分析卫生系统问卷[30.].通过将每个问题的分数转换为一个新数字,将转换后的分数相加,并将该分数乘以2.5,为每个参与者生成一个介于0到100之间的SUS分数。描述性统计用于报告社会人口学特征、可用性和参与度。PSS-10的分析方法是,首先逆转量表上4个积极项目的得分,然后将所有10个项目的得分相加,得出每个参与者的得分在0到40之间。

第二阶段:半结构化面试

该研究的定性数据分析涉及迭代的团队基础过程。转录访谈输入NVivo 12 (QSR International)进行定性数据管理和分析。两名研究人员多次阅读访谈记录,在代码开发之前实现沉浸感。作者AG制作了最初的码本,然后AG和AS共同编写了前3个抄本,对码本进行了完善,并通过共识对代码进行了定义。另外两个转录本分别用AG和AS进行编码,并在NVivo 12中使用kappa系数对计算得到的互码器可靠性进行评估。93%的人同意96%的代码[34].其余转录本由AG或AS独立编码。数据分析采用专题分析[35].一种演绎的方法被用来识别转录本的编码方案,允许开发与可用性和压力管理的组成部分相对应的代码。

我们合并了定量和定性分析结果,以提供参与者对CAMH COVID-19网站的更全面的看法。

道德

本研究,包括招募和同意过程,获得了CAMH质量项目伦理审查委员会的伦理批准(QPER #: 2020_34) [36].


阶段1:谷歌分析和自我管理调查

谷歌分析

从2020年6月到2021年3月,该网站有146978个独立用户(未重复/仅统计一次)。在来自世界各地的146,978名用户中,大多数来自加拿大(130,066,88.5%),其中30,964(23.8%)来自多伦多,6538(5.0%)来自渥太华。网页是网页中浏览量最多的网页,在过去10个月有91,866次独立网页浏览量;其次是"应付压力及焦虑"网页,在过去10个月有29,889次独立网页浏览量[2237].有机搜索流量(即通过搜索引擎进入)占网站用户访问的最高比例。从2020年6月到2021年3月,108,332名用户(占所有独立访问者的73.7%)通过有机搜索访问了网站,36,630名用户(占所有独立访问者的24.9%)通过直接在地址栏中输入URL访问了网站。

调查和访谈参与者的特征

调查结果载于表1.我们将参与者的回答分为3列。第一列包括在2021年2月20日至2021年4月23日(网站更新之前)之间回应的参与者;第二组包括在2021年4月24日至2021年6月4日(网站更新后)之间回应的参与者;第三个是我们采访的参与者。

表1。人口统计数据、感知压力量表和系统可用性量表(SUS)评分。
变量 调查参与者(2021年2月20日- 4月23日)(N=101人一个) 调查参与者(2021年4月24日至6月4日)(N=51人b) 访谈参与者(2021年5月至6月)(N=10)
种族/民族,n (%)



白色 76 (75.3) 36 (70.6) 5 (50.0)

拉丁美洲的 5 (5.0) 1 (2.0) 1 (10.0)

混血儿(如非洲人和白人) 2 (2.0) 2 (3.9) 1 (10.0)

东/南/东南亚 6 (5.9) 6 (11.8) 2 (20.0)

“第一民族”/土著 0 (0.0) 1 (2.0) 0 (0.0)

黑色的 3 (3.0) 1 (2.0) 0 (0.0)

Indian-Caribbean 1 (1.0) 0 (0.0) 1 (10.0)

没有回答 8 (7.9) 4 (7.8) 0 (0.0)
年龄(年),平均值(SD) 44 (18) 45 (18) 45 (15)
性别、n (%)



86 (85.1) 39 (76.5) 10 (100.0)

男性 10 (9.9) 7 (13.7) 0 (0.0)

0 (0.0) 4 (7.8) 0 (0.0)

不知道/不知道/没有回答 5 (5.0) 1 (2.0) 0 (0.0)
教育、n (%)



研究生学位 16 (15.8) 17 (33.3) 7 (70.0)

大学学位 33 (32.7) 9 (17.6) 1 (10.0)

大学文凭 24 (23.8) 12 (23.5) 1 (10.0)

贸易/职业学校 6 (5.9) 5 (9.8) 1 (10.0)

高中 18 (17.8) 7 (13.7) 0 (0.0)

小学 3 (3.0) 0 (0.0) 0 (0.0)

没有回答 1 (1.0) 1 (2.0) 0 (0.0)
收入(CAD)美元cn (%)



0 - 29999美元 19日(18.8) 7 (13.7) 2 (20.0)

30000 - 59999美元 19日(18.8) 12 (23.5) 0 (0.0)

60000 - 89999美元 24 (13.9) 5 (9.8) 2 (20.0)

90000 - 119999美元 12 (11.9) 7 (13.7) 3 (30.0)

120000 - 149999美元 5 (5.0) 2 (3.9) 0 (0.0)

150000美元或更多 15 (14.9) 9 (17.6) 2 (20.0)

不知道/宁愿不透露 17 (16.8) 9 (17.6) 1 (10.0)
婚姻状况,n (%)



结婚/在一个关系 47 (46.5) 27日(54.0) 7 (70.0)

离婚/分居 14 (13.9) 2 (4.0) 1 (10.0)

单/从未结婚 37 (36.6) 17 (34.0) 1 (10.0)

丧偶的 2 (2.0) 2 (4.0) 1 (10.0)

不知道/没有回答 1 (1.0) 2 (4.0) 0 (0.0)
感知压力水平(感知压力量表评分范围),n (%)

低压力(0 - 13) 8 (9.0) 6 (12.5) 0 (0.0)

适度的压力()14日至26日 44 (49.4) 25 (52.1) 6 (60.0)

高感知压力(27-40) 37 (41.6) 17 (35.4) 4 (40.0)
系统可用性量表,n (%)



平均以上(大于68) 42 (48.3) 28日(58.3) 7 (70.0)

低于平均水平(低于68) 45 (51.7) 20 (41.7) 3 (30.0)

一个对于变量年龄、感知压力水平和系统可用性量表发现,N值分别为99、89和87。

b对于年龄、婚姻状况、感知压力水平和系统可用性量表发现,N值分别为47、50、48和48。

c货币汇率为1加元= 0.77美元。

调查结果

共有152名参与者完成了调查。大多数参与者认为自己是白人和女性,至少拥有大学学位。根据PSS-10分数,大多数参与者在访问网站时都经历了中等到高度的压力。

2021年2月20日至2021年4月23日(网站更新前)的调查数据显示,参与者报告的平均SUS得分为66.44 (SD为16.72;差10 - 97.5;N = 87)。根据SUS,这个分数低于网站的平均水平。得分较低的具体SUS项目包括网站整合良好(41/87,47%同意或非常同意)和频繁使用网站的可能性(34/87,39%同意或非常同意)。

网站修改后,从2021年4月24日至2021年6月4日的调查数据显示,参与者报告的SUS平均得分为70分(SD 17.02;差22.5—-100;N = 48)。根据SUS,这个分数高于网站的平均水平。网站整合良好(31/48,65%同意或非常同意)和频繁使用网站的可能性(26/48,55%同意或非常同意)的得分有所提高。

第二阶段:面试结果

受访者的背景资料

访谈参与者(n=10)在访问网站时正经历着中高水平的压力。4名参与者有精神病史或有精神疾病的家庭成员接受了CAMH的服务。在其家庭成员接受CAMH服务的2名参与者中,一名是基本工作人员,另一名是正在寻找精神卫生资源的退休保健人员。这两名被诊断患有精神疾病的参与者最近感染了COVID-19并已康复。两人都表示,他们是CAMH网站的常客,并访问CAMH COVID-19页面以获取COVID-19相关信息。其他五名参与者是卫生相关领域的研究人员或专业人员,为需要精神卫生服务的人提供服务。其中一名参与者是带着年幼孩子的全职父母。

功能、易用性和设计

大多数接受采访的参与者报告称,他们访问过CAMH COVID-19网站一两次,并在那里寻找如何应对压力的资源(为自己或为他人)。所有参与者(n=10)都表示,他们对网站的第一印象是正面的,网站上有很多有用的资源。总体来说,参与者觉得这个网站在视觉上很有吸引力,也喜欢图片的多样性。

我喜欢这个网站的整体设计和美感。所以,我发现里面所有的照片都很多样化,就人们的样子和他们做的不同活动而言。他们看起来都很有共鸣....
(29岁的参与者)

一些参与者(n=5)报告说,这些信息是有帮助的,但组织得不好。两位参与者特别提到,他们被网站上的大量信息压垮了。

嗯,我的第一印象是,它真的是压倒性的。有这么多的选择....很好,我的意思是有这么多选择很好,但因为大流行,我认为人们已经不知所措了,那里有很多好东西。
(72岁的参与者)

4位与会者提到的另一个共同主题是,许多可能从网站上的信息获益的用户可能无法访问这些信息。

我的父母是难民,他们很难理解这些词,比如耻辱和偏见,我不知道这些词对他们有什么意义。也许让事情变得更通俗一点。如果你只是想对大众讲话,而不是在临床环境中的人。或者有心理健康和社会工作的背景。
(35岁的参与者)

此外,有3名与会者提到,有必要向可能最需要该网站的人传播该网站。

举个例子,我的搭档,他处理精神疾病和无家可归问题已经有十多年了,他甚至不知道这个网站的存在。
(43岁的参与者)
网站与压力

当被问及是否将该网站作为他们所在省份的人们的减压策略时,所有参与者(n=10)都回答说,该网站有可能为那些因压力相关问题寻求帮助的人减轻压力。所有参与者都来自安大略。与会者指出,CAMH是一个值得信赖的权威机构,人们可以在这里获得基于证据的资源而不做任何判断。

我觉得这很好,我觉得这很好,你知道,你是一个值得信任的权威。我认为这很好,我认为这真的很好,这个网站已经建立起来了。因为,你知道,我的意思是人们需要,需要从一个值得信任的地方得到东西。一个他们不会被评判的地方,评判是另一个重要的东西,对吧。
(72岁的参与者)
我想,我真的很喜欢你可以参加考试。你知道…你知道我很熟悉GAD7,因为我是一个心理学家....就像,很高兴看到,有循证研究支持的措施……
(37岁的参与者)

与谷歌Analytics的数据一致,参与者提到他们访问最多的部分是“压力和焦虑”。卫生专业人员(n=3)表示,在本页上找到的自我评估资源将对其客户有帮助。

我想,当我访问这个网站时,那里有各种各样的建议,比如你可以阅读的小专栏,关于如何保持活跃,如何减少压力和倦怠等等。你可以参加不同的小测试。所以,我认为这是非常好的布局。是的。我的意思是,不是为我自己,因为我已经,你知道,我有点像在这个点上,我有点焦虑,因为我的职业,但对于客户和诸如此类的,我认为这对他们有帮助。
(37岁的参与者)

一位单身的参与者提到,她找到了所需的压力资源,并能够采用网站上列出的压力和应对策略。这与家长们的说法正好相反,如下所述。

嗯,非常好。因为它告诉你,你需要让自己忙起来。你需要享受一些东西,比如,你知道的爱好....是的。肯定。我认为对于像我这样独自生活的人来说。所以,我读那篇文章,基本上是为了让我作为一个单身人士了解目前的情况。
(62岁的参与者)

有两名与会者提到需要为父母量身定制的信息如下:

我认为如果你为父母设立一个部分我认为那肯定会很有帮助。当你有孩子的时候,你要对别人负责,而不是自己。这非常困难,因为没有休息,所以这是很有用的,但对我来说,这还不够,因为你不能真正控制你的孩子。所以,就像只有这么多,只有这么多是你能控制的。正确的。所以,如果你是一个单身的人,没有其他人依赖你,我认为应对策略是很好的。
(32岁的参与者)

压力水平较高或描述自己情况较复杂的参与者指出,网站上的压力管理策略对“正常压力”有效,但这些策略无法解决COVID-19大流行期间的特定心理健康需求。

我认为,COVID-19带来的压力非常……非常独特,事实上,显然我们中没有人真正经历过这样的大流行。但我认为正常的应对机制可能不起作用,这只是因为COVID的性质。你无法摆脱大流行这是无法逃避的。所以,我觉得压力管理策略是非常好的压力管理策略如果你有正常的压力。
(32岁的参与者)

3名与会者的建议是设置一个功能,允许用户连接到实时咨询师,以获得更个性化的支持,以便获得即时帮助。虽然无法接触到现场咨询师,但该网站包括一个在线点对点“讨论论坛”,在工作时间管理员可以提供一般信息,并鼓励使用现有资源。然而,10名受访者中只有1人知道该网站的论坛功能。

你唯一可以改进的是,如果你能把一个人和一个活人联系起来。我认为它应该引导某人,如果某人真的需要和某人交谈,我认为他们应该能够....相信我,我试过很多次了,我认为他们应该能够和一个活生生的人联系。因为绝望的人需要人性。
(72岁的参与者)
我觉得我遇到的一件大事就是,没有办法马上得到帮助。
(35岁的参与者)

主要研究结果

该研究的目的是收集有关CAMH COVID-19网站的覆盖范围、可用性和用户感知的信息。该网站旨在为因COVID-19而经历轻度至中度痛苦的人提供数字、简单语言、非污名化的心理教育资源。

与同类网站相比[38], CAMH COVID-19网站[22]是一个高度访问的网站,在10个月内有146,978名独立用户访问该网站。在146,978名用户中,大多数来自多伦多和渥太华,这与一项评估加拿大心理健康网站门户网站的类似研究结果一致。39],并可能反映出在第二波大流行期间表示心理健康状况较差或尚可的安大略省居民的百分比有所上升[40].访问次数最多的部分是主页[22],其次是“应付压力及焦虑”[37]部分,分享不同的应对方法和策略,并包括各种自我评估测试,以帮助用户了解/确定他们正在经历的压力和焦虑水平,如PSS和GAD-7。其他研究也有类似的发现,首页被浏览的频率最高[4142],第二个是“自检页面,用户可在此完成抑郁筛查工具”[41].

在2021年4月23日做出修改后,用户对网站的可用性评价更高。在调查的第一阶段(2021年2月20日至2021年4月23日),SUS的平均得分为66.44 (SD为16.72)。网站修改后,SUS提高了3.6分(SUS评分70分,SD为17.02分)。这些分数都与可接受的范围相关[314344],并与其他精神健康网站的评估结果相似[45].

访谈参与者表示,在该网站的第一次迭代中,他们被大量的信息和大量的文本页面弄得不知所措。其他研究也证实,过多的文本干预会使内容难以消化,从而成为使用的障碍[46],应考虑与页面复杂性、导航简单性和可理解性相关的网站设计,以“减少有效使用电子健康应用程序所需的认知努力”[47].

人口统计数据显示,大多数网站用户是20到59岁之间受过高等教育的白人女性。这与其他研究的结果一致,即社会经济地位高的18-64岁女性和成年人在使用与健康内容相关的网站方面比男性和其他年龄组更积极。[3948-54].该网站的覆盖面可能反映了最近的证据,表明2020年在第二波大流行期间,女性意识到自己的心理健康状况下降,与男性相比,她们的心理健康结果更糟[1254055].此外,该网站覆盖范围的性别差异可能是由于男性不愿获得心理保健服务,因为干预措施对男性身份相关因素不够敏感[56].鉴于COVID-19对不同群体的不成比例的负面影响[40,就有必要触及更广泛的受众。有针对性的战略需要由性别敏感服务提供信息[57,并需要向受2019冠状病毒病大流行影响不成比例的社区,如老年人、土著人和其他种族和民族少数群体,提供精神卫生服务[58].然而,研究表明,这些社区(老年人、土著人民和其他种族和少数民族群体)最不可能在网上寻求健康信息[255254].为提高不同人群对电子精神健康的用户参与度和技术接受度而提出的策略包括实施以人为本的设计方法,在开发过程中自始至终将设计师和用户结合在一起[59].

访谈结果显示,大多数参与者对该网站感觉积极,因为它是一个值得信赖的心理健康信息来源,并有有益的减压功能。研究证实,在网上寻求精神卫生资源的个人关心电子精神卫生的可信性和可信性,以及自助策略的有效性[60-62],另一项研究表明,对单一在线来源缺乏信任会导致健康信息搜索者的压力[63].

一些受访者希望与现场咨询师联系,以获得更个性化的支持和即时帮助。而本网站“讨论区”的版主[64]提供信息支持,虽然不是实时咨询和支持,仅限于办公时间,但大多数受访者都不知道这个功能。这可能与网站的设计和参与者的反馈有关,他们觉得网站过于拥挤,文字过多。让讨论论坛更加可见可能是重要的,特别是考虑到研究已经表明,设计良好的自我指导干预可以在不增加人力支持和相关成本的情况下获得成功[65-68].

该网站旨在满足低至中等压力水平的个人的需求。然而,研究结果表明,大多数访问该网站的人都有中高水平的压力。需要进一步的研究来了解压力水平低的个体的特征和他们对网站的低参与度。技术支持的护理协调,包括使用在线技术为低至中度痛苦水平的患者提供多学科团队护理,在改善人群心理健康方面具有巨大潜力[69].需要对网站进行改进,以满足压力水平高的个人的需求,因为研究表明,有更严重精神卫生症状的个人有动机使用数字精神卫生干预措施,但症状严重程度也可能形成参与的障碍[23].有指导的方法,包括根据用户的个人喜好提供相关的和可定制的内容,并提供技术援助或培训,可能适合于解决压力较大的个人的心理健康问题[23].

我们的研究结果表明,CAMH COVID-19网站有助于传播有关基于证据的减压策略的信息。该网站是一个访问率很高的网站,可用性高于平均水平。用户发现该网站是一个有用和值得信赖的心理健康信息来源。这些建议表明,网站的设计和覆盖范围需要更紧密地与用户需求保持一致,并与更多和更公平地获得精神卫生保健的机会保持一致。这些评价应以面向公平的方法进行。例如,对接触过网站的人(即接触范围)的检查,让我们明白在未来的任何更新中,需要关注公平的接触范围。这次评估的反馈将有助于网站的进一步改进,这对公众和医护专业人员都是有益的。

优势和局限性

这个项目的一个重要优势是混合方法设计,因为它让我们了解了安大略省COVID-19第一波期间的复杂压力问题,并了解用户需要什么作为网站干预的一部分。这个项目的另一个优点是,基于用户的直接反馈,我们能够对网站的可用性做出显著的改进。我们的研究有几个局限性。首先,我们的样本很方便,与我们的调查和采访中的用户数量相比,受访者数量较少。因此,他们可能不是具有代表性的样本,有可能是那些认为从该网站获得了好处的人更有可能参与调查和采访。此外,同意接受采访的小样本人群(全部为女性)也限制了根据人口统计学或其他感兴趣的变量对调查结果进行分层的能力。其次,参与者在使用网站并完成调查数周后接受了采访。因此,对一些人来说,回忆起项目的细节是困难的。第三,缺乏关于网站效果的纵向跟踪数据。我们的研究仅限于网站的覆盖范围、可用性和用户感知,并没有评估临床疗效。 Lastly, anxiety and depression were not addressed, as the developers felt that individuals with these diagnosable illnesses needed either in-person or virtual clinical services.

结论

在受人尊敬的机构的网站上添加减压资源可能是在危机时期提高认识和获得循证减压资源的一种实际方法,在危机时期,通常的卫生保健联系被严重中断。需要作出努力,确保更广泛地利用这些资源,特别是让不同的人口获得这些资源。需要对精神卫生服务系统中电子精神卫生举措的健康影响和作用进行进一步研究。鉴于数字精神卫生技术的前景和大量投资,越来越有必要对其进行低强度心理教育干预的评估。

致谢

我们感谢所有参与这项研究的人。我们还要感谢Freni Jivani对组织应用内分析数据的支持。我们感谢尼古丁依赖服务部门的Chantal Fougere、Mathangee Lingam、Stephanie Duench、Iqra Ashfaq、Lenka Vojtila、Huma Taj和Victoria Kim在网站讨论区做出的贡献。我们感谢来自IMG的Shirley Lin和Alan Tang(基础设施支持),Rino La Grassa和Gurpal Bubbra(应用程序)和Anthony Gallucci(网页)为我们提供技术支持;来自公共事务部的萨曼莎·德莱纳多、布鲁诺·马西亚、帕里斯·塞芒斯和米格尔·阿曼特;和Cameron Norman (https://www.cense.ca/contact/principal/)负责网站的审核和更新。

作者的贡献

PS概念化了在大流行期间为有轻度至中度痛苦的人提供的资源;PS和RD设计网站;PS和NM根据RD、GS和SAK的输入对评估进行了概念化、设计和监督。AG和AS负责协调研究人员的招募和面试。AG和AS在NM的监督下对访谈进行编码和分析。NM, AG和AS起草了手稿。所有作者都参与了对稿件的批判性修改,并阅读并批准了最终稿件。

的利益冲突

PS报告说,从成瘾和精神卫生中心、加拿大卫生部、安大略省卫生部、加拿大卫生研究院、加拿大药物使用和成瘾中心、加拿大公共卫生局、医学精神病学联盟、加拿大癌症协会研究所、安大略癌症护理中心和国家卫生研究院获得赠款、工资和/或研究支助。PS还报告了从以下商业组织获得的资金和/或酬金:辉瑞公司/加拿大和以患者为中心的结果研究所。通过公开招标程序,强生、诺华和辉瑞公司是记录供应商,为PS作为主要研究人员或联合研究人员的研究提供免费或折扣的戒烟药物治疗。

  1. 熊洁,Lipsitz O, Nasri F, Lui LMW, Gill H, Phan L,等。COVID-19大流行对普通人群心理健康的影响:一项系统综述。J影响Disord 2020年12月01;277:55-64 [免费的全文] [CrossRef] [Medline
  2. 罗维C,基翁-杰拉德J,吴CF,吉尔伯特TH,罗斯KM。COVID-19大流行心理健康轨迹:来自主要从阿尔伯塔省和安大略省招募的加拿大人样本的模式。加拿大行为科学杂志,加拿大行为科学杂志,2022年1月27日,1665682。[CrossRef
  3. Cindrich SL, Lansing JE, Brower CS, McDowell CP, Herring MP, Meyer JD。covid -19前后公共卫生限制与心理健康之间的关系:简要研究报告。前方公共卫生2021;9:619129 [免费的全文] [CrossRef] [Medline
  4. Chum A, Nielsen A, Bellows Z, Farrell E, Durette P, Banda JM等。加拿大安大略省与各种COVID-19限制措施相关的公众反应变化:使用社交媒体时间序列数据的观察性信息监测研究J Med Internet Res 2021年8月25日;23(8):e28716 [免费的全文] [CrossRef] [Medline
  5. Shah SMA, Mohammad D, Qureshi MFH, Abbas MZ, Aleem S.在冠状病毒病(COVID-19)大流行期间,全球人群中抑郁、焦虑和压力的患病率、心理反应和相关相关因素。社区卫生J 2021年1月;57(1):101-110 [免费的全文] [CrossRef] [Medline
  6. Hawryluck L, Gold WL, Robinson S, Pogorski S, Galea S, Styra R.检疫隔离对SARS的控制和心理影响,多伦多,加拿大。新兴传染病2004年7月;10(7):1206-1212 [免费的全文] [CrossRef] [Medline
  7. 心理健康与COVID-19:大流行影响的早期证据:科学简报,2022年3月2日。世界卫生组织,2022年。URL:https://www.who.int/publications/i/item/WHO-2019-nCoV-Sci_Brief-Mental_health-2022.1[2022-08-20]访问
  8. Sorkin DH, Janio EA, Eikey EV, Schneider M, Davis K, Schueller SM,等。2019冠状病毒病大流行期间美国数字精神卫生工具和技术的使用增加:调查研究。J Med Internet Res 2021年4月16日;23(4):e26994 [免费的全文] [CrossRef] [Medline
  9. Mahoney AEJ, Elders A, Li I, David C, Haskelberg H, Guiney H,等。两个国家的故事:澳大利亚和新西兰在COVID-19大流行期间增加了对数字精神卫生服务的利用。互联网inter2021年9月;25:100439 [免费的全文] [CrossRef] [Medline
  10. 曹硕,陈浩,Tisseverasinghe T,杨颖,李丽,Butt ZA。社交媒体在COVID-19时期告诉我们的是:范围审查。《柳叶刀数字健康》2021年3月3日(3):e175-e194。[CrossRef
  11. Htay MNN, Parial LL, Tolabing MC, Dadaczynski K, Okan O, Leung AYM,等。东亚和东南亚大学生的数字卫生素养、在线信息寻求行为以及对Covid-19信息的满意度PLoS One 2022;17(4):e0266276 [免费的全文] [CrossRef] [Medline
  12. Su Z, McDonnell D, Wen J, Kozak M, Abbas J, Šegalo S,等。COVID-19媒体报道对心理健康的影响:需要有效的危机传播实践。2021年全球卫生1月05日;17(1):4 [免费的全文] [CrossRef] [Medline
  13. Sockalingam S, Arena A, Serhal E, Mohri L, Alloo J, Crawford A.省级初级保健精神卫生能力建设:ECHO项目精神卫生方案的评价。学术精神病学2018年8月42(4):451-457。[CrossRef] [Medline
  14. 解决获取差距:利用加拿大电子心理健康的潜力。加拿大精神卫生委员会,2017年。URL:https://mentalhealthcommission.ca/resource/addressing-the-access-gap-leveraging-the-potential-of-e-mental-health-in-canada/[2022-08-20]访问
  15. 布坎南,科尔森,NS。访问牙科焦虑在线支持小组:动机和经验的探索性质的研究。2007年6月;66(3):263-269。[CrossRef] [Medline
  16. Meier A, Lyons EJ, Frydman G, Forlenza M, Rimer BK《癌症幸存者如何在癌症相关的互联网邮件列表中提供支持》。J Med Internet Res 2007年5月14日;9(2):e12 [免费的全文] [CrossRef] [Medline
  17. Eysenbach G, Powell J, Englesakis M, Rizo C, Stern A.与健康相关的虚拟社区和电子支持小组:在线点对点交互影响的系统综述。BMJ 2004年5月15日;328(7449):1166 [免费的全文] [CrossRef] [Medline
  18. Klemm P, Bunnell D, Cullen M, Soneji R, Gibbons P, Holecek a .在线癌症支持小组:研究文献综述。计算机信息Nurs 2003;21(3):136-142。[CrossRef] [Medline
  19. 关注残疾问题的在线自助小组的帮助过程探索。卫生社会工作1999年8月24(3):220-231。[CrossRef] [Medline
  20. Bäuerle A, Jahre L, Teufel M, Jansen C, Musche V, Schweda,等。评估基于正念和基于技能的电子心理健康“应对它”干预以减少COVID-19时期的心理困扰:双中心纵向研究的结果前沿精神病学2021;12:768132 [免费的全文] [CrossRef] [Medline
  21. 成瘾和心理健康中心URL:https://www.camh.ca/[2022-08-20]访问
  22. 精神卫生与COVID-19大流行。成瘾和心理健康中心URL:https://www.camh.ca/en/health-info/mental-health-and-covid-19[2022-08-20]访问
  23. Borghouts J, Eikey E, Mark G, De Leon C, Schueller SM, Schneider M,等。用户参与数字心理健康干预的障碍和促进因素:系统回顾。J Med Internet Res 2021年3月24日;23(3):e24387 [免费的全文] [CrossRef] [Medline
  24. Chang BP, Kessler RC, Pincus HA, Nock MK. 2019冠状病毒病时代心理健康的数字方法。BMJ 2020年6月29日;369:m2541。[CrossRef] [Medline
  25. Strudwick G, Sockalingam S, Kassam I, Sequeira L, Bonato S, Youssef A,等。在COVID-19大流行期间支持加拿大人口心理健康的数字干预措施:快速回顾。JMIR Ment Health 2021 3月02;8(3):e26550 [免费的全文] [CrossRef] [Medline
  26. Balcombe L, De Leo D.数字心理健康的挑战和解决方案的前景。JMIR Ment Health 2021 3月29日;8(3):e26811 [免费的全文] [CrossRef] [Medline
  27. Balcombe L, De Leo D. COVID-19中数字精神卫生服务的综合蓝图。JMIR Ment Health 2020年7月22日;7(7):e21718 [免费的全文] [CrossRef] [Medline
  28. 王晓燕,王晓燕。混合方法在卫生服务研究中的应用。《卫生服务与资源政策》2008年4月13(2):92-98。[CrossRef] [Medline
  29. Cohen S, Kamarck T, Mermelstein R.感知压力的全球测量。《卫生社会行为杂志》1983年12月24(4):385-396。[Medline
  30. 系统可用性量表(SUS)。gov。URL:https://www.usability.gov/how-to-and-tools/methods/system-usability-scale.html[2022-08-20]访问
  31. Chin WSY, Kurowski A, Gore R, Chen G, Punnett L, SHIFT研究团队。使用移动应用程序对医疗保健干预过程进行评估:开发和可用性研究。JMIR Form Res 2021年10月28日;5(10):e20739 [免费的全文] [CrossRef] [Medline
  32. 定性研究的样本量。1995年4月18日(2):179-183。[CrossRef] [Medline
  33. 人-系统交互工效学。第420部分:物理输入设备的选择ISO。URL:https://www.iso.org/standard/52938.html[2022-08-20]访问
  34. 质性研究中的编码器可靠性:争论和实践指南。国际定性方法杂志2020年1月22日;19:160940691989922。[CrossRef
  35. Braun V, Clarke V,在心理学中使用主题分析。心理学定性研究2006年1月3(2):77-101。[CrossRef
  36. 研究伦理。成瘾和心理健康中心URL:https://www.camh.ca/en/science-and-research/research-ethics[2022-08-20]访问
  37. 应对压力和焦虑。成瘾和心理健康中心URL:https://www.camh.ca/en/health-info/mental-health-and-covid-19/coping-with-stress-and-anxiety[2022-08-20]访问
  38. 李志军,李志军,李志军,Sänger S, Härter M . Tlach L.心理健康电子门户网站的开发与过程评价。告知卫生社会护理2016;41(3):267-285。[CrossRef] [Medline
  39. 郑东,郑敏,St-Jean M, Jalali A. eMentalHealth的评价。c一个,一个Canadian Mental Health Website Portal: Mixed Methods Assessment. JMIR Ment Health 2019 Sep 06;6(9):e13639 [免费的全文] [CrossRef] [Medline
  40. 2019冠状病毒病大流行期间自我感知的心理健康和心理卫生保健需求。加拿大统计局。URL:https://www150.statcan.gc.ca/n1/pub/45-28-0001/2021001/article/00031-eng.htm[2022-08-20]访问
  41. 奥格罗德尼祖克,贝哈里J,奥利夫JL。HeadsUpGuys:一个男性抑郁症电子心理健康资源的5年网络分析评价。Am J men Health 2021年12月03日;15(6):15579883211063322 [免费的全文] [CrossRef] [Medline
  42. King K, Schlichthorst M, Turnure J, Phelps A, Spittal MJ, Pirkis J.评估一个关于男子气概和自杀的网站的有效性,以促进寻求帮助。健康促进杂志2019年9月30日(3):381-389。[CrossRef] [Medline
  43. Bangor A, Kortum P, Miller J.确定个人SUS得分的含义:添加形容词评级量表。可用性研究学报2009;4(3):114-123 [免费的全文
  44. Mol M, van Schaik A, Dozeman E, Ruwaard J, Vis C, Ebert DD, Ince,等。在使用基于互联网的抑郁症干预的专业人员中,系统可用性量表的维度:验证性因素分析。BMC Psychiatry 2020 5月12日;20(1):218 [免费的全文] [CrossRef] [Medline
  45. Radovic A, Gmelin T, Hua J, Long C, Stein BD, Miller E.支持我们有价值的青少年(SOVA),一个面向抑郁和/或焦虑青少年的社交媒体网站:技术可行性、可用性和可接受性研究。JMIR Ment Health 2018年2月26日;5(1):e17 [免费的全文] [CrossRef] [Medline
  46. Eccles H, Nannarone M, Lashewicz B, Attridge M, Marchand A, Aiken A,等。使用基于网络的心理健康项目预防抑郁症的障碍:定性研究。JMIR Form Res 2021年7月15日;5(7):e16949 [免费的全文] [CrossRef] [Medline
  47. Rotondi AJ, Spring MR, Hanusa BH, Eack SM, Haas GL.设计电子健康应用程序以减少严重精神疾病患者的认知努力:页面复杂性,导航简单性和可理解性。JMIR Hum Factors 2017 1月05日;4(1):e1 [免费的全文] [CrossRef] [Medline
  48. 鲍曼E, Czerwinski F, Reifegerste D.网上健康信息获取的性别决定因素和模式:来自具有代表性的德国健康调查的结果。J Med Internet Res 2017 Apr 04;19(4):e92 [免费的全文] [CrossRef] [Medline
  49. 德国在互联网上搜索健康信息的性别差异和虚拟医患关系:男性和女性如何差异及其原因的探索性结果。J Med Internet Res 2015 Jun 22;17(6):e156 [免费的全文] [CrossRef] [Medline
  50. 加拉格尔S,多尔蒂DT。在线搜索健康信息:在线健康搜索者的特征。J Evid Based Med 2009五月;2(2):99-106。[CrossRef] [Medline
  51. 美国成年人电子健康行为的性别异同。Telemed J E Health 2018 5月;24(5):335-343。[CrossRef] [Medline
  52. 尹浩,张宇,Vaughan PW, Garcia M.老年人使用互联网获取健康信息:基于种族/民族和社会经济地位的数字鸿沟。J applied Gerontol 2020 Jan;39(1):105-110。[CrossRef] [Medline
  53. Gandrakota N, Ali MK, Shah MK.《有和没有心血管危险因素的美国人口中卫生信息技术使用趋势,2012-2018年:来自全国健康访谈调查的证据》。2021年9月30日;7(9):e29990 [免费的全文] [CrossRef] [Medline
  54. 陈晓明,陈晓明,陈晓明。健康相关技术使用中的数字鸿沟:种族/民族的意义。老年病学2019 Jan 09;59(1):6-14。[CrossRef] [Medline
  55. 加拿大人的焦虑、抑郁和孤独感达到了2020年春季以来的最高水平。成瘾和心理健康中心,2022年。URL:https://www.camh.ca/en/camh-news-and-stories/anxiety-depression-loneliness-among-canadians-spikes-to-highest-levels[2022-08-20]访问
  56. Rice SM, Oliffe JL, Kealy D, Seidler ZE, Ogrodniczuk JS。男性抑郁症的求助:有症状男性的态度和结构障碍。J Prim Care社区卫生2020;11:2150132720921686 [免费的全文] [CrossRef] [Medline
  57. Oliffe JL, Rice S, Kelly MT, Ogrodniczuk JS, Broom A, Robertson S,等。加拿大年轻男性中与健康相关的男性价值的混合方法研究。男性心理学2019年7月20日(3):310-323。[CrossRef
  58. Jenkins EK, McAuliffe C, Hirani S, Richardson C, Thomson KC, McGuinness L,等。COVID-19大流行在加拿大的早期和不同的心理健康影响:来自全国代表性横断面调查第一波的发现。Prev Med 2021 Apr;145:106333 [免费的全文] [CrossRef] [Medline
  59. 韦利斯,Boudhraâ S,杜蒙M.数字心理健康干预的以人为中心的设计方法:探索性映射评论。JMIR Ment Health 2022年6月07;9(6):e35591 [免费的全文] [CrossRef] [Medline
  60. 澳大利亚的电子心理健康:互联网和相关技术对政策的影响。澳大利亚堪培拉:联邦卫生和老龄部;2002.
  61. 来自互联网对精神障碍患者的支持:电子精神健康服务提供的利与弊。《公共卫生》2014;2:65 [免费的全文] [CrossRef] [Medline
  62. Lattie EG, Adkins EC, Winquist N, Stiles-Shields C, Wafford QE, Graham AK。大学生抑郁、焦虑和心理健康的数字心理健康干预:系统综述。J Med Internet Res 2019 7月22日;21(7):e12869 [免费的全文] [CrossRef] [Medline
  63. Choudhury A, Asan O, Alelyani T.探索互联网、护理质量和沟通在塑造心理健康中的作用:健康信息全国趋势调查分析。IEEE生物医学健康信息2022年1月26(1):468-477。[CrossRef] [Medline
  64. 2019冠状病毒病论坛。成瘾和心理健康中心URL:https://covid19.camhx.ca/mod/forum/view.php?id=1[2022-08-20]访问
  65. Renfrew ME, Morton DP, Northcote M, Morton JK, Hinze JS, Przybylko G.非临床队列数字心理健康干预中参与者对促进因素和坚持障碍的感知:内容分析。J Med Internet Res 2021年4月14日;23(4):e25358 [免费的全文] [CrossRef] [Medline
  66. Shim M, Mahaffey B, Bleidistel M, Gonzalez A.基于互联网的抑郁和焦虑障碍心理干预(IPIs)背景下的人类支持因素的范围综述。临床精神病学Rev 2017 11月57:129-140。[CrossRef] [Medline
  67. 鲍梅斯特H, Reichler L, Munzinger M,林杰。基于网络的心理健康干预指南的影响——一项系统综述。2014年10月1(4):205-215。[CrossRef
  68. Heber E, Ebert DD, Lehr D, Cuijpers P, Berking M, Nobis S,等。基于网络和计算机的压力干预的好处:系统回顾和元分析。J Med Internet Res 2017 Feb 17;19(2):e32 [免费的全文] [CrossRef] [Medline
  69. Iorfino F, Occhipinti J, Skinner A, Davenport T, Rowe S, Prodan A,等。技术支持的护理协调对复杂心理健康系统的影响:一个局部系统动力学模型。J Med Internet Res 2021年6月30日;23(6):e25331 [免费的全文] [CrossRef] [Medline


CAMH:成瘾和心理健康中心
GAD-7:广泛性焦虑症Disorder-7
PSS-10:感知到的压力Scale-10
搬运工:研究电子数据采集
SUS:系统可用性程度


编辑:J Torous;提交27.05.22;R Poss-Doering, L Balcombe的同行评议;评论作者01.07.22;修订版收到05.08.22;接受07.08.22;发表26.08.22

版权

©Nadia Minian, Allison Gayapersad, Anika sava, Rosa Dragonetti, Sean A Kidd, Gillian Strudwick, Peter Selby。最初发表于JMIR心理健康(https://mental.www.mybigtv.com), 2022年8月26日。

这是一篇开放获取的文章,根据创作共用署名许可协议(https://creativecommons.org/licenses/by/4.0/)发布,该协议允许在任何媒体上不受限制地使用、分发和复制,但必须适当引用《JMIR心理健康》杂志首次发表的原文。必须包括完整的书目信息,https://mental.www.mybigtv.com/上的原始出版物链接,以及版权和许可信息。


Baidu
map