这是一篇开放获取的文章,根据创作共用署名许可协议(https://creativecommons.org/licenses/by/4.0/)的条款发布,允许在任何媒介上不受限制地使用、分发和复制,前提是正确引用了首次发表在JMIR Formative Research上的原创作品。必须包括完整的书目信息,https://formative.www.mybigtv.com上的原始出版物的链接,以及此版权和许可信息。
COVID雷达应用程序是作为一种基于人群的监测工具开发的,用于识别高危人群和地区,以应对COVID-19大流行。这款应用号称完成了850万份问卷,拥有28万独立用户。虽然COVID雷达应用程序是人口级监测的有效工具,但高用户参与度对COVID雷达应用程序成功保持有效性至关重要。
本研究旨在确定COVID雷达应用程序的优化目标,以提高其可接受性、依从性和包容性。
COVID雷达应用程序的主要组成部分是一份自我报告问卷,用于评估COVID-19症状和社交距离行为。共进行了3个定性亚研究。首先,对应用程序的最终用户(N=14)进行了3次半结构化焦点小组访谈,以收集用户体验信息。使用框架方法对输出进行转录和主题编码。其次,对1080封最终用户电子邮件进行了类似的定性专题分析。第三,可用性测试以一对一的方式与4个文化水平较低的人进行。
所有三个子研究都在设计和内容方面确定了优化目标。亚研究1的结果显示,被试对app的评价普遍是积极的。他们表示,这款应用对用户非常友好,对其设计和功能都很满意。参与者使用这款应用的主要动机是为科学做出贡献。与会者建议增加激励工具,以刺激用户参与。一场更大规模的全国宣传活动被认为可能有助于增加用户数量。应用程序内的更新通知用户有关项目及其产出,激励用户继续使用应用程序。来自子研究1和2的自我报告问卷的反馈主要涉及问题的内容和措辞。此外,应用程序中允许用户将自己的症状和行为与同龄人进行比较的部分被发现是次优的,因为难以解释应用程序中呈现的数字。最后,子研究3的输出产生了主要与简化文本相关的建议,以使其更容易为文化水平较低的个人所理解。
应用程序使用的便利性、能够对应用程序体验进行个人调整,以及考虑持续使用应用程序的激励因素(即利他主义和集体主义)被发现对于获得和维持COVID雷达应用程序的活跃用户群体至关重要。此外,似乎需要为文化水平低的个人增加公共卫生工具的可访问性。这些结果可以用来改善现在和未来的公共卫生应用程序,提高其用户群体的代表性和用户参与度,最终提高工具的有效性。
自2019年12月以来,全球一直在抗击SARS-CoV-2 (COVID-19)。具体而言,荷兰于2020年2月发现了第一例病例,迄今已导致260万例确诊病例和1.9万人死亡[
自大流行开始以来,已为各种目标实施了移动应用程序,如风险评估和决策以及自我管理和自我监测症状[
荷兰开发了一款基于智能手机的监控应用程序COVID雷达应用程序。该应用程序的目标是通过COVID症状的自我报告来预测未来的COVID热点地形,使地方或国家政府能够进行干预,例如通过通知公众或实施地方限制。该应用程序允许频繁匿名自愿自我报告与covid -19相关的症状和行为(只要求用户提供邮编、年龄范围、性别和职业)。这款应用程序是在2020年春天荷兰爆发第一轮COVID-19浪潮期间开发的。除其他功能外,该应用程序包含一份简短的监测问卷(≥20个问题),要求用户自我报告其COVID-19相关症状、社交距离行为、COVID-19状态和疫苗接种状态。该应用程序还为用户提供关于他们报告的社交距离行为(例如,在1.5米内遇到的人数和在室外待的小时数)和症状的反馈,使他们能够将这些数据与全国以及特定地理区域内的平均值进行比较。自2020年4月应用程序推出以来,>已完成850万份问卷,>有28万独立用户,其中>有1.3万名用户平均每周至少完成两次问卷。COVID雷达应用程序可以被视为一个公民科学项目,因为它让公众参与科学过程,在这种情况下,在荷兰各地收集大量纵向症状和社会距离数据[
之前的研究表明,COVID雷达应用程序是人群水平监测的有用和有效工具,并可能用于预测当地COVID-19热点[
荷兰卫生研究与发展组织资助了COVID雷达项目,该项目由一个多学科团队组成,旨在在荷兰发生COVID-19第一波疫情后开发一个基于流动性和行为的早期预警系统。本项目的方法结合了莱顿大学医学中心(LUMC) COVID雷达应用程序的人口监测数据中每个4位数邮政编码区域的症状和高风险行为的独特实时空间摘要,以及移动通信数据提供的汇总历史移动信息。该项目的目标之一是优化COVID雷达应用程序,丰富人口监测综合征和行为数据。COVID雷达应用程序和调查的优化目标是最终提高应用程序的可接受性、依从性和包容性,并为改进未来人口级别的健康相关应用程序吸取教训。这随后可以支持国家进一步升级和使用COVID雷达,并提高其用户群体的代表性。此外,这些目标随后可在设计国家监测自我报告数据收集应用程序时用作输入。
本研究的主要目的是确定COVID雷达应用程序的优化目标,以最终提高应用程序的可接受性、依从性和包容性。我们的目标是通过进行3个定性子研究来确定优化目标:(1)通过对新冠雷达应用程序的最终用户进行半结构化焦点小组访谈,收集和分析有关用户体验的深入信息;(2)分析自应用程序推出以来收到的所有终端用户发送给新冠雷达项目团队的电子邮件;(3)语言专家对低文化水平个人的新冠雷达应用程序进行审查和可用性测试。
所有3个子研究均为定性研究调查。第一个子研究包括对COVID雷达最终用户进行3次半结构化焦点小组访谈。第二个子研究包括对终端用户发送给COVID雷达项目团队的所有电子邮件进行定性分析。第三个子研究涉及专家评论和与文化水平较低的个人进行的个人可用性测试。关于每个子研究方法的更多细节可以在下面找到。
COVID雷达应用程序可免费用于iOS和Android系统,并可在2020年4月2日至2022年2月28日期间从苹果应用商店和谷歌Play商店下载。影片一上映,就展开了一场简短的宣传活动。首次使用的用户需要提供以下信息进行注册:(1)性别(男性、女性、其他或未指定),(2)年龄(10年间隔从0到80,且类别≥80),(3)职业(教育、医疗保健、餐饮业或1.5米内与人接触风险较高的其他职业),以及(4)邮政编码的4位数字。
该应用程序由4个部分组成。第一部分是自我报告监测问卷。问卷的截图显示在
COVID雷达应用程序的第二部分是更新部分。本节用于告知用户自我报告问卷的变化或告知用户COVID雷达数据的最新分析结果。
第三部分包含常见问题(FAQs)部分,在这里用户可以找到与应用程序信息相关的众多主题的信息(例如,应用程序的目标),数据保护(例如,确切地收集哪些数据,以及为什么数据将保存5年?),联系信息,以及如何完成问卷调查的说明(例如,哮喘时如何报告症状?)
第四个也是最后一个部分是雷达部分,在这里可以观察到用户报告的症状和社交距离行为的反馈。更具体地说,应用程序用户可以将他们自我报告的社交距离行为(例如,在1.5米内与之交谈的人数)和症状与当地其他用户以及该国的应用程序用户进行比较。关于社交距离行为的反馈是使用滑块提供的,从绿色到棕色,绿色代表
监测部分截图,展示部分自报告监测问卷。
雷达部分的屏幕截图,显示每个地理区域的平均症状的地图,以及与其他用户相比提供症状流行率反馈的滑块。
雷达部分的截图,显示了每个地理区域平均社交距离行为的地图,以及与其他用户相比提供社交距离行为反馈的滑块。
COVID Radar应用程序的用户通过应用程序更新部分的更新被告知即将进行的焦点小组,并被邀请参与。邀请包含了研究目标和相应程序的简要摘要。要参加其中一个焦点小组,个人必须能够阅读、说和理解荷兰语。参与者可以通过发送电子邮件给研究团队来表明他们有兴趣参与。从回答中随机选择了50名潜在参与者,随后要求他们提供即将到来的焦点小组的可用性。共安排了3个焦点小组,以适应不同的时间表。由于可能存在的技术问题,按照以往研究的建议,焦点小组的规模小于线下焦点小组[
在焦点小组开始前两周,参与者收到一封包含所有研究细节和相应焦点小组程序的电子邮件。邮件中还包含一份知情同意书。个人被要求以数字方式或手动方式(即打印、签名和扫描)填写表格,并通过电子邮件将填好的表格退还给研究人员。参与访谈的参与者获得了一张20欧元(24美元)的礼品卡。
制定了半结构化访谈协议,作为焦点小组访谈中相关主题讨论的指导方针。访谈协议包括开放式问题,旨在收集参与者的经验和意见,涉及7个主题:(1)应用程序的一般意见,(2)应用程序的改进建议,(3)对自我报告监测问卷的反馈,(4)对更新部分的反馈,(5)对常见问题的反馈,(6)对雷达部分的反馈,(7)对推送通知的反馈。
2021年5月共开展了3个焦点小组。所有焦点小组访谈都是基于网络的,通过Zoom (Zoom视频通信)进行,并录制音频。访谈由BS主持。NHS和JJA作为备份主持人出席,并在出现技术问题时提供支持。每个焦点小组的持续时间约为60分钟。
录音被逐字转录。参与者的名字被替换为参与者号码以保持他们的匿名性。随后,使用框架方法对转录本进行主题编码[
COVID雷达团队提供了应用程序用户向普通电子邮件地址发送反馈的可能性。此电子邮件地址已在常见问题部分的联系信息下发布。目标是使研究团队能够随后优化应用程序或尽快处理技术错误。2019冠状病毒病雷达团队在2020年5月至2021年6月期间收到的共1080封电子邮件被导出为文本文件,随后上传到Atlas。Ti软件(7.5.18版本)。为子研究1设计的码本用于电子邮件反馈的专题编码。
为了评估COVID雷达应用程序作为识字水平低的人的工具,荷兰健康差异专家中心Pharos开展了两类活动。第一项活动是由法罗斯公司的2名专家对自我报告监测调查表进行专家审查。根据欧洲语言共同参考框架,考虑到该语言需要达到A2或B1的语言水平,对所有文本进行了审查[
第二项活动是对4个文化水平较低的人进行可用性测试。在一对一的网络环境中,4名参与者与来自Pharos的专家参加了一个1小时的可用性测试会议。在这个可用性测试中,参与者被要求执行任务,以检查导航是否简单和合乎逻辑。他们还被要求大声朗读文章,以便清楚哪些单词或句子难以阅读。此外,参与者还被要求用自己的话解释文章的意思。最后,通过询问参与者对遇到的困难的替代方案或可能的解决方案,要求他们对整个可用性测试过程进行反馈。可用性测试的结果由Pharos总结并呈现给相关的研究人员。
LUMC医学伦理委员会宣布子研究1和子研究2不属于《荷兰涉及人体受试者的医学研究法》的范围,并相应地颁发了无异议证书。子研究3由第三方组织(Pharos)认证和执行。这些研究的所有志愿者在参与前都签署了知情同意书。
为子研究1和子研究2开发和使用的代码本介绍在
用于对焦点小组(子研究1)和电子邮件反馈(子研究2)的文本进行编码的代码本。
主题和代码 | 描述 | 例子 | |
|
|||
|
用户友好性 | 与应用程序的用户友好性相关的评论;例如,应用程序的使用和导航的便捷性 |
“我觉得它很接地气,简单,好用。” “这是一款使用起来很舒服的应用,但它确实文本太多。不使用任何符号,所以你将主要接触到文化水平高的人。” |
|
设计 | 与应用程序设计相关的注释,如颜色和布局 |
“我只是想知道,并不是所有的颜色在手机上都很容易区分,因为经常使用的颜色有深蓝、浅蓝和灰色。在许多手机上,很难区分它们。” |
主题2:使用动机 | 有关参与者使用该应用程序的动机和原因的评论 |
“我开始使用COVID雷达来帮助你获得洞察……” “这不仅是一个与研究领域相关的应用程序,也与自己有关。您还可以使用它来监视您自己的行为和环境的行为。所以它也为自己提供了一面镜子。” |
|
主题三:推广应用,扩大用户群体 | 评论与增加应用程序的用户数量和支持国家的应用程序意识有关 |
“我们(指焦点小组的参与者)几乎所有人都与莱顿或莱顿大学医学中心有联系。我住在莱顿,我唯一在当地报纸上读到过有关这款应用的消息,所以更多的全国性宣传可能会说服其他人开始使用你的应用。” |
|
|
|||
|
内容 | 与问题内容相关的评论,如语言问题、可理解性、对附加问题的建议以及与自我报告监测问卷相关的其他改进建议 |
“当你在市场或超市时,不可能估计五米内有多少人。” “我认为问题是你昨天在外面呆了几个小时。当然,这本身是清楚的。但解释说,度假目的地也算作离家。嗯,不久前我们在一所房子里住了一个星期……我find that a bit strange that I was out of the house that whole week, 24 hours a day. I don’t think that makes sense.” |
|
长度和持续时间 | 与填写问卷所花费的时间或问题数量有关的评论 |
“让我震惊的是,越来越多的问题被添加进来,我知道你想知道更多关于疫苗接种和一切的事情,但这个清单变得很长。” |
|
额外的信息 | 有关使用图标提供额外信息或详细说明问题及其内容的评论 |
“是的,一开始我点击图标,阅读它们的内容。因为在某一时刻,我想知道'是的,那又如何?’:我需要把在花园的时间算在屋外的时间吗?不过,情况似乎并非如此。” |
|
完成频率 | 与填写问卷的频率或参与者完成问卷的时间和地点有关的评论 |
“通常,我是晚上躺在沙发上填写的。然后我经常会想:‘哦,是的,那个雷达。’” “每一天!我百分之百肯定。这几乎是强迫性的,我觉得我需要完成它,我不能忘记。” |
|
|||
|
频率 | 有关更新频率或时间的评论 |
“我认为这些更新很棒,就像参与者X所说的那样;可能一周一次。” |
|
效果 | 关于应用内部更新体验效果的评论 |
“他们主要是激励我。然后我想,很高兴听到你的回应。我还认为,因为我已经使用这个应用程序一年多了,我也知道我在做什么。因此,我经常阅读更新。” |
|
内容 | 与更新内容相关的注释 |
“总的来说,我发现这些更新信息丰富,了解更多关于整个主题的背景信息是件好事。” |
|
|||
|
咨询的原因 | 有关用户咨询常见问题部分的原因和改进建议的评论 |
“是的,我当然看了FAQ部分。尤其是在我开始填写问卷之前。只是想看看谁在开发这个应用,他们在用我的数据做什么。” |
|
内容 | 与faq部分内容相关的评论,如答案的清晰度和主题的完整性 |
“这部分很清楚。是的,答案也是。” |
|
|||
|
内容 | 有关雷达部分内容(例如,地图和滑块)及其效果的评论 |
“我想你有那些关于行为的滑块;你在外面待了几个小时。我花了很长时间才意识到滑块是三个,而不是两个……” |
|
访视次数 | 评论与用户多久查看一次Radar部分有关 |
“是的,我每天都看。或者每天,每次我填写清单的时候,不一定是每天。” |
|
|||
|
建议改进 | 评论涉及改进推送通知的建议方法,例如关于时间和频率 |
“个性化的推送信息,就像对我来说,这是我早上例行公事的一部分。当我忘记填写问卷时,我更希望在早上听到提醒,因为它会在9点前发生,否则就不会发生。” “我认为这种提醒,无论是通过声音还是弹出窗口,都是有帮助的。我自己也注意到了……是的,如果我能在自己的时间设置一个带止闹功能的提醒,那么我想完成分数会高得多。” |
|
效果 | 与(非智能的)推送消息的效果相关的注释 |
“我不得不说,我真的很高兴你得到这些提醒。因为,不幸的是,我是一个不会在一天的某个特定时间完成问卷的人。所以我注意到,当我收到这样的消息,比如推送消息时,它会有所帮助。” “我把它们关掉了,因为我觉得我完成了(调查问卷),还收到了提醒,这太卑鄙了。” |
一个常见问题:常见问题。
两个焦点小组共5人,另一个焦点小组共4人,因为其中一名参与者因个人情况无法参加访谈。在14名参与者中,有12名(86%)是女性。为了保护参与者的匿名性,没有获取其他人口统计信息。子研究1的结果总结在
焦点小组的结果总结为优势和潜在的改进。
主题和子主题 | 的优势 | 潜在的改进 | |||
|
|||||
|
用户友好性 |
使用简单直观 以前的答案被保存为默认答案 |
对于一些用户来说,这个应用程序有点太简单了,这使得应用程序体验很无聊 |
||
|
设计 |
基本而简单 功能满意度 |
创建一个暗模式选项 多使用符号,少使用文字 多使用有效的色彩对比 |
||
主题2:使用动机 |
使应用程序用户能够帮助推进科学并为数据收集做出贡献 提高对社交距离行为的意识 |
增加对COVID雷达应用程序的研究目标和更广泛目标的了解 添加激励工具,如游戏元素 |
|||
主题三:推广应用,扩大用户群体 |
与研究组织及其城市有直接或间接联系的公民的高度参与 |
加大全国宣传力度,扩大全国用户群体 在宣传活动方面投入更多精力,特别是在用户参与度相对较低的地理区域 |
|||
|
|||||
|
内容 |
大多数问题被用户认为是重要和合乎逻辑的 |
用更清晰统一的方式表达一些问题,包括他们的答案类别,减少歧义 修改或删除难以回答的问题或不能总是以可靠的方式回答的问题 |
||
|
长度和持续时间 |
持续时间小于1分钟,支持常规完成 |
为应用程序用户创造机会,通过引入更多的逻辑来缩短问卷(例如,在不适用的情况下跳过问题) |
||
|
额外的信息 |
整体清晰 |
详细说明所提供的解释性信息,以增加对问题的理解,从而为选择正确答案类别提供更多支持 |
||
|
完成频率 |
大多数用户定期完成问卷调查 |
个性化的推送通知,以激励完成问卷,并有助于养成定期填写问卷的习惯 还要参考主题2(使用动机)和主题5(应用内部更新)的潜在改进。 |
||
|
|||||
|
频率 |
没有一个 |
更频繁的更新 |
||
|
效果 |
鼓励和激励员工完成并继续完成问卷 |
没有一个 |
||
|
内容 |
有趣的 |
增加所呈现图形的可理解性 |
||
|
|||||
主题6:常见问题-内容 |
清晰全面 |
没有一个 |
|||
|
|||||
|
内容 |
部分提供了与同行相比的症状和行为的详细信息 |
增加图形的可理解性,通过增加其设计和详细说明,更好地解释相应的功能。 |
||
|
访视次数 |
没有一个 |
使雷达部分更容易被用户看到。 |
||
主题8:推送通知 |
有价值的;有助于更频繁地完成问卷 |
如需继续使用自动通知,请在问卷填写完毕后禁用通知功能 在通知的频率和时间方面启用个性化 |
总体而言,参与者对COVID雷达应用程序的评价是积极的。他们发现这款应用程序对用户友好且直观。大多数参与者都对这款应用的设计和功能感到满意,它的简单性经常被列为它的优点之一:
我觉得它很接地气。简单易用。对我来说,这个应用程序是响亮而清晰的,是的,我不认为它更容易。
另一方面,一些参与者发现这款应用程序有点太简单了,并认为应用程序的简单性不足以挑战他们:
如何接触到不同的或更大的目标受众?我认为你必须修复应用程序本身的一些东西。我要说些难听的话,但这款应用看起来很肤浅。
总体而言,参与者很高兴他们最近关于COVID-19症状的答案被保存为默认答案,从而在下次填写问卷时节省了时间。
参与者使用该应用程序的主要动机可以概括为他们推进科学的愿望。参与者积极参与数据收集,以帮助科学家预测未来的COVID-19暴发:
我对这个应用程序非常满意,因为它让我觉得我在为一些事情做出贡献。当然,这是一种很棒的感觉,尤其是在你经常感到无助的时候。
此外,一些参与者提到,花时间反思他们的社交距离行为增加了他们的意识。例如,当报告1.5米以内的人数或家中接待的访客人数时,如果这些值相对较高,参与者报告经历了一种不适,促使他们反思自己的行为:
然后你会想,也许下次我可以用不同的方法。这并没有导致我的自我报告与实际情况不同,尽管我确实时不时地想“也许我应该报告更少的人。”但它让我每天都保持警惕,所以从这个意义上说,我这么做绝对是为了你(研究人员/科学),但我也是为了我自己和我自己的意识。
在讨论继续使用该应用程序的动机时,几位参与者讨论了在应用程序中集成激励工具以增加使用的可能性。具体建议包括反复接触研究目标和COVID雷达背后的更广泛目标;例如,通过应用内部更新。其他建议则与可能添加的严肃游戏元素有关,例如允许参与者根据完成问卷的次数收集数字徽章:
但你也可以用警徽。我在另一款应用中可以获得5天、10天和50天的徽章。但你必须在COVID雷达中提供某种仪表板,让人们可以看到是否完成了问卷调查。我知道我很受这些条纹的激励。
焦点小组的大多数参与者都是通过直接或间接地与莱顿大学或莱顿市建立个人联系来了解这款应用的。建议在利用社交媒体开展全国宣传活动方面做出更多努力,以覆盖更多公民。另一个建议是在用户粘性相对较低的地理区域通过小册子或当地媒体进行广告宣传。
对自我报告监测问卷的大多数反馈都涉及问题的内容和措辞。一些与会者指出,一些问题给应用程序用户留下了解释的空间,这可能会导致有偏见的答案。更具体地说,就是这个问题:“昨天,在房子外面,有多少人来到你5米以内?”收到了广泛的反馈。大多数参与者认为这个问题具有挑战性,甚至很难回答,因为他们觉得无法准确估计这个数字:
我几乎每天骑自行车。在5米内你遇到了多少人?街道的长度是5米,所以每次我骑自行车的时候,我几乎可以肯定我能填满50个距离我5米以内的人。
“你是否完全接种了COVID-19疫苗?”也收到了广泛的反馈。一些参与者想知道,为什么只关心他们是否完全接种了疫苗,而不允许用户表明他们接种了多少次疫苗。
关于问题附带的补充资料,所提供的资料并不总是能澄清与会者对有关问题的疑问或疑虑。例如,关于办公室、商店、超市等特定场所是否应该被归类为公共场所的问题就很多。
关于问卷的长度,一些参与者认为它太长了,尽管大多数参与者报告填写问卷的时间不到一分钟。与此相关的是,一些参与者在反复回答相同问题的动机上遇到了困难。一项建议是能够表明参与者是否经历了COVID症状的变化,因为与行为测量相比,这些症状相对稳定(例如,一个人不会每隔一天就会喉咙痛,而接近5米的人数可能会每天波动)。更具体地说,参与者建议制作一份缩短版的问卷,将COVID-19的症状投诉合并为一个问题(例如,
大多数参与者报告定期完成监测问卷,有些人报告每天都这样做。大多数参与者报告说,他们养成了每天在固定时间填写问卷的习惯:
它需要变得像刷牙一样。
那些不太经常填写问卷的参与者似乎在完成时间上的一致性较差,难以养成习惯。
大多数参与者在注意到应用内通知后立即阅读更新,而其他人从未收到或注意到任何通知,只是偶尔查看这一部分的更新。总的来说,应用内更新的推送消息被评估为有价值的。
参与者对更新的内容充满热情,并认为更新非常有趣。此外,参与者详细说明了这些更新是如何激励他们继续填写问卷的:
对我来说,更新是应用程序最有趣的部分,因为这是完成问卷调查的某种奖励。
但是,许多与会者提到,更新中使用的数字并不总是全面的或解释得不够详细。例如,配色方案是混淆的来源,一些参与者不能完全理解这些数字。还有人提到,轴标有时缺乏或不完整。几乎所有参与者都表示,他们更喜欢更频繁的更新。
大约一半的参与者表示至少访问过一次应用程序的faq部分。咨询faq部分的原因包括对收集到的数据进行的研究和相应分析感兴趣,想要了解更多与隐私相关的问题,以及好奇有多少活跃的应用程序用户。总体而言,参与者认为这部分的信息是清晰易懂的。
对于少数参与者来说,应用程序的雷达部分提供了一种方便的方法,可以将他们的症状和行为与同龄人进行比较。他们解释说,他们有时会根据同行比较数据调整自己的行为:
我把自己和我所在地区的其他人做比较。我对社会压力很敏感,所以对我来说,有时这是一个在周末克制自己的理由。
然而,雷达部分在确定优化目标方面受到了最多的关注。两名参与者从未注意到雷达。雷达部分中呈现的视觉效果(即图形)是另一个经常被提及的潜在改进主题。图例和图形缺乏对比,颜色不匹配,这阻碍了应用程序用户的理解。
没有每天完成问卷的参与者报告说,推送消息激励他们更频繁地完成问卷:
我很满意这些提醒……这些提醒确实鼓励我去填写问卷。
相比之下,每天完成问卷调查的参与者报告说,推送信息造成了混乱。这些信息让他们怀疑自己当天是否已经完成了问卷调查。他们还报告说,当他们确定当天已经完成了问卷调查时,这些提醒会让他们感到恼火。参与者提供的一个潜在解决方案是创建个性化推送通知的可能性,允许它们设置在用户定义的时间和频率,从而帮助他们创建一个例行程序。
共分析了1080封电子邮件;大约三分之一的电子邮件被编码为不相关,因为它们包括重复邮件、垃圾邮件、邮件广告或COVID Radar Facebook或Instagram账户的更新。大多数电子邮件都包含应用程序用户关于如何解释或回答自我报告问卷中的特定问题的问题(
在我上班的路上,我遇到了很多离我不到5米的人。我应该在雷达上报告所有这些简短的接触吗?
另一个收到广泛反馈的监测问题是关于某一天某人在家接待了多少访客的问题。用户经常质疑是否需要将未满12岁的孙辈算作访客:
我们照顾孙子孙女。当然,它们离我的距离确实不超过1.5米,但我们知道通过儿童感染的风险是最小的。我们需要把我们的孙辈当作距离我们1.5米以内的人来报告吗?
几封电子邮件载有关于监测问卷应列入的其他问题的建议。例如,很多人建议在2021年1月开始接种疫苗时增加关于疫苗状况的问题。另一个常见的反馈点是,自我报告问卷的回答格式不允许有任何细微差别。一些用户报告说,他们对自己的社交距离习惯感觉很糟糕,例如,由于他们是老年人或生病家庭成员的照护者:
我知道有时候我看起来好像不守规矩。但如果这些问题能考虑到任何细微差别,尤其是关于来访者的年龄和对年长家庭成员的非正式照顾,对我来说将是完全不同的结果。
此外,许多电子邮件包含了应用程序雷达部分的反馈(
根据来自荷兰健康差异专家中心的专家的输入,以及与文化水平较低的个人的可用性测试,确定了有关应用程序设计的几个优化目标。其中一个与改善颜色和颜色对比的使用有关,以提高字母的可见性。例如,在自我报告监测问卷中,用于给默认答案的方框上色的蓝色(
我认为它说了两次同样的事情,我看不出有什么不同。
关于设计优化的其他产出是更明确地指导最终用户使用所有应用程序功能。例如,他们需要向下滚动查看更多问题,并且在完成最后一个问题后需要按“提交”。
关于文本优化,有时建议添加信息以提高对问题的理解。例如,有人建议我们定义“发烧”,因为不是每个人都知道这是由体温≥38°C定义的。此外,有人建议对文本进行一些简化,例如简化或详细说明“中等到严重的心理锻炼”。其他的文本建议包括写出“一米半”,因为文化水平低的人通常把1.5米读成“1到5米”。
共进行了3项定性子研究,并在应用程序的设计和内容方面确定了COVID雷达应用程序的众多优化目标。应用程序使用的便利性、应用程序体验的个人调整以及持续使用应用程序的动机是获得和维持使用COVID雷达等公共卫生监测应用程序的活跃用户群体的关键。这些信息可用于最大限度地提高用户对国家监测数据收集应用程序的满意度、依从性和参与度。
三项研究确定的优化目标包括突出的设计元素,例如使用足够的颜色对比以及使用更多的视觉效果和更少的文本来增加应用程序的用户友好性和相应文本的可理解性的重要性。子研究3的结果强调了提高(健康)识字水平较低的人阅读和理解文本的重要性,例如,根据《欧洲语言共同参考框架》使用A2或B1级语言[
虽然从文献来看,使用智能手机应用程序持续监测疾病的可行性和可接受性似乎很明显[
提高用户粘性和动机的另一种潜在策略是融入说服性技术,如游戏化:在非游戏环境中使用挑战和奖励等游戏元素。虽然仍处于早期阶段,但初步证据支持使用游戏化来提高用户在关注(心理)健康和行为改变的互联网干预中的使用和参与度[
子研究1和2的主要局限性与样本偏差有关;焦点小组的参与者很可能是积极性高于平均水平的应用程序用户,他们对项目和应用程序的态度更积极。同样,高参与度的应用程序用户可能更频繁地发送电子邮件反馈,而积极性较低的用户或对应用程序有负面评价或体验的用户可能已经停止使用应用程序,因此没有参与子研究1和子研究2。另一个潜在的限制是基于访谈的在线性质的选择偏差:由于焦点小组是使用Zoom进行的,因此还不熟悉该计划的潜在参与者可能会因此而决定不参加。为了减少这种偏见,我们为还没有使用Zoom经验的参与者提供了一轮练习。一位与会者利用了这个机会。NS可提供技术援助,但在3次焦点小组访谈中未要求提供技术援助。然而,我们不能说其他数字素养较低的潜在参与者没有被阻止参与。然而,子研究3的参与者之前没有使用过该应用程序;因此,他们对应用程序文本特征的反馈是没有偏见的,因为之前使用该应用程序的经验。此外,子研究1和3的结果可能在概括性方面受到限制,因为这些子研究的参与者数量相对较低(分别为N=14和N=4)。使用网络面试进一步包括全面评估肢体语言的能力。 However, the interviews were conducted via videoconference, so facial expressions could be read and interpreted by the interviewer. Therefore, it is not believed that this biased our conclusions regarding the focus groups.
一个自我报告的基于人群的监测移动应用程序似乎在关于症状和社交距离行为的全国研究中很有用。公民使用此类应用程序的主要动机与利他主义、集体主义有关,并希望在公共卫生监测工具的背景下帮助科学开发和改进移动自我报告应用程序。应用使用的便利性、应用的个性化以及激励因素是获取和维持活跃用户群体的关键,例如COVID Radar。在设计这样的应用程序和开发内容时,重要的是要考虑它对文化水平低的人的可访问性。这些结果不仅对COVID雷达应用程序的优化至关重要,最终提高其可接受性、包容性和依从性,而且在大流行期间的公民科学项目和公共卫生监测工具的更广泛背景下也具有重要意义。
COVID雷达自我报告问卷的最终版本和完整版本。
常见问题
莱顿大学医学中心
作者要感谢荷兰健康差异专家中心Pharos对文化水平低的人进行专家审查和可用性测试。作者也想感谢所有参与访谈的人,感谢他们的宝贵贡献和反馈。该项目的资金来自荷兰卫生研究与发展组织赠款10430042010016、10430022010001和10430032010011。资助者在研究设计、数据收集和分析、发表决定或手稿准备中没有发挥作用。新冠病毒雷达应用程序是由莱顿大学医学中心和科技公司Ortec合作开发和维护的。该应用程序在苹果应用程序商店和谷歌Play商店免费提供。
没有宣布。