这是一篇在知识共享署名许可(https://creativecommons.org/licenses/by/4.0/)下发布的开放获取文章,该许可允许在任何媒体上不受限制地使用、分发和复制,前提是原始作品首次发表在JMIR儿科和育儿杂志上,并适当引用。必须包括完整的书目信息,到https://pediatrics.www.mybigtv.com上原始出版物的链接,以及版权和许可信息。
尽管越来越多的智能手机应用程序在医疗保健领域的发展,大多数这些应用程序缺乏适当的评估。事实上,随着智能手机和无线通信基础设施的快速发展,世界各地的许多卫生保健系统正在使用这些应用程序为人们提供卫生服务,而没有足够的科学努力来设计、开发和评估它们。
本研究的目的是评估CanSelfMan的可用性,这是一款自我管理应用程序,提供可靠的信息,以改善医疗服务提供者与癌症儿童及其父母/照顾者之间的沟通,促进远程监测和促进药物依从性。
我们在模拟环境中执行调试和兼容性测试,以识别可能的错误。然后,在3周的应用程序使用期结束时,患有癌症的儿童及其父母/照顾者填写了用户体验问卷(UEQ),以评估CanSelfMan应用程序的可用性和他们的用户满意度。
在CanSelfMan使用的3周内,由儿童及其父母/照顾者在系统中记录270例症状评估和194个问题,并由肿瘤学家回答。3周结束后,44名用户完成了标准UEQ用户体验问卷。根据儿童的评价,吸引力(平均1.956,SD 0.547)和效率(平均1.934,SD 0.499)比新颖性(平均1.711,SD 0.481)取得了最好的平均结果。父母/照顾者对效率的平均评分为1.880(标准差0.316),对吸引力的平均评分为1.853(标准差0.331)。新颖性的平均得分最低(平均1.670,标准差0.225)。
在本研究中,我们描述了一个自我管理系统的评估过程,以支持癌症儿童及其家庭。根据从可用性评估中获得的反馈和分数,孩子们和他们的父母似乎发现CanSelfMan是一个有趣和实用的想法,可以提供可靠和最新的癌症信息,并帮助他们管理这种疾病的并发症。
智能手机技术的最新进步使公众可以使用各种各样的应用程序[
因此,为了提高使用者的有效性、满意度和信任度,应采用合适的标准方法来评价干预措施[
因此,可用性测试显然应该是开发过程中的一个常见步骤,即使对于小型系统也是如此。
CanSelfMan是一个针对癌症儿童的自我管理系统,它包括一个面向肿瘤学家的基于网络的仪表盘,以及一个面向儿童及其父母/看护人的安卓应用程序。在CanSelfMan的最初版本中,有两个不同的版本,分别针对父母/照顾者和儿童。在最后的迭代中,我们为孩子和他们的父母/看护人制作了一款应用。app的最终版本有5个模块,包括(1)癌症知识(即关于疾病的定义、疾病的原因、治疗方法和并发症的信息),(2)自我管理建议(即识别症状、控制症状、体育活动和营养信息),(3)症状管理,(4)症状自我评估问卷,(5)医生的问题和提醒。此外,肿瘤学家的仪表盘还包括查看患者评估结果、问题和对患者问题的回答的部分(
CanSelfMan应用程序截图。ALL:急性淋巴细胞白血病。
在我们完成了编码和开发最终原型的相关步骤后,我们执行了一个调试测试来评估应用性能并识别可能的错误。在软件或应用程序中发现和修复错误的过程称为调试,它包括检测导致应用程序执行或性能问题的代码。调试器是一种帮助您查找和修复错误的工具。可以手动或通过调试器进行调试[
在此之后,在模拟环境中进行兼容性测试,以确保应用程序的最终版本可以在具有不同硬件和软件功能的不同手机上正常运行。这项测试是为了检查不同制造商生产的不同屏幕尺寸的智能手机上的应用程序的兼容性。对于这个模拟,pCloudy [
接下来,为了评估可用性和用户满意度,我们使用了问卷调查。在回顾了类似的研究并基于研究团队成员的意见后,我们决定使用标准UEQ,这是一份衡量可用性和用户体验的免费问卷。它被描述为“一份快速可靠的问卷,用于衡量交互式产品的用户体验,[该]有30多种语言版本,[并且]由于补充材料丰富,易于使用”[
UEQ由用户在使用产品后填写,用以衡量产品的有效性[
剩下的5个量表对吸引力量表有影响,吸引力量表衡量用户对应用程序的整体印象。虽然刺激和新颖性描述了享乐(非目标导向)质量标准,但清晰度、效率和可靠性量表提供了实用(目标导向)质量方面的信息。每个项目是一对7分李克特量表的对立面,这是语义差异的形式。[
UEQ有一个在Microsoft Excel (Microsoft Corp .)中设计的工具来计算和解释结果,以及包含先前研究结果的数据库,使我们能够将我们的结果与246个先前研究的结果进行比较[
吸引力:用户喜欢还是不喜欢这款应用?
清晰度:是否容易习惯和理解如何使用应用程序?
效率:用户能否快速高效地完成工作?
可靠性:与应用程序的交互是否安全且可预测?
刺激:使用应用程序是否令人愉快和激励?
新颖性:用户是否有动力继续使用这款应用?
本研究获得了Shahid Beheshti医学科学大学(IR.SBMU.RETECH.REC.1396.1316)的伦理审查批准。
经过兼容性和技术测试后,最终版本提供给最终用户以评估可用性。为此,在MAHAK儿童癌症治疗和研究中心的门诊部放置了一条横幅,邀请人们参加这项研究。儿童进入本研究的入选标准为(1)急性淋巴性白血病(MAHAK)儿童处于化疗阶段(即自治疗开始至少1年),(2)年龄至少7岁,(3)可以使用智能手机工作。对于父母/照顾者,纳入标准是(1)至少有一名儿童患有癌症,已被诊断一年,目前正在积极接受化疗治疗,(2)具有波斯语读写能力,(3)拥有Android智能手机(版本8至11)。排除标准是处于癌症晚期的患者、与心理健康作斗争的患者,以及不知道如何使用智能手机、不会读写的父母/照顾者。此外,4名肿瘤学家参与了本次研究,回答患者的问题。
在开始研究之前,我们用30分钟的时间向参与者介绍研究的相关信息。在这个环节中,首席研究员(作者HM)用通俗易懂的语言向参与者解释了这个应用程序和这项研究的目的。随后,另一位研究者(作者AM)从儿童的父母/看护人那里获得了参与本研究的许可,然后从儿童自己那里获得了许可。在这之后,父母签署了同意书。
我们向所有参与者解释,他们可以在研究的任何阶段退出而无需提供理由。之后,在他们的智能手机上安装了CanSelfMan应用程序,并向他们展示了如何使用该应用程序。使用三周后,参与者亲自返回MAHAK,并填写了一份与人口统计信息相关的问卷,包括年龄,性别,居住地,教育程度以及UEQ。
在这个阶段,为了确保最终的应用程序能够正常运行,使用pCloudy服务模拟执行了兼容性测试。结果显示在
兼容性测试中的一个重要问题包括安装、运行和卸载应用程序,测试在pCloudy平台上的10个不同品牌的智能手机上完成。
该应用程序安装并运行在所有所需的手机上,没有任何错误。然后,从不同屏幕尺寸的不同智能手机的兼容性和适用性方面对该应用程序进行了检查。同样,它的执行没有出现任何问题。接下来,检查了4个特性,即内存、处理器、网络数据和电池消耗。根据这次模拟的结果,CanSelfMan acquire在电池消耗部分的得分为7.9分(满分为10分),这被认为是一个不错的分数,表明电池和内存的最佳消耗。并且在网络交换数据评价中,获得了9.6分,是一个非常高的分数(
CanSelfMan应用程序的兼容性测试结果。中央处理器:中央处理器;mAh:毫安时。
在3周的应用程序使用期间,由儿童及其父母/照顾者在系统中记录了270个症状评估和194个问题,并由肿瘤学家回答。3周结束后,44个用户完成了UEQ。受访者包括25位父母,他们的孩子在7岁以下患有癌症。
这一阶段的父母/照顾者年龄在27 ~ 48岁之间,平均年龄32岁,以女性居多(n= 16.64%)。
共有19名年龄在7至14岁之间的癌症儿童,平均年龄为12岁,完成了UEQ。绝大多数(11/19,58%)患儿为女性。UEQ中可以得到的点的范围是- 3(最小可能点)到+3(最大可能点)。结果是基于平均值来解释的,没有唯一的分数。此外,测量值的CI指的是估计平均值的精度水平。因此,CI越小,所得结果的准确性和可靠性越高。由于UEQ中的6个度量中的每一个都包含一组项目,因此没有一个项目可以单独解释。因此,对于每个测量,计算相关项目的总得分。
参加者的人口统计资料。
参与者 | 父母(n = 25) | 孩子(n = 19) | |
年龄(年),平均(SD;范围) | 32 (2.1;27-48) | 10 (1.7;7 - 14) | |
|
|||
|
女 | 16 64)) | 11 (58) |
|
男性 | 9 (36) | 8 (42) |
|
|||
|
城市 | 14 (56) | 13 (68) |
|
农村 | 11 (44) | 6 (32) |
|
|||
|
中学 | 1 (4) | 9 (47) |
|
大学文凭 | 13 (52) | N/A一个 |
|
专科学校 | 3 (12) | N/A |
|
本科及以上学历 | 8 (32) | N/A |
一个-不适用。
结果显示,透明度、积极性和吸引力这三个指标分别获得了最高分。
UEQ参数也可分为两大类:实用质量(明晰性、效率性、可靠性)和享乐质量(刺激性和独创性)。
根据得到的结果,CanSelfMan在所有指标上的得分都在+0.8以上,高于平均分1.5,属于良好类别。评估结果显示,CanSelfMan应用程序在吸引力和效率方面排名最高,在新颖性方面排名最低,这表明用户对应用程序的质量和用户界面的满意度很高。这款应用吸引人的用户界面的原因之一可能是使用了图形元素和游戏化,这吸引了孩子们的注意力,随后提高了效率和应用使用量表的分数。此外,新颖性得分较低可能是因为针对年轻用户设计的应用越来越多,新应用无法唤起他们的创新感和新颖性。
对于父母/看护人来说,这款应用在效率和吸引力方面得分很高,在新颖性方面得分最低。效率得分高,说明app的质量高,用户对app的使用满意度高。其中一个原因可能是app的集成化和模块化设计,通过将各个部分的功能分离开来,尽可能降低app的复杂性,让用户可以轻松地执行任务和使用app。在父母的吸引力类别中得分高也可能是应用程序用户界面设计质量的标志,从而导致高用户满意度。新颖性得分较低可能是由于应用商店中健康应用的增加;因此,像CanSelfMan这样的新应用程序可能不会让用户感到足够兴奋或满意。
UEQ还提供了一个计算工具,其中包括以前研究的评估数据。因此,每次评价的结果都可以与以往的研究进行比较。为了更好地了解应用质量,我们将结果与UEQ的基准数据集进行了比较。数据集收集了246项研究,评估各种产品,包括网页,移动应用程序,社交网络等。本研究结果与以往研究结果的比较表明,CanSelfMan在国际范围内的相对质量。
两个研究组(父母/照顾者和儿童)的用户体验问卷(UEQ)结果。
措施 | 孩子(n = 19) | 家长/护理员(n = 25) | ||||
尺度 | 意思是(SD) | 95%可信区间 | 意思是(SD) | 95%可信区间 | ||
吸引力 | 1.956 (0.547) | 1.710 - -2.202 | 1.853 (0.481) | 1.724 - -1.983 | ||
明晰 | 1.895 (0.668) | 1.594 - -2.195 | 1.830 (0.481) | 1.678 - -1.982 | ||
效率 | 1.934 (0.668) | 1.710 - -2.159 | 1.880 (0.316) | 1.756 - -2.004 | ||
可靠性 | 1.803 (0.668) | 1.567 - -2.038 | 1.820 (0.255) | 1.720 - -1.920 | ||
刺激 | 1.776 (0.399) | 1.597 - -1.956 | 1.680 (0.223) | 1.593 - -1.767 | ||
新奇的事物 | 1.711 (0.481) | 1.494 - -1.927 | 1.670 (0.225) | 1.582 - -1.758 |
CanSelfMan应用程序的实用主义和享乐质量得分。
学习小组 | 孩子们 | 家长/护理员 |
吸引力 | 1.96 | 1.85 |
务实的质量 | 1.88 | 1.84 |
享乐的质量 | 1.74 | 1.68 |
CanSelfMan应用程序的可用性结果与之前的研究结果对比图。
资讯系统研究人员[
第一步,对应用程序的技术性能进行了测试。一般来说,屏幕尺寸、屏幕分辨率、处理能力和系统资源使用量等问题被认为是智能手机的常见问题和限制[
由于智能手机的局限性之一是有限的电池或充电维护量,因此与应用程序相关的最重要问题之一是如何最佳地利用这些有限的能量[
在性能评估之后,我们从可用性方面对CanSelfMan app进行了评估。可用性度量研究可以帮助更好地理解用户与最终产品的交互,并根据不同的用户群体确定产品的优缺点。当涉及到新技术时,从这些评估中获得的结果可以提供有关用户行为和趋势的重要信息,从而为开发人员更好地了解用户接受程度[
UEQ的结果提供了关于应用程序各个方面的有用信息。我们还能够将我们的应用程序与其他类似软件在设计和性能方面的各个方面进行比较。该问卷被广泛应用于人机交互研究中,被认为是测量用户对软件产品感受的有效而准确的方法。这个问卷的效度和信度非常高,它帮助我们对用户对CanSelfMan app的感受和体验进行了全面的评价。同样,Salari和他的同事[
随后,CanSelfMan的最终评估由癌症儿童及其父母/照顾者进行。对于这两个群体来说,吸引力、动机和效率量表的得分都高于其他群体,这表明他们对应用程序中使用的用户界面和图形元素感到满意,这可能会激励他们进一步使用应用程序。此外,效率、透明度和可靠性量表的高分表明应用程序的质量和高用户满意度。同样,MacPherson和他的同事[
在另一项研究中,王和同事[
然而,这可能会引发孩子是否有能力评估应用程序可用性的问题。答案是肯定的。目前,有许多专门为儿童设计的应用程序,由于平板电脑和智能手机的使用越来越多,儿童使用这些工具的能力很高[
在另一项研究中,格拉斯和他的同事[
这项研究有几个局限性。这包括在评估阶段的样本量小,参与者的多样性低(所有参与者来自同一治疗中心),这使得本研究的结果无法推广。然而,早期评估研究中的小样本通常提供了关于实现的足够信息。本研究的另一个限制是可用性测试是在小学儿童的参与下进行的。为了建立自信和促进合作,孩子们由一位家长陪同。此外,当孩子们完成UEQ时,一名研究人员(作者HM或AM)与他们在一起,并向他们解释所有的选项,以便他们能够回答问题。最后,尽管本研究能够通过问卷收集应用程序可用性和用户满意度的有用数据,但未来研究的下一步可能是评估其他指标,如数字健康素养水平、技术获取水平以及与使用该应用程序相关的临床结果。
在这项研究中,我们描述了CanSelfMan的评估过程,这是一款旨在支持癌症儿童及其家庭的自我管理应用程序。我们采取了以用户为中心的策略,并在应用开发和评估的每个阶段都让最终用户参与进来,以确保它符合用户的需求。为此,进行可用性评估的目的是解决应用程序的潜在问题,以开发出用户友好且可接受的最终产品。这项研究的结果表明,我们成功地实现了这一目标。
根据反馈和从可用性评估中获得的分数,孩子们和他们的父母/照顾者发现CanSelfMan是一个有吸引力和实用的工具,可以提供可靠的、最新的癌症信息,并帮助他们管理这种健康状况的并发症。然而,由于我们的小样本量阻碍了我们研究结果的推广,因此需要其他研究来评估该应用程序在更大人群中的可用性。在未来的研究中,我们计划调查短期和长期使用该应用程序的临床结果和效果。
用户体验问卷(UEQ)项目。
用户体验问卷
HM构思并设计了这项研究。所有作者都参与了应用程序的开发、数据提取和评估过程。所有作者都对最后的手稿进行了严格的审查,提供了评论,并批准了最终的手稿。
没有宣布。