发表在第23卷第9期(2021):9月

本文的预印本(早期版本)可在以下网站获得https://preprints.www.mybigtv.com/preprint/24081,首次出版
三维全息图与混合现实技术以提高对COVID-19引起的肺部病变的了解:随机对照试验

三维全息图与混合现实技术以提高对COVID-19引起的肺部病变的了解:随机对照试验

三维全息图与混合现实技术以提高对COVID-19引起的肺部病变的了解:随机对照试验

原始论文

1中国武汉华中科技大学同济医学院协和医院骨科

2中国武汉华中科技大学同济医学院协和医院智能医学实验室

3.中国武汉,华中科技大学同济医学院协和医院放射科

*这些作者贡献相同

通讯作者:

叶哲伟,医学博士

骨科

同济医学院协和医院

华中科技大学

解放街1277号

武汉,430019

中国

电话:86 13971213880

电子邮件:yezhewei@hust.edu.cn


背景:新冠肺炎疫情已成为全球大流行,对全球公共卫生造成严重不利影响。新冠肺炎对肺部的影响可以通过二维计算机断层扫描(CT)成像来确定,这需要医疗提供者具有高度的空间想象力。

摘要目的:本研究的目的是确定用混合现实技术观看3D全息图是否可以提高医务人员对新冠肺炎引起的肺部病变的了解。

方法:这项研究有60名参与者,包括20名放射科医生、20名外科医生和20名医科学生。三组患者均随机分为两组,分别为二维CT组(n=30;平均年龄29岁[范围19-38岁];男性=20)或3D全息组(n=30;平均年龄30岁[范围20=38岁];男性= 20)。两组完成了相同的任务,包括使用2D CT或3D全息图识别6例COVID-19引起的肺部病变。最后,一位独立的放射学教授给参与者的表现打分(满分100分)。两组的所有参与者都完成了一份关于3D全息图的教育效用和效率的李克特量表问卷。所有参与者都完成了美国国家航空航天局任务负荷指数(NASA-TLX)。

结果:3D全息图组任务平均得分(平均91.98,SD 2.45)显著高于2D CT组(平均74.09,SD 7.59;P<措施)。在3D全息影像的帮助下,外科医生和医科学生在诊断新冠肺炎肺部病变方面取得了与放射科医生相同的成绩,并取得了明显进展。李克特量表问卷调查结果显示,3D全息图组疗效优于2D CT组(教学:2D CT组中位数2,IQR 1-2, 3D组中位数5,IQR 5-5;P<措施;理解与沟通:2D CT组中位数1、IQR 1-1与3D组中位数5、IQR 5-5;P<措施;兴趣增加:2D CT组中位数2,IQR 2-2, 3D组中位数5,IQR 5-5;P<措施;降低学习曲线:2D CT组中位数2,IQR 1-2, 3D组中位数4,IQR 4-5;P<措施;空间感知:2D CT组中位数2,IQR 1-2与3D组中位数5,IQR 5-5;P<措施;学习:2D CT组中位数3,IQR 2-3与3D组中位数5,IQR 5-5;P<措施)。在NASA-TLX量表上,3D组在“精神”、“时间”、“表现”和“挫败感”分量表上的得分明显低于2D CT组。

结论:一种混合现实技术的3D全息图可以帮助医疗专业人员,特别是医科学生和新聘用的医生,更好地识别COVID-19引起的肺部病变。它可以用于医学教育,以提高空间意识,增加兴趣,提高理解能力,并降低学习曲线。

试验注册:中国临床试验注册中心ChiCTR2100045845;http://www.chictr.org.cn/showprojen.aspx?proj=125761

J medical Internet Res 2021;23(9):e24081

doi: 10.2196/24081

关键字



COVID-19疫情现已成为大流行[1].它对全球公共卫生产生了严重的不利影响[2].许多医生都在抗击疫情的第一线,包括整形外科医生、普外科医生和神经外科医生。二维计算机断层扫描(CT)需要医疗专业人员具有高度的空间想象力,传统上一直用于确定肺部感染的状态[3.4].通常,判断COVID-19引起的肺部病变的具体情况需要有经验的呼吸系统、放射科、传染病和重症监护科专家的专业知识。不是专门研究呼吸相关病例的医生,更不用说医科学生和公众,可能很难理解2D CT扫描的临床意义。

在抗击新冠肺炎疫情中,医生和公众都发挥了至关重要的作用。医生治疗COVID-19患者并直接对抗病毒。公众的自我保护和隔离努力有助于阻止病毒的传播。然而,仍有许多公众不了解必要的保护措施。此外,医学生是抗击新冠病毒的接班人,对他们来说,更好地了解新冠病毒非常重要。其他国家可能也会遇到这种困境。

混合现实技术可以重叠虚拟世界和现实世界。用户可以在操作设备生成的数字内容的同时查看真实世界[5].混合现实已用于临床,以帮助医生更好地理解解剖结构[6-8].然而,使用3D全息图像对受COVID-19影响的肺部成像的文献尚未报道。因此,我们提出了一种新的方法,应用混合现实技术来创建受COVID-19影响的肺部三维全息图。


试验设计

本研究为平行组随机对照试验。调查于2020年3月至2020年9月在中国武汉进行。受试者按1:1的比例随机分为两组:(1)3D全息干预组和(2)2D CT对照组。

参加者及招聘

我们从我们的机构中随机选择放射科医生、外科医生和医科学生,让他们参与这项研究。放射科医生、外科医生和医科学生如果之前没有见过受COVID-19影响的肺部3D全息图,就有资格参加这项试验。这项研究有60名参与者,包括20名放射科医生、20名外科医生和20名医科学生。三组均随机分为两组:(1)二维CT组和(2)三维全息组(图S1)多媒体附件1).排除标准如下:接受过COVID-19肺部CT成像培训的外科医生和医科学生,以及之前看过COVID-19肺部3D全息图的参与者。

干预

在本研究中,使用StarCloud工作站(Visual3D的3D重建软件)的CT扫描数据对患者的肺部进行了3D重建。从StarCloud工作站导出多边形网格文件。这些被上传到StarCloud混合现实系统(Visual3D)。上传数据后,3D全息图像自动转换为混合现实的特定案例计算机图形,称为全息图。有关全息图的数据可以下载到微软HoloLens(微软公司)上。

两组完成了相同的任务,包括使用2D CT或3D肺部全息图确定6例COVID-19患者肺部的病变区域。用于研究的6例COVID-19病例涉及中至重度COVID-19(表S1)多媒体附件1).

评估

一位独立的放射学教授给参与者的表现打分(满分100分)。两组的所有参与者都完成了一份关于3D全息图的教育效用和效率的李克特量表问卷。所有参与者都完成了美国国家航空航天局任务负荷指数(NASA-TLX)。NASA-TLX是一个多维评分程序,根据6个分量表的评分加权平均,提供0到100之间的总工作量得分[9:(1)精神需求(“这项任务对精神的要求有多高?”),(2)身体需求(“这项任务对身体的要求有多高?”),(3)时间需求(“这项任务的节奏有多匆忙?”),(4)自身表现(“你完成这项任务有多成功?”),(5)努力程度(“你为了达到你的表现水平付出了多少努力?”),(6)挫败感(“你有多不安全、气馁、恼怒、压力和烦恼?”)。本研究获得华中科技大学同济医学院武汉协和医院伦理委员会批准,所有受试者均提供签署的知情同意书。

统计分析

使用SPSS(19版本;IBM公司)。连续变量用均值和标准差表示。NASA-TLX问卷的结果以均数和标准差进行总结。使用方差分析对数据进行处理,以确定个体特征与工作量之间的可能关系。


样本特征

参与者基线特征描述在表1.这项研究有60名参与者,包括20名放射科医生、20名外科医生和20名医科学生。三组均随机分为两组:(1)二维CT组(n=30;平均年龄29岁[范围19-38岁];男性20例,3D全息组30例;平均年龄30岁[范围20-38岁];男性= 20;图S1多媒体附件1).

表1。人口统计信息。
变量 3D全息组(n=30) 二维计算机断层扫描组(n=30)
性别

男性 20. 20.

10 10
年龄(年),平均值(范围) 30日(20-38) 29 (19-38)
参与者

放射科医生,总计(男性) 10 (5) 10 (5)

外科医生,合计(男性) 10 (10) 10 (10)

医科学生,合计(男性) 10 (5) 10 (5)

结果

获得了COVID-19患者肺部清晰的3D视觉全息效果图(图1).在3D全息(混合现实)组中,所有参与者(平均91.98,SD 2.45)、放射科医生(平均93.60,SD 2.25)、外科医生(平均91.50,SD 2.31)和医科学生(平均91.25,SD 2.18)的任务得分显著高于常规(2D)组(所有参与者:平均74.09,SD 7.59;放射科医生:平均82.63,标准差2.28;外科医生:平均74.55,标准差2.52;医学生:平均65.10,标准差65.10;P<措施)。在3D全息图的帮助下,外科医生和医科学生取得了与放射科医生相同的分数,并在识别COVID-19引起的肺部病变方面取得了明显进展(图2表2).李克特量表调查显示,3D全息影像组较2D CT组有较好的效果(教学:2D CT组中位分2分,IQR中位分1-2分,3D组中位分5分,IQR 5-5分;P<措施;理解与沟通:2D CT组中位分1分,IQR -1, 3D组中位分5分,IQR -5分;P<措施;兴趣增加:2D CT组中位数评分为2,IQR为2-2,3D组中位数评分为5,IQR为5-5;P<措施;降低学习曲线:2D CT组中位数评分2,IQR评分1-2,3D组中位数评分4,IQR评分4-5;P<措施;空间意识:2D CT组中位数评分2,IQR评分1-2,3D组中位数评分5,IQR评分5-5;P<措施;学习:2D CT组中位数评分3,IQR 2-3, 3D组中位数评分5,IQR 5-5;P<措施;图3表2).

在NASA-TLX量表的“精神”、“时间”、“表现”和“挫败感”分量表上,3D全息图组的得分明显低于2D CT组。与传统的2D组相比,3D全息图组报告了更高的身体要求。主要原因是参与者需要戴上混合现实头盔,但混合现实眼镜的重量是可以接受的(图4表2).

图1。新冠肺炎肺部病变的3D全息图。(A)一名COVID-19患者的计算机断层扫描显示斑片状纯磨玻璃影(红色箭头)。(B)全息图可以清晰显示患者肺部感染的病变部位和病变范围(绿色),可以在物理世界中360度立体观察。(C)二维和三维图像同时分析。
查看此图
图2。识别肺部COVID-19病变区域的任务评分。在混合现实组中,任务平均得分显著高于常规组P<措施。在3D全息影像的帮助下,外科医生和医科学生取得了与放射科医生相同的分数,在识别新冠肺炎肺部病变方面取得了明显进展。
查看此图
表2。任务得分,NASA任务负荷指数得分,李克特量表问卷得分。
类别 二维CT一个组均值(SD) 二维CT组,中位数(IQR) 三维全息群,均值(SD) 三维全息群,中位数(IQR) P价值
任务分

所有的参与者 74.09 (7.59) 75年(68 - 80) 91.98 (2.45) 90年(90 - 95) <措施

放射科医生 82.63 (2.28) 83年(80 - 85) 93.60 (2.25) 95年(90 - 95) <措施

外科医生 74.55 (2.52) 75年(75 - 75) 91.50 (2.31) 90年(90 - 95) <措施

医学专业的学生 65.10 (2.61) 65年(65 - 68) 91.25 (2.18) 90年(90 - 94) <措施
NASA任务负荷指数分数

精神 47.03 (5.71) 50 (40 - 50) 20.06 (2.85) 20 (20 - 20) <措施

物理 19.75 (1.09) 20 (20 - 20) 25.08 (0.64) 25 (25-25) <措施

时间 63.11 (6.45) 六十(60 - 70) 40.31 (3.04) 40 (40-40) <措施

性能 26.17 (6.03) 25 (20 - 30) 10.08 (0.99) 10(真空度) <措施

努力 69.92 (0.99) 70年(70 - 70) 69.92 (0.99) 70年(70 - 70) 获得

挫折 29.22 (5.95) 30日(25 - 35) 14.58 (1.39) 15(领路人依旧) <措施
李克特量表问卷得分

教学工具的有效性 1.73 (0.51) 2 (1 - 2) 4.8 (0.40) 5(盘中) <措施

更好的理解和沟通 1.1 (0.30) 1 (1 - 1) 4.83 (0.37) 5(盘中) <措施

增加兴趣 1.8 (0.4) 2 (2 - 2) 4.9 (0.3) 5(盘中) <措施

降低学习曲线 1.73 (0.51) 2 (1 - 2) 4.4 (0.49) 4 (4 - 5) <措施

更好的空间意识 1.6 (0.49) 2 (1 - 2) 4.93 (0.25) 5(盘中) <措施

学习更容易 2.63 (0.55) 3 (2 - 3) 4.83 (0.37) 5(盘中) <措施

一个CT:计算机断层扫描。

图3。对一份关于3D全息图的教育效用和效率的李克特量表问卷的回答。三维全息影像组较二维CT组具有更高的教育效用和效率。CT:计算机断层扫描。
查看此图
图4。美国国家航空航天局(NASA)任务负荷指数评估结果。给出了每个子量表的平均评级。在任务负荷的“心理”、“时间”、“表现”和“挫败感”分量表上,使用全息图的人得分明显低于使用2D CT扫描的人。CT:计算机断层扫描。
查看此图

一种混合现实技术的3D全息图可以帮助医疗专业人员,特别是医科学生和新聘用的医生,更好地识别COVID-19引起的肺部病变。它可以在医学教育中用于增加兴趣,提高理解能力,提高空间意识,降低学习曲线。

COVID-19患者肺部CT扫描显示斑片状纯磨玻璃影(图1A).我们使用混合现实技术对患者的肺部进行可视化,该技术可以将肺部的2D CT图像转换为3D全息图(图1B)清晰显示患者肺部感染的病变部位和病变范围(绿色),可在物理世界中360度立体观察。相反,标准的2D CT通常只能看到肺某一层的局部区域。3D全息图还可以同时分析2D和3D图像(图1C).由于三维全息图可以清晰地显示空间解剖邻域,不需要人脑在心理上将复杂的二维结构转化为完整的三维结构。本研究结果显示,3D全息图组与传统2D CT组相比,“精神”、“时间”和“挫折”分量表的任务负荷明显降低,获得了更好的表现。因此,本研究可帮助刚开始执业、从事非呼吸系统专业或呼吸系统专业的医生更好地识别和理解新冠肺炎引起的肺部病变。此外,这可以提高医学生对新冠病毒的了解,因为他们是抗击新冠病毒的接班人。

这种图像重建和呈现的技术也可应用于全身其他解剖系统(图5).它可以有助于更好地理解医学和非医学个体的正常和异常的身体结构,在未来的医学教育中使用时,对医科学生尤其有用。此外,与传统的3D解剖图不同,混合现实技术允许多人在教学过程中360度观看同一3D全息图。

图5。图像显示3D全息混合现实技术被用于展示和教授消化系统和骨盆骨折的分类。
查看此图

新冠肺炎疫情也给解剖学教育带来了挑战[10].尸体标本是过去解剖课的标准学习方法[11].然而,大量的财务、伦理和监管限制了它们的使用,以及尸体标本的短缺是教学院校和大学一直面临的问题[12];此外,在COVID-19流行期间,使用尸体标本具有病毒传播的潜在风险[1013].数字解剖成像是使用尸体标本的一种可行的替代解决方案,它更直观、更容易获得、更干净、更有趣、更便宜。

虽然本研究显示了有希望的结果,但未来还需要在更多的机构、人群和地点进行进一步的研究。

综上所述,混合现实技术的3D全息图可以更好地了解新冠肺炎引起的肺部病变,将在未来的医学教育中发挥重要作用。

致谢

本研究得到国家自然科学基金(批准号:)资助。湖北省重大技术创新计划项目(批准号:81974355);华中科技大学新冠肺炎应急科技专项(批准号:2016-176);2020 kfyxgyj095)。

作者的贡献

作者ZY和FY均为通讯作者。

利益冲突

没有宣布。

多媒体附件1

关于COVID-19肺部计算机断层扫描图像的信息。

DOC文件,47kb

多媒体附件2

e - health检查表V 1.6.1。

PDF档案(adobepdf档案),692 KB

  1. 世卫组织宣布COVID-19为大流行。生物学报2020年3月19日;91(1):157-160 [免费全文] [CrossRef] [Medline
  2. Steeb T, Follmann M, Hagen RM, Berking C, Heppt MV。COVID-19大流行对临床实践指南制定和更新的影响:观点。J Med Internet Res 2020 Dec 29;22(12):e20064 [免费全文] [CrossRef] [Medline
  3. 李颖,夏琳。胸部CT在2019冠状病毒病(COVID-19)诊断和治疗中的作用。AJR Am J伦琴酚2020年6月;214(6):1280-1286。[CrossRef] [Medline
  4. 影像学方法对COVID-19的诊断价值:范围综述。J Med Internet Res 2020 Aug 19;22(8):e19673 [免费全文] [CrossRef] [Medline
  5. Verhey JT, Haglin JM, Verhey EM, Hartigan DE.整形外科中的虚拟,增强和混合现实应用。国际J医学机器人2020年4月16日(2):e2067。[CrossRef] [Medline
  6. 胡辉,冯旭,邵铮,谢敏,徐松,吴旭,等。混合现实技术在医学领域的应用与展望。当代医学科学2019 Feb 13;39(1):1-6。[CrossRef] [Medline
  7. 王晓燕,王晓燕,王晓燕。立体视觉在虚拟现实和混合现实学习环境中的作用。2020年5月20日;13(3):401-412。[CrossRef] [Medline
  8. Hilt AD, Mamaqi Kapllani K, Hierck BP, Kemp AC, Albayrak A, Melles M,等。患者和专业人员对心肌梗死后信息和教育的看法与混合现实实施的洞察:横断面访谈研究。JMIR Hum Factors 2020 6月23日;7(2):e17147 [免费全文] [CrossRef] [Medline
  9. 哈特SG,斯塔夫兰LE。NASA-TLX(任务负荷指数)的发展:实证和理论研究的结果。编辑者:Hancock PA, Meshkati N。人类精神负荷。阿姆斯特丹:爱思唯尔;1988:139 - 183。
  10. Singal A, Bansal A, Chaudhary P.无尸解剖:Covid-19大流行时代的黑暗。形态学2020年9月;104(346):147-150 [免费全文] [CrossRef] [Medline
  11. 现代医学课程中的解剖学。Ann R Coll外科杂志2007年3月89(2):104-107。[CrossRef
  12. 拉维KS。2019冠状病毒病时期的尸体管理及其对印度医学教育用尸体供应的潜在影响Anat Sci Educ 2020年5月28日;13(3):316-317 [免费全文] [CrossRef] [Medline
  13. Pather N, Blyth P, Chapman JA, Dayal MR, Flack NA, Fogg QA,等。澳大利亚和新西兰解剖教育被迫中断:对Covid-19大流行的急性反应。Anat Sci Educ 2020年5月10日;13(3):284-300 [免费全文] [CrossRef] [Medline


CT:计算机断层扫描
NASA-TLX:国家航空航天局任务负荷指数


C Basch编辑;提交03.09.20;倪铮、季伟同行评议;评论作者03.11.20;修订版收到07.12.20;接受26.05.21;发表10.09.21

版权

©刘松香,谢茂,张志才,吴星火,高飞,卢林,张嘉耀,谢毅,杨凡,叶哲伟。最初发表在《医疗互联网研究杂志》(//www.mybigtv.com), 2021年10月9日。

这是一篇开放获取的文章,根据创作共用署名许可协议(https://creativecommons.org/licenses/by/4.0/)发布,该协议允许在任何媒体上不受限制地使用、分发和复制,前提是要正确引用最初发表在《医学互联网研究杂志》上的原始作品。必须包括完整的书目信息,//www.mybigtv.com/上的原始出版物链接,以及版权和许可信息。


Baidu
map