天成医疗首度导入微软HoloLens2

今年9月,一台被微软总经理孙基康称之为能“重新定义工作形态”的产品HoloLens2,当时上市记者会中他分享,已导入的科技大厂如ASML(艾司摩尔)、和硕、梦想动画等,横跨了科技、娱乐等不同产业,如今也被天成医疗体系看上,成为在台首家将HoloLens2导入的医院,也让HoloLens2的触角延伸至医疗领域。

医疗服务不能等,怎么办?

将这个产品导入到天成医疗体系的天晟医院病安暨医品管理中心主任、同时也是风湿免疫科主治医师翁国益表示,随着今年新冠状病毒(COVID-19,俗称新冠肺炎)的发生,也迫使医疗体系必须面临“转型”,尤其天晟医院一直都有提供居家集成医疗服务,要如何在避免感染、又能同时满足病患所需要的医疗服务,就成了棘手的问题,所以天晟医院借助HoloLens2的技术,让远程会诊成为第一个应用场景。

执行居家集成医疗服务的医师(图左一),在佩戴上HoloLens2设备后,便可以远程与院内的医师进行讨论。

“其实过去就可以进行远程会诊了,”翁国益坦言,但要如何能更即时、直接在医疗现场跟院内不同科别的医生进行讨论,并给予病患诊治的决定,就成了棘手的问题。

过去可能通过智能手机、电话沟通、拍照等方式,部分完成远程会诊,但过程中医生必需要接触许多产品,在新冠肺炎的非常时期,这样的医疗服务让人担心会有不必要的感染。

翁国益解释,通过HoloLens2的帮助,执行居家集成医疗服务的医生可以远程跟院内的医生进行讨论,并通过远程设备的分享,现场直接获取病患过去的病历资料,立刻就能给予正确的治疗方式,不再需要耗费许多资料、讨论的来往时间,“甚至是4G就能满足目前的需求,”翁国益说。

打造3D模型图片,病患看诊更有感

除了已经在执行的远程会诊外,天晟医院也选定了另一个场景:3D模型图片学解释,而这个应用未来也希望可以导入到健检服务。

天成医疗体系荣誉总院长郑贵麟表示,因为有了HoloLens2的设备,医生跟病患之间有了更多可能沟通的方式,而天晟医院也希望可以使用医疗用等级的3D模型软件搭配数字分身远程平台的设计,用医疗图片打造出人体器官的模型,可以让患者戴上HoloLens2后由医生解释病灶状况,不再是过去2D的平面讨论,协助病患能了解原本比较抽象的解剖构造、病理变化等,目前正在开发的是腰椎椎间盘突出的场景应用。

医师只需要输入相关资料之后,软件就能跑出属于病患个人的3D模拟图,未来只要通过医师的操作,戴上HoloLens2设备的病患就能以3D立体的概念了解自己的病状。

更进一步,天晟医院也想要把这个概念导入健检服务,让来健检的人们可以通过3D图像的方式,搭配医师的解释了解健检报告内容。

续航力、软件应用,成HoloLens2美中不足之处

虽然天晟医院才刚导入HoloLens2的应用,翁国益也期待它能让医疗场景中,不论是医生或病患都有更好的体验,但他也透露,HoloLens2虽能达到更趋近“零接触”诊疗过程,不过要习惯HoloLens2的手势还需要花上一段时间,而这也变成了天晟医生的新功课。

此外,翁国益也表示,HoloLens2的另一个问题就是“续航力”,虽然能通过移动电源改善,但未来可能有更多不同的场景,所以也必须把这个“先天缺陷”考量进去。

不仅如此,翁国益透露,在开发3D模型图片学软件时也遇到不少状况,微软虽然销售HoloLens2设备,但是在应用软件的提供却较少,即便有协助牵线软件开发商,但对医院来说又是另一笔花费,“尤其每个不同应用都要重新开发一个软件,费用惊人。”

由于HoloLens2需要靠许多手势完成操作,对于刚开始接触的医生来说,是个比较不易上手的工具。

以目前这套3D模型图片学来说,不含设备就又额外花了十几万,如果想要打造各种不同部位的3D模型图片,翁国益苦笑说口袋可是要很深才行,他也建议或许微软可以打造类似苹果App Store的平台,这样对于不是科技本业的其他客户应用来说,或许门槛降低、也更加便利。

对此,微软也表示由于HoloLens2刚在台上市不久,相关的应用场景仍持续扩展中,但随着不同领域的客户都来接洽HoloLens2的应用,相信各种创新解决方案的提供也会逐步跟上。

面对一连串新科技的诞生,郑贵麟也相当看好AR/VR科技导入医疗领域,“我想3年后会有爆发性的增长,”他说。郑贵麟也表示,相较于现在天晟医院针对HoloLens2导入的两个应用场景,他认为手术房里面的应用才是最重要的场景,伴随着HoloLens2设备的导入以及软件的辅助,手术室的医生将可以在零接触、更低的感染风险下,进行手术时也同步获取需要的资源跟信息,更有助于整个开刀的流程顺利。

天成医疗体系也将今年定为为“数字转型年”,结合台湾的医疗产业与通信产业,在科技领域中的人工智能、区块链、云计算还有大数据,持续研发跟集成应用,郑贵麟表示希望能实践“大健康科技岛”的蓝图。