乐卓博大学AR最新成果:新冠肺炎肺部感染3D可视成像!
近期,乐卓博大学公布了AR(增强现实)研究的最新成果——利用COVID19患者肺部的CT扫描建立受感染器官的虚拟3D模型,再通过HoloLens 2增强现实(AR)头盔对疾病进行了独特的观察。
这项研究被公认为是世界首创,其可视化效果能够有效加强对患者肺部内部的研究。该系统由乐卓博大学计算机科学与信息技术学院系主任Henry Duh教授领导的团队历时八周开发而成。
杜教授说,3D建模可以显示健康的肺部被冠状病毒感染的整个过程,可以更好地了解病毒是如何侵入人体——这是2D生物医学图像难以实现。
医学影像是提供医疗服务不可或缺的,也是临床研究的重要组成部分。然而,目前缺乏合适的软件来充分利用增强现实与医学图像的多模态交互。
而乐卓博大学试图通过使用AR,将3D图像叠加在(通过相机镜头看到的)真实物体上的方式,来构建沉浸式医疗工具来克服这一问题。
通过利用包括Windos10和HoloLens2在内的微软资源,大学希望这项技术能被尽快应用于临床诊断。
杜教授的团队现在正朝着使用人工智能自动分割肺部(或是任何感兴趣的器官)的方向努力,并从2D医学图像中渲染3D扫描,对其揭示的内容进行更深入的分析。
杜教授介绍道,”我们项目的最终目标是实现感染肺部的可视化,同时与人工智能分析的结果相联系。临床医生将能够看到实时分析结果,从系统中获得更深入的研究结果。
微软(澳大利亚)的教育总监Tiffany Wright说。“微软非常荣幸能够支持像Duh教授这样的先锋技术专家的工作。人工智能和HoloLens2被完美结合,而乐卓博大学以令人惊讶的速度完成了应用的整合。从2021年开始,乐卓博大学将开设一门新的课程——数字媒体硕士,该课程将研究用户体验、交互设计以及虚拟和增强现实环境等问题,而这个项目将成为学生和研究人员的重要灯塔。