AI 已经用于连接和分析手术室数据并据此提供预测,这对外科手术的未来发展至关重要,可以提高手术室效率并推动临床决策。
这也正是 NVIDIA 与强生医疗科技(Johnson & Johnson MedTech)合作,为该公司数字手术生态系统测试全新 AI 功能的原因所在。其目标是实现开放创新并加速提供大规模的即时洞察,从而在手术前、手术中和手术后为医务人员提供支持。
强生医疗科技的业务遍及全球 80% 的手术室,每年通过其教育项目培训逾 14 万名医疗健康专业人员。
通过将 NVIDIA 先进的 AI 解决方案引入其现有生态系统和数字生态系统中,包括用于构建医疗设备的 NVIDIA IGX 边缘计算平台和 NVIDIA Holoscan 边缘 AI 平台,强生医疗科技可以加快部署由 AI 驱动的手术软件应用所需的基础设施。IGX 和 Holoscan 可支持手术设备在手术室内进行安全、实时的数据处理,以提供临床洞察,从而改善手术结果。
这项合作在全球 AI 盛会 NVIDIA GTC(3 月 18 日至 21 日在加利福尼亚州圣何塞举行并同步在线举行)上宣布,它还可以通过提供一个通用 AI 计算平台,助力在数字手术生态系统中开发的第三方模型和应用的部署。
强生医疗科技副总裁兼全球数字主管 Shan Jegatheeswaran 表示:“目前,世界各地的外科专家都在参与打造 AI 模型。如果我们能够创建一个可信赖且开放的生态系统来实现和加速协调,这将创造一个创新飞轮,不同的团队可以在其中进行大规模协作和联系,从而改善对高级分析的访问,提升整个手术体验。
开放式 AI 创新生态系统:
基于 NVIDIA Holoscan 和 IGX 构建
强生医疗科技与 NVIDIA 携手,测试专为医疗环境打造的工业级边缘 AI 功能如何令外科领域获益。
Jegatheeswaran 表示:“我们的互联数字生态系统将打破传统的进入壁垒,帮助开发者在手术室中构建应用和部署分析。我们通过减轻构建安全企业级平台所需的繁重工作,让想要参与手术工作流的人能更加轻松地参与其中。”,NVIDIA Holoscan 加速实时 AI 应用的开发和部署,助力数据流处理。Holoscan 包含参考管道,可为各种医疗用例(包括内窥镜、超声波和其他传感器)构建 AI 应用。它在 NVIDIA IGX 上运行,其包括 NVIDIA Jetson Orin 模组、NVIDIA RTX A6000 GPUs 和 NVIDIA ConnectX 网络技术,可实现来自医疗设备或手术室视频源的高速数据传输。
NVIDIA 通过 NVIDIA AI Enterprise(面向生产级 AI 的企业操作系统)支持 IGX 软件堆栈。
利用设备数据助推外科 AI 发展
强生医疗科技团队预计,NVIDIA 加速的边缘分析技术作为其互联数字生态系统的后盾,能够推动由设备、患者和其他手术数据驱动的 AI 应用的发展。
开发者可以通过持续不断的学习,根据已部署设备收集的数据来改进算法。例如,内窥镜收集的真实画面可用于完善 AI 模型,在手术室显示屏上实时识别器官、组织和可能存在的肿瘤,为临床决策提供支持。
Jegatheeswaran 表示:“随着时间的推移,外科手术技术将变得更加智能,为外科医生和医院提供强大的高级分析能力。各种 AI 模型可以像驾驶员辅助技术那样协助外科医生,增强其医护能力,同时减少认知负荷。”,举个例子,AI 可以从手术视频中删除个人身份信息,以便将视频用于下游研究目的,或者在实时处理时,让医院能够远程引入外部专家,在手术期间提供咨询,同时保护患者隐私。
未来的应用可以使外科医生与聊天机器人进行交互,获得有关患者病史的洞见或处理某些并发症的最佳实践。其他模型可以使用视频源来了解手术何时完成,提醒下一个手术团队手术室即将可用,从而提高手术室效率。