三十万小时手术视频、一百二十万个术中时刻、近十亿帧手术画面,Theator打造AI手术平台( 二 )


由Theator开发的Minutes平台能够捕获手术视频中的数据 , 利用AI和计算机视觉 , 自动分析每次手术过程 , 帮助外科医生了解患者预后变化的原因 , 同时简化手术室的程序 , 降低成本 。 该平台还提供其他数据 , 包括完成手术每个步骤所需的时间 。 根据Theator的说法 , 到目前为止 , 该平台已经获得了6项专利 。
十几个医疗中心正在为theator的手术视频数据集做出贡献 , 目前已经成为全球最大的智能手术登记处 。 该数据集目前包含超过三十万个小时的手术视频 , 涵盖超过一百二十万个术中时刻 , 分析近十亿帧画面 , 生成可视化操作报告超过七千份 。
■非接触式视频捕获和分析
手术开始的那一刻 , 平台就自动开始记录和分析 , 帮助外科手术更顺利地进行 。
平台的视频技术可以实时记录完整的手术过程 , 并提供给医疗团队全方位的患者患病部位图景 。 在手术过程中 , 平台能够实现实时性地更新和通知 , 及时告知临床医生术中发生的关键事件 , 例如当检测到术中有显著出血时 , 及时反馈并使其能够优化手术结果 。
三十万小时手术视频、一百二十万个术中时刻、近十亿帧手术画面,Theator打造AI手术平台
文章图片
出血提醒示意来源:theator官网
平台还能够实现随时随地无接触式的查看手术过程 , 在手术进行中高级临床医生可以实时观看 , 在术后医生也能实现检查术中出现的问题 。 通过对不同手术视频的学习 , 以及患者患病组织视频图像分析 , 医疗团队能够提高其工作效率 , 并减少不必要的手术 。
三十万小时手术视频、一百二十万个术中时刻、近十亿帧手术画面,Theator打造AI手术平台
文章图片
多平台示意图来源:theator官网
■个性化点播视频库
每个用户的视频库都是根据个人手术需求以及其使用中标记的精选、共享和保存的按钮进行个性化策划的 。 在这之中 , 最为突出的功能就是按需求查看手术的关键时刻 。
通过将人工智能驱动的分析应用到视频中 , Theator的平台将结果数据分解为步骤、事件、决策和里程碑 , 方便外科医生进行术后复查 。 例如在胆囊切除手术中 , 自动化标记出粘连溶解、胆囊管导漏、关键安全视野三个重要的步骤 , 供给临床医生直接查看需要的节点 。
另外 , 在关键节点处提供智能注释和过滤 , 使用户能够直接快速并准确查看重点片段 。
三十万小时手术视频、一百二十万个术中时刻、近十亿帧手术画面,Theator打造AI手术平台
文章图片
关键词索引来源:theator官网
■提供相关的、可操作的意见
该平台还将通过自动EHR将手术视频与术后结果数据相关联 , 提出可供参考的意见 , 帮助改善后续护理过程 , 同时减少相关并发症的产生 。
一旦一个手术的视频被上传平台进行智能化处理 , 外科医生可以立即集中查看智能平台选择的关键时刻突出的数据包 , 从而做出重要的决定 。 每个手术过程都会被添加到Theator的训练数据集 , 扩展其模型的理解 。
在该平台的数据库中 , 保存着数千种相似的医疗案例 。 平台能够通过机器学习和提供精确的医疗图像来帮助医疗团队分析患者情况 , 将手术与相似案例进行对比 , 减少手术失败的可能 。
三十万小时手术视频、一百二十万个术中时刻、近十亿帧手术画面,Theator打造AI手术平台
文章图片
相似案例数据对比来源:theator官网
“缺乏与经验丰富的外科医生的面对面接触加速了对Theator解决方案的需求 , 这拓宽了外科医生的专业知识 , 即使是远程或异步的 。 ”联合创世人兼首席执行官TamirWolf说 , “外科医生也曾经在会议上学习新技术和新方法 , 但这些由于COVID-19的流行几乎都被移除了 。 Theator全面的手术视频数据集 , 能够上传自己的手术程序、查看相似病例以及接收和提供反馈 , 使其成为越来越重要的工具 , 更多的持续开发正在远程进行时 。 ”