沈阳蓝软MR智能手术导航系统查看源代码讨论查看历史

来自 搜狐网 的图片

沈阳蓝软MR智能手术导航系统沈阳蓝软智能医疗科技有限公司（以下简称“蓝软"）专注于MR 混合现实技术和人工智能技术的研究，并努力将更多前沿科学技术在 医疗行业应用及创新，衍生符合行业发展趋势与产品配套相适应的多 种业务模式。目前，企业主营业务包括：医学三维影像重建、医疗大 数据分析应用、3D生物器官打印、MR混合现实医疗产品个性化定 制；主营产品包括：MR混合现实手术导航系统、MR假体置换系统、 医学三维影像自动建模软件。

一，案例简介

本项目通过MR混合现实技术并结合三维重建技术使医生患者 可以透过MR设备直观清晰的了解病灶位置，在远程门诊沟通、远程 术前方案设计、远程术中指导、远程术后康复训练和远程手术示教等 多个方向提供技术支持。

二、案例背景

近年来，国务院、科技部、卫健委等部委多次发文强调医疗行业 要加快发展人工智能、虚拟现实、增强现实、定位导航等前沿技术， 加快推进智能穿戴设备应用，加快发展智慧医疗等意见。随着国务院办公厅《关于促进“互联网+医疗健康”发展意见》等文件的发布，以 科技手段促进“健康中国"、“智慧医院建设，构建更为智慧、多元、 便捷的医疗服务体系，成为我国医疗迈向高质量发展的必然选择。

我国的医疗现状主要存在着三大问题：医患关系紧张、医疗资源不平均和医疗不规范。本项目通过建设而MR智能手术导航系统，构 建智慧医疗体系，解决当下在医疗服务过程中，因医患信息不对称产 生的问题和矛盾，让医生与患者的沟通更加直接、精准、高效。实现 助力医疗数字化发展、智慧城市发展、加快远程医疗发展。

三，案例介绍

沈阳蓝软MR智能手术导航系统，将MR混合现实技术、信息数 字技术应用于包括术前、术中、术后的整个医疗过程，引领医学信息 从一维、二维向三维、四维的跳转，攻克外科手术的痛点和难题，并 利用AI+云数据产品形成全新的医疗领域生态环境。

1. 三维模型精准重建病灶部位，术前规划更清晰

传统骨科手术，医生将X片、CT、磁共振等影像学检查结果，在大脑中进行再现还原，完全依赖主刀医生的对解剖结构和各种变异 的熟知，手术存在一定安全隐患，病患术后康复效果也有可能会受到 一定影响。混合现实技术通过三维重建算法将患者dicom数据进行三 维模型重建，使用三维模型定位系统将三维模型与患者实体进行一比 一重合，可以让医生和医生，医生和患者之间的沟通变得更加便捷、 直观。研究基于5G建立一体化诊断及现实平台，实现多医院和多中 心之间患者信息同步，跨医院信息同步时间不大于60s,信息传输全 程加密，响应时间不大于2s。可为制定最佳治疗方案的提供有力工具, 使得治疗方案更加精准、高效。

2. 可穿戴MR眼镜，术中模型精准匹配实时导航，“透视”可见

混合现实技术可以在外科医生不充分扩大手术切口的情况下掌 握病人的身体内部信息，并叠加显示在虚拟的物理空间上，实现精准 的手术治疗方案。在术中，主刀医生和助手医生通过星图，获取全息影像信息，使患者虚拟的3D数字模型与患者病变部位完全重叠在一 起，使医生拥有了全新的高维度“透视”手术区域的工具。混合现实实 时现实交互方法，针对诊断等保障方面工作，拟采用实时预测校正的 方法实现模型实时可视化显示，并支持远程反馈、多视角、沉浸式远 程辅助，实现对复杂病情的实时指导、诊断、监控，延迟小于200ms。

同时借助5G网络的低延迟、高传输，以双向传输数据、语音、 图像等信息为手段，可以实现不受空间限制的远距离医疗服务，使得 远程术中实时指导得以实现。系统通过5G远程通信、混合现实成像技术可以提供专业的医疗技术服务，为医疗卫生条件较差的地区提供 医疗服务。医生通过MR设备和红外追踪设备将专家的手术方案通过 5G网络同步至需要远程指导的客户端，客户端实时同步患者数据至 指导端，专家针对患者的实施情况会做出相应的调节来指导客户端的 医生进行相应的方案操作。专家医师的手臂可以延伸至千里之外，有 利于优质医疗资源下沉，缩小分级诊疗差距，减轻患者经济负担。

四、典型经验提炼

（一）具体措施和成效

沈阳蓝软智能医疗MR眼镜作为显示端设备，在术中为医生提供 360度的全方位视角观看患者病灶处的三维图像，三维图像根据患者 术前的CT数据进行一比一模型重建；术中采用二维码定位功能，将患者的重建模型与患者本身进行一比一重合，通过手机或PC等移动 端设备控制眼镜内的重建模型进行移动、旋转、缩放、透明度增减以及颜色变化，可将患者其他部位组织进行隐藏，着重显示所需区域及 肿瘤位置；为医生在术中提供良好的帮助。

系统采用AI智能图像追踪算法，通过离散模型动态识别术中的常规手术器械，术中病灶位置，通过双目深度景深相机实时将目标物 体的空间位置信息同步眼镜内部，从而实现眼镜中的模型与实物状态 实时一致，并为术者提供三维可控制的实时解决方案，减少术中难度, 提高手术精度，为患者减轻痛苦。

（二）借鉴意义

近几年出现了三维模型重建技术，是通过多层的影像学照片合成 一个3D模型，将其放在平板电脑中，使医生更加直观的查看病灶和 各组织、器官、血管的位置关系，但仍是在平面的显示器查看，且使 用时医生需要暂停手术，用手或需要助手为其操作观看。

MR混合现实技术的应用，彻底解决了外科医生在手术过程中的 这一问题，第一将三维模型完全全息显示到真实世界，这是真正的 3D物体，你从不同角度将看到其不同角度的效果，改变传统的阅片 模式；其二，解放了医生的双手，使医生在连续进行手术操作的情况 下，实时查看模型对象；其三，虚拟三维模型和患者真实身体重合会产生一种透视的效果，帮助医生更加快速的定位病灶及其周围的血管 和组织器官，以达到精准医疗的目的；其四，虚拟三维模型可以为术 前的手术规划提供参考，同时也可为医生在术中精准定位病灶提供导航，从而缩短手术时间，降低手术风险，提高手术成功率。

沈阳蓝软MR智能手术导航系统将大数据、人工智能、物联网等 前沿技术融入智慧医院，形成了全新的医疗领域生态环境，助力智慧 医疗发展和健康中国建设。