English 日本語 Русский

基于示教学习的手术机器人缝合技能学习

基于示教学习的手术机器人缝合技能学习

客??????户
重庆邮电大学
关??键?词
手术机器人、示教学习、DMPs
被捕捉物
手术钳

手术辅助机器人具有控制准确、运行稳定、操作精度高的特点,可以帮助外科医生克服传统手术在操作精度、工作空间、距离和协同工作等方面的难点。


为了让手术机器人系统实现像医生一样高质量的自动化操作,一项重要的基础工作就是建立手术操作模型。


为此,重庆邮电大学杨德伟老师团队以浅表组织缝合为建模对象,进行了缝合技能学习和建模研究。


为了解决传统模型在新场景下应用时迁移能力差的问题,杨老师提出了一种演示-分解-建模的技能学习建?蚣。缝合过程的演示被分解为几个子过程,并引入动态运动基元(DMPs)方法对缝合子过程的轨迹进行统一建模。

示教学习的方法(learning from demonstration)对于相似但不同轨迹的场景有更好的迁移能力。为了获取医生缝合手术演示过程中的数据,研究人员建立了一套缝合手术演示采集系统。

系统包含米兰体育米兰体育动作捕捉系统、手术钳、缝合针、线以及伤口模型。

其中米兰体育米兰体育动作捕捉系统配置了7个红外光学镜头来测量和捕捉缝合过程。两个手术钳分别粘贴三个反光标识点。利用动作捕捉系统获取反光标识点的三维空间坐标,并计算手术钳连续实时位置和姿态运动轨迹。


如下图,通过坐标转换,可以获得左、右手术钳在伤口坐标系下的运动轨迹。此处为了消除医生手部抖动,对轨迹数据做了低通滤波处理。


缝合过程可以分为三个阶段:针穿入皮肤组织;打结;拉紧缝线。作者提出的DMPs方法可以表示每个阶段的动态过程。下图显示利用DMPs方法训练后学习得到的轨迹。可以看出DMPs得到的轨迹与真实轨迹一致性较好。

DMPs 模型的一个优点是迁移效果好。如下图所示,改变终点位置时,整体缝合的动态过程是相似的,这样可以方便地使用学习缝合模型为一些不同位置和类型的伤口规划新的轨迹。

(图中蓝色实线为米兰体育米兰体育动作捕捉系统采集的缝合轨迹,红色虚线为更换目标位置后DMPs学习后对应的轨迹) 

参考文献:[1]   D. Yang, Q. Lv, G. Liao, K. Zheng, J. Luo and B. Wei,"Learning from Demonstration: Dynamical Movement Primitives Based ReusableSuturing Skill Modelling Method," 2018 Chinese Automation Congress (CAC),2018, pp. 4252-4257, doi: 10.1109/CAC.2018.8623781.




IEEE RAL 足式机器人鲁棒状态估计 精度较基线提升40%以上

山东大学研究团队发表面向绳驱动连续体机器人的融合非线性扩展状态观测器的自适应滑模跟踪控制方法,米兰体育动捕为实验提供机器人末端执行器位姿数据,助力验证控制方法有效性。

室外环境无人车动作捕捉

清华大学李翔老师团队在室外环境下对无人车进行动作捕捉。米兰体育米兰体育抗日光版本动捕镜头过滤日光干扰,准确识别无人车表面的反光标记点,获取高精度运动轨迹。

IJRR | 北航团队提出机器人复合分层抗干扰框架:实现无人机边飞边学

北航杭研院郭克信老师团队在IJRR上发表FORESEER机器人复合分层抗干扰框架,研究在五种不同构型的无人机平台上进行了室内外大量实验,通过四类代表性任务系统验证框架的性能。 米兰体育米兰体育动作捕捉系统为实验提供了无人机在室内执行飞行任务时的高精度位姿数据及轨迹信息,助力验证FORESEER框架处理各种不确定性的有效性。

IROS 2025浙大高飞老师团队 | FLOAT Drone:一种可用于近距离操作的共轴全驱动无人机

浙江大学高飞老师团队设计并验证其创新的FLOAT Drone全驱动同轴无人机并发表于IROS 2025。该无人机首次集成控制面,结合同轴双旋翼设计,实现了低气流干扰的紧凑型平台,可完成倾斜悬停浇花、穿越狭窄缝隙、近距离推拉窗帘等精细任务。米兰体育米兰体育动作捕捉系统为该无人机动力学建模、双模态控制器验证及高精度轨迹/姿态跟踪提供关键的位姿真值数据。
联系米兰体育app
如需更多应用、案例信息或产品报价,请致电 米兰体育官网,或在下方留言:
机器人/无人机 VR/AR/XR 运动康复 传媒娱乐
北京米兰体育科技有限公司(总部)
北京市朝阳区安慧里四区15号五矿大厦8层820室
米兰体育app
米兰体育官网
提交成功!请您耐心等待!
欢迎关注公众号,获取更多信息
关闭
网站地图XML