Advancing Robotic Surgery: Affordable Kinesthetic and Tactile Feedback Solutions for Endotrainers
Columbia University(哥伦比亚大学);PSG College of Technology(PSG理工学院)
针对手术机器人缺乏触觉反馈的问题,本研究将经济型动觉与触觉反馈系统集成至内窥镜训练器,通过光电传感器实现95%准确率的力检测,提升训练真实性与手术安全性。
2024-06-26 cs.RO
Unraveling the Connection: How Cognitive Workload Shapes Intent Recognition in Robot-Assisted Surgery
Cognitive Assistants(认知助手);German Research Center for Artificial Intelligence (DFKI)(德国人工智能研究中心);Saarland Informatics Campus, Saarbrucken, Germany(萨尔布吕肯德国信息学校区)
本研究构建智能多模态辅助框架,利用脑活动、心率、肌肉活动和眼动追踪监测认知负荷,以增强机器人辅助手术中的外科医生意图识别,从而改善手术效果。
2025-08-03 cs.HC cs.RO
Robotic Arm for Remote Surgery
University of Witwatersrand(威特沃特斯兰德大学)
电信技术的最新进展使外科医生能够使用机器人技术对患者进行远程手术。研究和测试的远程手术,使用机器人手臂。机械臂设计为具有四个自由度,可跟踪外科医生的x、y、z位置和前臂的旋转角度θ。该系统包括两个主要子系统,即检测系统和致动系统。该检测系统使用红外发光二极管、反光手镯和两个红外摄像机,它们作为一个整体确定外科医生前臂的坐标。致动系统或机械臂基于导螺杆机构,该机构可以获得0.28 m/s的最大速度,末端执行器为1.5度/步。红外探测和编码器分辨率分别低于0.6 mm/pixel和0.4 mm,确保了机械臂的精确操作。外科医生能够使用显示计算机上的图形用户界面来监测患者。丝杠系统的建模和实验结果进行比较。该系统使用简单的比例积分器(PI)控制方案进行控制,该方案在dSpace控制单元上实现。控制设计的结果在小于0.5秒的上升时间,小于1毫米的稳态误差和小于1.4秒的建立时间。该系统积累,在一段较长的时间内,约4毫米的误差,由于机械臂的惯性效应。结果显示出有前途的系统性能特性的一个相对便宜的解决方案,一个相对先进的应用。
2013-07-22 cs.RO
Gaze-based Learning from Demonstration In Surgical Robotics
University of British Columbia(不列颠哥伦比亚大学)
本文针对 da Vinci 手术机器人相机臂需手动控制、中断手术流程的问题,提出基于外科医生注视数据与机器人运动学数据的概率模型,以实现相机臂运动自动化。
2023-11-01 cs.RO
Primary Experimental Feedback on a Co-manipulated Robotic System for Assisted Cervical Surgery
Pprime Institute(Pprime研究所);University of Poitiers(普瓦捷大学);CNRS(法国国家科学研究中心);ISAE-ENSMA(法国高等航空航天学院-国立高等机械与航空技术学院);Centre Hospitalier Universitaire (CHU)(大学教学医院(CHU));National Central University(国立中央大学);National Engineering School of Sousse(苏塞国立工程师学院);University of Sousse(苏塞大学)
本研究评估了一种协同机器人系统在辅助颈椎手术钻孔任务中的性能,通过分析其轨迹执行精度,为临床应用提供可靠性和改进方向的反馈。
2026-02-06 cs.RO
Organ Shape Sensing using Pneumatically Attachable Flexible Rails in Robotic-Assisted Laparoscopic Surgery
University College London(伦敦大学学院);Welcome/EPSRC Centre for Interventional and Surgical Sciences(惠康/工程与物理科学研究委员会介入与外科科学中心)
在机器人辅助肾部分切除术中,外科医生通常由于存在肿块而切除肾脏的一部分。与手术机器人配对的插入式超声探头被部署在肾脏表面上执行多次滑动,以定位肿块并确定切除边缘。这一子任务具有挑战性,必须由高度熟练的外科医生执行。自动化这个子任务可以减少外科医生的认知负荷并改善患者的预后。这项工作的总体目标是利用气动可附接柔性(PAF)导轨系统(一种用于器官扫描和重新定位的软机器人设备),在肾脏表面上自主移动超声探头。首先,我们将形状传感光纤集成到PAF轨道系统中,以评估机器人辅助腹腔镜手术中目标器官的曲率。然后,我们研究PAF导轨材料的刚度对曲率传感精度的影响,考虑到手术区域中存在软目标。最后,我们使用形状感测来规划达芬奇手术机器人与插入式超声探头配对的轨迹,并自主生成肾脏体模的超声扫描。
2022-11-21 cs.RO
Affordable Mobile-based Simulator for Robotic Surgery
Digital Surgery Limited(数字手术有限公司);University College London(伦敦大学学院);Kasetsart University(泰国农业大学)
机器人手术和新型手术器械为更安全、更准确和一致的微创手术提供了巨大的潜力。然而,采用这些方法取决于能否获得培训设施和广泛的外科培训。与开放式或腹腔镜相比,机器人器械需要不同的灵巧技能。因此,外科医生需要投入大量时间参加广泛的培训计划。相反,由于用于培训目的的机器人系统的可用性有限,实际操作经验代表了医院的额外运营成本。外科医生和医院面临的所有这些技术和财政障碍都阻碍了机器人手术的采用。在本文中,我们提出了一个移动灵活性训练包,以发展基本的手术技术在一个负担得起的设置。该系统可用于训练基本的外科手术姿势,并开发操纵机器人器械所需的运动技能。我们的工作提出了架构和组件需要创建一个模拟环境的培训子任务,以及便携式移动机械手,可用作主控制器的不同仪器的设计。初步研究结果表明,该系统的可用性和技能的发展。
2018-07-20 cs.RO
Control Modes of Teleoperated Surgical Robotic System's Tools in Ophthalmic Surgery
Department of Mechanical and Aerospace Engineering at the University of California, Los Angeles (UCLA)(加州大学洛杉矶分校机械与航空航天工程系);Jules Stein Eye Institute at the University of California, Los Angeles (UCLA)(加州大学洛杉矶分校Jules Stein眼科研究所)
本研究针对眼科手术遥操作机器人的内部、外部两种控制模式及不同缩放因子,在模拟玻璃体视网膜手术中开展对比实验,发现内部控制模式与高缩放因子更利于精准操作,为优化手术机器人控制、提升手术精度与可及性提供依据。
2025-10-29 cs.RO
Mapping Surgeon's Hand/Finger Motion During Conventional Microsurgery to Enhance Intuitive Surgical Robot Teleoperation
University of Sheffeild(谢菲尔德大学)
目的:机器人技术和人工智能(AI)的最新发展导致医疗保健技术的重大进步,增强了某些外科专业的机器人辅助微创手术(RAMIS)。然而,目前的人机接口缺乏直观的遥操作,不能模仿外科医生的手/手指的感应和精细运动。这些限制使得远程操作的机器人手术不适合显微手术,并且对于已建立的外科医生来说难以学习。我们报告了一项试点研究,显示了一种直观的方式记录和映射外科医生的总的手的运动和精细的协同运动在心脏显微手术,以提高未来直观的远程操作。研究方法:我们开始开发一个原型系统,能够通过在模拟心脏显微手术过程中映射手腕,手和手术工具实时数据采集(RTDA)输入来训练深度神经网络(DNN)。训练好的网络用于从精确的手关节角度估计工具位姿。结果如下:根据外科医生在模拟显微手术期间的反馈,所开发的具有用于运动跟踪的轻质传感器的可穿戴系统不会干扰手术和器械操作。可穿戴运动跟踪系统使用15个手指-拇指-手腕关节角度传感器来生成有意义的数据集,这些数据集表示DNN网络的输入,其中根据需要添加新的手关节角度,并将估计的工具姿势与测量的工具姿势进行比较。DNN架构针对最高的估计精度和以最小均方误差确定工具姿态的能力进行了优化。这种新的方法表明,手术器械的姿态,一个基本要求的遥操作,可以准确地估计从记录的外科医生的手/手指运动的均方误差(MSE)小于0.3%
2021-02-21 cs.AI cs.LG cs.RO
Spotlight-based 3D Instrument Guidance for Retinal Surgery
Johns Hopkins University(约翰斯·霍普金斯大学);Technische Universität München(慕尼黑工业大学);The Chinese University of Hong Kong(香港中文大学)
视网膜手术是一项复杂的活动,对于外科医生来说,有效和安全地进行手术是一项挑战。图像引导机器人辅助手术是一种有前途的解决方案,可以显著提高手术治疗效果,减少人类外科医生的身体限制。在本文中,我们展示了一种新的方法,用于三维导航的仪器的基础上投影的聚光灯在单显微镜图像。首先分析了聚光灯的投射机理,并分别建立了平面和球面上的投射模型。为了测试所提出的方法的可行性,光纤集成到仪器,这是由稳定的手眼睛机器人(SHER)驱动。使用该算法在视网膜模型上对光斑进行分割和跟踪。静态校准和动态测试结果均表明,所提出的方法可以很容易地存档0.5 mm的头端到表面的距离,这是在临床上可接受的眼内视觉引导的精度。
2020-12-11 cs.RO
A vision-language model and platform for temporally mapping surgery from video
Halsted AI
本文提出Halsted模型,基于Halsted手术图谱实现手术行为映射,提供更全面且高效的解决方案,并开发Halsted平台使外科医生能自动映射自身手术。
2026-03-23 cs.CV cs.RO
Impact of Extended Reality on Robot-Assisted Surgery Training
Rowan-Virtua School of Osteopathic Medicine(罗文-弗吉尼亚骨科医学院);Rowan University(罗文大学)
本研究通过系统综述与荟萃分析发现,扩展现实模拟器可显著提升新手外科医生的手术表现,其效果与传统物理模拟器训练相当,能在低成本低风险环境下传授复杂手术技能。
2025-01-22 cs.HC cs.RO
Collaborative Human-Robot Surgery for Mandibular Angle Split Osteotomy: Optical Tracking based Approach
organization= School of Medical Technology;the Key Laboratory of Biomimetic Robots;Systems, Beijing Institute of Technology , city= Beijng , postcode= 100081 , country= China;organization= School of Mechatronical Engineering;Systems , Beijing Institute of Technology , city= Beijng , postcode= 100081 , country= China;organization= School of Biomedical Engineering \& Imaging Sciences, King's College London , city= London , postcode= SE1 7EU , country= UK
本文提出一种基于光学追踪的下颌角劈开截骨术人机协作系统,通过任务分解实现机器人控制位置与姿态、医生管理力控制,并利用牙咬合垫追踪患者下颌运动,钻孔实验平均误差为1.85mm。
2025-07-10 cs.RO
Visual Attention Based Cognitive Human-Robot Collaboration for Pedicle Screw Placement in Robot-Assisted Orthopedic Surgery
Tsinghua University(清华大学);Harbin Institute of Technology(哈尔滨工业大学);Midea Corporate Research Center(美的集团企业研究中心);Midea Group(美的集团)
针对骨科椎弓根螺钉置入仍需人工操作且自动化风险高的问题,本文提出融合AR触觉界面、视觉注意外科医生模型和共享交互控制的认知型人机协作框架,实验证明其在安全性与人机工程学上优于全机器人或全人工控制。
2025-01-31 cs.HC cs.RO
Design and Experimental Evaluation of a Haptic Robot-Assisted System for Femur Fracture Surgery
Biomedical Engineering Department, Rowan University(罗文大学生物医学工程系)
本文提出Robossis触觉机器人辅助股骨骨折手术系统,通过单边控制与触觉渲染解决运动传递和运动学不匹配,实验显示平均平移误差0.32 mm、旋转误差0.07度,并在尸体实验中验证了其辅助手术的直观有效性。
2023-10-29 cs.RO
Haptic-Assisted Collaborative Robot Framework for Improved Situational Awareness in Skull Base Surgery
Johns Hopkins University(约翰霍普金斯大学);Johns Hopkins University School of Medicine(约翰霍普金斯大学医学院)
本文提出一种带触觉辅助虚拟夹具的协同控制机器人系统,用于颅底手术钻孔,实验表明其能提升关键结构周围钻孔的安全性并减轻术者负担。
2024-01-22 cs.RO cs.SY eess.SY
Robot Autonomy for Surgery
University of California, San Diego(加州大学圣迭戈分校)
自主手术涉及由机器人根据自己的意愿执行手术任务,部分或没有人类参与。手术自动化有几个重要的优势,包括由于亚毫米机器人控制而提高护理精度,实时利用生物信号进行介入护理,提高手术效率和执行,以及在各种医学成像和传感模式下的计算机辅助指导。虽然这些方法可能会取代手术团队和外科医生个人的一些任务,但它们也提供了新的干预能力,这些干预能力过于困难或超出了人类的技能。在这一章中,我们提供了一个概述机器人的自主性在商业用途和研究,并提出了一些在发展自主手术机器人所面临的挑战。
2017-07-10 cs.RO
Sampling-Based Model Predictive Control for Volumetric Ablation in Robotic Laser Surgery
Duke University(杜克大学)
本文提出基于采样的模型预测控制方法,用于机器人激光手术中的体积消融规划,在考虑参数不确定性并避开敏感组织的前提下自主生成消融序列。
2024-10-04 cs.RO
Fully Immersive Virtual Reality for Skull-base Surgery: Surgical Training and Beyond
Johns Hopkins University(约翰斯·霍普金斯大学);Johns Hopkins Medicine(约翰斯·霍普金斯医疗集团)
本文提出用于颅底手术的全沉浸式虚拟现实系统FIVRS,结合高保真硬件与逼真手术模拟,记录多模态数据以支持训练和自动技能评估。
2023-05-31 cs.HC cs.RO
First Clinical Experience in Urologic Surgery with a Novel Robotic Lightweight Laparoscope Holder
Grenoble University Hospital(格勒诺布尔大学医院);Saint-Etienne University Hospital(圣埃蒂安大学医院);TIMC-IMAG/GMCAO Lab (CNRS 5525)(TIMC-IMAG/GMCAO实验室(CNRS 5525));Clinical Investigation Center, Grenoble University Hospital(格勒诺布尔大学医院临床研究中心)
目的:报告外科医生控制的机器人内窥镜支架在腹腔镜手术中的可行性和安全性。材料与方法:从2010年3月至2010年9月,前瞻性招募了20例患者,使用创新的机器人内窥镜支架进行腹腔镜手术。两名外科医生进行了6例肾上腺切除术,4例骶骨阴道固定术,5例肾盂成形术,4例根治性肾切除术和1例根治性肾切除术。对人口统计学数据、总体准备待用时间、手术时间、所需助手数量进行了审查。使用10分量表评估外科医生对人体工程学的满意度。在术后第1天和1个月时审查术后临床结局。结果:对17例机器人有效用于手术的患者进行了符合方案分析。中位年龄为63岁,10例患者为女性(59%)。BMI中位数为26.8。12例(71%)使用机器人完成手术。中位手术助理人数为0。使用机器人的总体设置待用时间为19 min,手术时间为130 min),在此期间,机器人的使用率为71%。平均住院时间为6.94天,$\pm$ 2.3。关于易用性的中位评分为7分。术后第1天的中位疼痛水平为1.5/10,术后1个月为0。1例(6%)需中转开腹,2例(12%)发生4例轻微并发症。结论:这种新型机器人腹腔镜支架的使用是安全可行的,它为外科医生提供了良好的舒适度。
2012-08-31 cs.RO physics.med-ph
Imitation Learning for Robot Assistance in Open Surgery: A Multi-Policy Evaluation on Suture Following
Harvard Medical School(哈佛医学院);Massachusetts General Hospital(麻省总医院)
本研究首次评估通用模仿学习在开放手术中用于外科医生-机器人协作辅助的可行性,以缝合跟随(每次缝合时助手执行的抓取-拉动-释放动作)为任务,通过比较四种策略(ACT、Diffusion Policy、SmolVLA、π₀)在28个训练模型上的表现,发现π₀在数据效率、背景鲁棒性和轨迹平滑性上最优,并在机器人缝合试验中达到92%的缝合完成率。
2026-07-28 cs.RO
Forbidden Region Dynamic Active Constraints in Robot-Assisted Minimally Invasive Surgery
Imperial College London(帝国理工学院)
本研究针对机器人辅助微创手术中禁区主动约束(FRAC)的动态组织变形等挑战,提出能量耗散型FRAC策略,经体外实验验证其鲁棒性、有效性及时间效率优于对比方法。
2026-08-05 cs.RO
How can reasoning capability empower the AI copilot robot in endoscopic surgery
Department of Electronic Engineering(电子工程系)
本文研究了推理能力在内窥手术中AI助手机器人中的应用,提出通过整合多模态线索、解读手术意图和推断隐藏组织动态来提高手术的精确性、安全性和可持续性。
2026-05-21 cs.RO
Quantification of Robotic Surgeries with Vision-Based Deep Learning
California Institute of Technology(加州理工学院);University of Southern California(南加州大学)
外科手术是一个高风险的领域,外科医生必须在完成手头的主要任务的同时导航关键的解剖结构并积极避免潜在的并发症。此类手术活动已被证明会影响患者的长期结局。为了更好地理解这种关系,其机制对于大多数外科手术仍然未知,我们假设手术的核心要素必须首先以可靠,客观和可扩展的方式进行量化。我们认为这是提供手术反馈和调整外科医生表现以改善患者结局的先决条件。为了从整体上量化手术,我们提出了一个统一的深度学习框架,名为Roboformer,它只对手术过程中记录的视频进行操作,以独立完成多项任务:手术阶段识别(手术的内容),手势分类和技能评估(手术的方式)。我们在微创机器人手术中两种常见步骤(解剖和切割)的四个基于视频的数据集上验证了我们的框架。我们证明了我们的框架可以很好地推广到看不见的视频,外科医生,医疗中心和外科手术。我们还发现,我们的框架,这自然有助于解释的发现,确定相关信息时,实现特定的任务。这些发现可能会使外科医生对我们框架的行为更具信心,增加临床采用的可能性,从而为更有针对性的手术反馈铺平道路。
2022-05-06 cs.CV cs.LG cs.RO
Human-Robot Interaction in Retinal Surgery: A Comparative Study of Serial and Parallel Cooperative Robots
Johns Hopkins University(约翰斯·霍普金斯大学);Wilmer Eye Institute, Johns Hopkins Hospital(约翰斯·霍普金斯医院威尔默眼科研究所)
本研究比较了串联与并联协作控制机器人在视网膜血管跟随任务中的人机交互性能与用户体验,发现两者在患者交互和操作时间上表现相似,均可有效用于玻璃体视网膜手术。
2023-04-01 cs.RO
Can DeepSeek Reason Like a Surgeon? An Empirical Evaluation for Vision-Language Understanding in Robotic-Assisted Surgery
The Chinese University of Hong Kong(香港中文大学);University of Strasbourg(斯特拉斯堡大学);CNRS(法国国家科学研究中心);INSERM(法国国家健康与医学研究院);ICube(ICube实验室);IHU Strasbourg(斯特拉斯堡大学医院研究所)
本研究评估了DeepSeek模型在机器人手术场景中的视觉-语言对话能力,发现其虽优于通用模型,但仍未满足临床要求,需在手术专用数据集上微调。
2025-04-04 cs.CL cs.CV cs.RO
Unsupervised anomaly detection for a Smart Autonomous Robotic Assistant Surgeon (SARAS)using a deep residual autoencoder
Oxford Brookes University(牛津布鲁克斯大学)
微创手术(MIS)中的异常检测传统上需要人类专家从控制台监视过程。另一方面,数据稀缺阻碍了向自主机器人辅助手术系统的理想迁移。该领域中的自动异常检测系统通常依赖于经典的监督学习。然而,手术环境中的异常事件是罕见的,使得难以捕获数据以以监督的方式训练检测模型。因此,在这项工作中,我们提出了一种基于深度残差自动编码器的机器人辅助手术异常检测的无监督方法。这个想法是让自动编码器学习数据的“正态”分布,并通过测量重建误差来检测偏离该分布的异常事件。该模型在公开可用的Cholec80数据集上进行训练和验证,提供额外的注释,并在作为智能自主机器人助理外科医生(SARAS)项目的一部分制作的人工解剖(“幻影”)上拍摄的一组视频上进行训练和验证。该系统在Cholec80上的召回率和准确率分别为78.4%和91.5%,在SARAS体模数据集上的召回率和准确率分别为95.6%和88.1%。该端到端系统是作为SARAS演示平台的一部分开发和部署的,用于实时异常检测,处理时间约为每帧25毫秒。
2021-04-22 cs.CV cs.RO
An Ergonomic Interaction Workspace Analysis Method for the Optimal Design of a Surgical Master Manipulator
Imperial College London(帝国理工学院)
主控制台是机器人与人类在共享环境中协作的场所。为此,人体工程学是一个需要考虑的重要方面。通过人机工程学设计,外科医生可以更舒适地进行手术任务,更高的效率,并可以提高遥控机器人手术的质量。本文提出了一种人机交互工作空间分析方法,以优化主操作手,并满足人机工程学的考虑,设计一个主操作手的遥控手术。
2021-05-15 cs.RO
Virtual Fixture Assistance for Suturing in Robot-Aided Pediatric Endoscopic Surgery
The University of Tokyo(东京大学);Kitasato University Hospital(北里大学医院)
小儿内窥镜手术中有限的工作空间使手术操作成为最困难的任务之一。在切割过程中,外科医生必须防止工具之间的碰撞以及与周围组织的碰撞。手术机器人已被证明是有效的成人腹腔镜检查,但援助限制性腹腔镜手术尚未得到充分探讨。在这封信中,我们提出了指导虚拟夹具,以提高性能和安全性,同时产生所需的任务约束,使用约束优化和笛卡尔力反馈。我们提出了两种引导方法:循环虚拟夹具和一个轨迹引导圆柱,这是基于动态几何元素。在与物理机器人的模拟和实验中,我们表明,所提出的方法实现了更精确和更安全的循环,在机器人辅助儿科内窥镜检查。
2020-02-21 cs.RO
Toward a Surgeon-in-the-Loop Ophthalmic Robotic Apprentice using Reinforcement and Imitation Learning
German Research Center for Artificial Intelligence (DFKI)(德国人工智能研究中心(DFKI));Saarland University(萨尔大学)
本文提出图像引导的强化与模仿学习框架,通过外科医生在环示范和课程学习,使机器人学徒适应白内障手术中的个体技术偏好,并在仿真中验证其效果。
2024-08-12 cs.CV cs.HC cs.LG
Autonomous Coordinated Control of the Light Guide for Positioning in Vitreoretinal Surgery
the University of Tokyo(东京大学)
玻璃体视网膜手术是具有挑战性的,即使是专业的外科医生,由于微妙的目标组织和微小的工作空间在视网膜。除了提高灵活性和准确性,机器人辅助允许(部分)任务自动化。在这项工作中,我们提出了一种策略,以自动化的光导手术器械的运动。这种自动化使仪器的阴影始终处于显微镜视野内,这是仪器在视网膜中准确定位的重要提示。我们的模拟和实验表明,所提出的策略是有效的,在视网膜的手术幻影700点网格。此外,我们将所提出的策略与图像处理相结合,成功地将手术器械的尖端定位在视网膜中,仅依赖于机器人的几何信息和显微图像。
2022-01-20 cs.RO
Human-Robot collaboration in surgery: Advances and challenges towards autonomous surgical assistants
Department of Micro-Nano Mechanical Science and Engineering, Nagoya University(名古屋大学微纳米机械科学与工程系);Institutes of Innovation for Future Society, Nagoya University(面向未来社会的创新研究所)
本系统综述基于32项研究,分析了自主手术机器人助手(ASARs)在基于遥操作和直接动手交互两种协作模式下的进展,指出其在内窥镜引导和工具操作中的应用现状,并揭示了动作对齐、流程感知等关键挑战与未来方向。
2025-07-15 cs.HC cs.RO
Disturbance-Free Surgical Video Generation from Multi-Camera Shadowless Lamps for Open Surgery
本文提出了一种自动化方法,通过识别照明系统移动并重新对齐视频帧,生成无遮挡的开放式手术视频,提升手术区域的可视化效果和观看舒适度。
2025-12-09 cs.AI cs.CV cs.LG
Haptic-Enhanced Virtual Reality Simulator for Robot-Assisted Femur Fracture Surgery
Rowan University(罗文大学);Virtua Health(维克托健康医疗系统);Rowan-Virtua School of Osteopathic Medicine(罗文-维克托 osteopathic 医学院)
本文开发了用于Robossis机器人辅助股骨骨折手术的触觉增强VR模拟器,集成Sigma-7触觉控制器、RSR机器人和Meta Quest头显,验证了6自由度跟随和防骨段重叠能力,为未来系统实施提供基础。
2023-10-29 cs.RO
Combining Time-Dependent Force Perturbations in Robot-Assisted Surgery Training
Ben-Gurion University of the Negev(内盖夫本-古里安大学);California Institute of Technology(加州理工学院);University of Southern California(南加州大学);Soroka Medical Center(索罗卡医疗中心)
远程机器人辅助微创手术(RAMIS)提供了许多开放手术的优势。然而,在RAMIS中仍然没有培训技能的指导方针。运动学习理论有可能改善RAMIS训练的设计,但它们基于简单的运动,不像手术中所需的复杂运动。为了填补这一空白,我们设计了一个实验来研究与时间相关的力扰动对模式切割手术任务学习的影响。30名参与者参加了实验:(1)一个控制组,在没有扰动的情况下训练,(2)一个1Hz的组,在1Hz的周期性力扰动下训练,在径向方向上向内和向外推动每个参与者的手。我们使用四个客观指标来监测他们的学习情况,发现1Hz组的参与者学会了如何克服扰动,并在训练过程中提高了他们的表现,而在扰动被移除后,他们的表现不会受到影响。我们的研究结果提出了一个重要的一步,了解的影响,增加扰动RAMIS培训协议和改善RAMIS培训的外科医生和患者的利益。
2021-05-09 cs.RO
Hall Effect-Based Tactile Force Detection Sensor for Robot-Assisted Minimally Invasive Surgery
University of Leeds(利兹大学)
针对机器人微创手术中触觉反馈缺失的问题,本文提出一种基于霍尔效应的毫米级紧凑力传感器,可检测法向和剪切力,平均RMSE为2.133 kPa,并在体模和离体猪组织上验证了牵拉与滑动感知能力。
2026-10-08 cs.RO
Real-Time Context-aware Detection of Unsafe Events in Robot-Assisted Surgery
University of Virginia(弗吉尼亚大学)
用于机器人手术的网络物理系统使微创手术具有更高的精度和更短的住院时间。然而,随着软件的复杂性和连接性的增加以及人类操作员在手术机器人的监督中的主要参与,在确保患者安全方面仍然存在重大挑战。本文介绍了一种安全监测系统,该系统在外科医生了解手术任务的情况下,可以实时的【形】检测安全关键事件。我们的方法集成了一个手术手势分类器,推断的操作上下文的时间序列的运动学数据的机器人与库的错误的手势分类器,给定的手术手势可以检测到不安全的事件。我们使用来自两个手术平台的数据进行的实验表明,所提出的系统可以在1,693毫秒的平均反应时间窗口和0.88的F1分数内检测由意外或恶意故障引起的不安全事件,并且在57毫秒的平均反应时间窗口和0.76的F1分数内检测人为错误。
2020-06-18 cs.RO
EMG-Based Adaptation of Anisotropic Virtual Fixtures for Robot-Assisted Surgical Resection and Dissection
University of Modena and Reggio Emilia(摩德纳大学);German Aerospace Center (DLR)(德国航空航天中心)
提出一种基于EMG信号自适应调节各向异性虚拟夹具的框架,通过实时推断外科医生意图动态调整约束,实验证明能提高手术精度和运动一致性,降低认知负荷。
2026-06-12 cs.RO
Toward Personalized Training and Skill Assessment in Robotic Minimally Invasive Surgery
Wayne State University(韦恩州立大学)
尽管外科手术技术取得了巨大的进步,但评估手术技能的标准仍然基于主观标准。随着机器人辅助手术的出现,引入了客观和自主技能评估的新机会。以往的研究主要是基于隐马尔可夫模型(HMM)等结构化方法,需要大量的预处理。在这项研究中,与他们相比,我们开发了一个新的基于形状的框架,自动技能评估和个性化的手术训练与最小的参数调整。我们的工作已经解决了技能评估的主要方面,开发手势识别模型,直接对机器人辅助手术的时间运动信号,并建立自动个性化RMIS手势训练框架,我们表明,我们的方法,平均准确度为82%的缝合,70%的穿针和85%的打结,表现优于或等于最先进的方法,同时需要最少的预处理,参数调整,并为外科医生提供在线反馈,他们在培训期间的表现。
2016-11-14 cs.RO
Context-aware Monitoring in Robotic Surgery
University of Virginia(弗吉尼亚大学)
机器人辅助微创手术(MIS)已经使手术具有更高的精度和灵活性,但手术机器人仍然是开环的,需要外科医生使用远程操作控制台工作,仅提供有限的视觉反馈。在这种情况下,机械故障、软件故障或人为错误可能导致不良事件,导致患者并发症或死亡。我们认为,即将发生的不良事件可以检测和减轻应用上下文特定的安全约束的机器人的运动。我们提出了一个上下文感知的安全监控系统,该系统使用运动学数据将手术任务分割成子任务,并监控特定于每个子任务的安全约束。为了测试我们的假设上下文特异性的安全约束,我们分析记录演示的干实验室手术任务收集的JIGSAWS数据库,以及从实验中,我们进行了乌鸦II手术机器人。轨迹数据的分析表明,一个给定的外科手术的每个子任务具有一致的安全约束,在多个演示由不同的主题。我们的初步研究结果表明,违反这些安全约束导致不安全的事件,往往有足够的时间之间的约束违反和安全关键事件,以允许采取纠正措施。
2019-01-28 cs.RO
Constructing Predictive Surgical Path for AI-based Capsulorhexis Skill Transfer
Applied Robotics and AI Solutions (ARAS)(应用机器人与人工智能解决方案(ARAS));Faculties of Electrical and Computer Engineering(电气与计算机工程学院);K. N. Toosi University of Technology(K. N. 图西理工大学)
本研究构建了结合ARAS-Farabi数据集与深度卷积神经网络的平台,可辅助AI智能体生成改进手术路径,使受训外科医生运动路径提升至少20%并保留其意图。
2026-08-25 cs.AI cs.LG cs.RO
Humanoid Robots as First Assistants in Endoscopic Surgery
Johns Hopkins University(约翰霍普金斯大学);Johns Hopkins Medical Institutions(约翰霍普金斯医学院);NVIDIA Corporation(NVIDIA公司)
本文展示了一人形机器人通过遥控协助完成尸体内窥手术,验证了其在手术辅助中的可行性并指出了后续发展的挑战。
2026-02-27 cs.RO
Improving rigid 3D calibration for robotic surgery
University of Verona(维罗纳大学)
自主性是机器人手术研究的前沿,其目的是提高未来手术过程的质量。自主性的一个基本要求是通过视觉传感器实现先进的感知能力。在本文中,我们提出了一种新的校准技术与达芬奇机器人的手术场景。摄像机和机器人的校准对于工具的精确定位是必要的,以便模仿高性能的外科医生。我们的校准技术是为RGB-D相机量身定制的。对手术相关用例进行的不同测试证明,我们在外科尺寸设置上显著提高了类似器械的最新解决方案的精度和准确度。此外,我们的校准方法可以很容易地扩展到标准手术内窥镜,以促进其在实际手术场景中的使用。
2020-07-16 cs.CV cs.RO
CAT-ViL: Co-Attention Gated Vision-Language Embedding for Visual Question Localized-Answering in Robotic Surgery
Wellcome/EPSRC Centre for Interventional and Surgical Sciences (WEISS), University College London(伦敦大学学院惠康/工程与物理科学研究委员会介入与外科科学中心(WEISS));The Chinese University of Hong Kong (CUHK)(香港中文大学(CUHK));Shun Hing Institute of Advanced Engineering, CUHK(香港中文大学信兴高等工程研究所)
针对手术学习中专家指导不足及现有手术VQA系统无法定位答案的问题,提出搭载CAT-ViL嵌入的端到端Transformer手术VQLA系统,在公开数据集上性能优于现有最优方法,为手术场景理解和AI辅助手术训练提供新方案。
2023-08-19 cs.AI cs.CV cs.RO
Leveraging Vision and Kinematics Data to Improve Realism of Biomechanic Soft-tissue Simulation for Robotic Surgery
Johns Hopkins University(约翰斯·霍普金斯大学)
手术模拟在外科医生教育和开发使机器人能够执行手术子任务的算法中发挥着越来越重要的作用。为了对解剖结构进行建模,有限元法(FEM)模拟一直被视为计算准确软组织变形的黄金标准。不幸的是,它们的准确性高度依赖于模拟参数,这可能很难获得。方法在这项工作中,我们研究如何实时数据采集过程中的任何机器人内窥镜手术过程中可能会被用来纠正不准确的有限元模拟结果。由于FEM是从初始参数计算的,不能直接纳入观测,我们建议增加一个校正因子,该因子考虑了模拟和观测之间的差异。我们训练一个网络来预测这个校正因子。结果为了评估我们的方法,我们使用一个开源的达芬奇手术系统探测软组织体模,并在模拟中重放交互。我们对网络进行训练,以纠正预测的网格位置和测量的点云之间的差异。这导致平均距离提高了15-30%,证明了我们的方法在大范围模拟参数中的有效性。结论我们展示了一个框架的第一步,该框架协同结合了基于模型的模拟和实时观测的优点。它可以纠正由于建模参数不准确而导致的模拟和场景之间的差异。这可以为外科医生提供更准确的模拟环境,并提供更好的数据来训练算法。
2020-03-14 cs.CV cs.RO
Surgery Scene Restoration for Robot Assisted Minimally Invasive Surgery
Queensland University of Technology(昆士兰科技大学)
微创手术具有组织损伤小、出血少、恢复时间短等优点,但也存在一定的局限性。除了诸如缺乏触觉或触觉反馈的其他因素之外,手术部位的不良可视化是表现出包括意外组织损伤的若干手术缺点的最公认的因素之一。对于机器人辅助手术的背景,缺乏框架上下文细节使得视觉任务在跟踪组织和工具、分割场景以及估计姿态和深度时具有挑战性。在MIS中,所获取的帧受到不同噪声的影响,并且由于来自不同源的运动而变得模糊。此外,当考虑水下环境时,例如膝关节镜检查,主要可见的噪声和模糊效应源自环境、对照明和成像条件的不良控制。此外,在MIS中,由于硬件小型化,通常不存在自动白平衡和原始颜色信息到其标准RGB颜色空间之间的转换等过程。有一个在线预处理框架,可以规避这些缺点的需求很高。我们所提出的方法是能够恢复一个潜在的清洁和清晰的图像在标准的RGB颜色空间从其噪声,模糊和原始的观察在一个单一的预处理阶段。
2021-09-06 cs.RO eess.IV
Human-centered transparency of grasping via a robot-assisted minimally invasive surgery system
Ben-Gurion University of the Negev(内盖夫本-古里安大学)
本文研究单侧机器人辅助微创手术(RAMIS)中刚性物体的抓取。我们定义了以人为本的透明度,量化了RAMIS中的自然动作和感知。我们证明了这种以人为中心的透明度分析不同值的夹具缩放-外科医生侧机械手的把握孔径和手术器械抓钳的孔径之间的缩放。31名参与者在三种夹具缩放条件(精细,正常和快速,权衡精度和响应性)中的一种条件下对刚性物体进行了遥控抓取和感知评估。心理物理学分析的变化,最大的把握孔径在admission和报告的大小的对象显示,在正常和快速(但不是在罚款)夹具缩放条件下,遥控抓取与我们的系统是类似的自然把握,因此,以人为中心的透明。我们预计,使用运动控制和心理物理学的人为中心的优化遥操作控制将最终提高RAMIS的可用性。
2018-05-15 cs.HC cs.RO
Voice control interface for surgical robot assistants
Institutes of Innovation for Future Society, Nagoya University(名古屋大学未来社会创新研究院);Nagoya University(名古屋大学)
针对手术机器人传统控制接口加重医生认知负荷的问题,研究提出集成Whisper与ROS框架的语音控制接口,含三类模块,经实验验证高精度高速度,可用于手术场景,为提升手术协作效率提供新方案。
2024-09-16 cs.HC cs.RO
Affordance-Based Disambiguation of Surgical Instructions for Collaborative Robot-Assisted Surgery
Nagoya University, Japan(名古屋大学)
本文提出一种基于可供性推理的机器人手术助手框架,结合多模态视觉-语言模型与工具能力知识库消解外科医生口头指令歧义,并利用双重集合共形预测保障安全,在胆囊切除术数据集上实现60%消歧率。
2025-09-19 cs.HC cs.RO
Stable Tracking of Eye Gaze Direction During Ophthalmic Surgery
school of computer science and engineering, Sun Yat-sen University(计算机科学与工程学院,中山大学)
本文针对眼科手术机器人术前导航依赖手动操作的问题,提出一种结合机器学习与传统算法的眼部定位跟踪方法,无需面部关键点即可在多变光照下稳定估计注视方向,实验显示眼朝向估计误差0.58度、机械臂控制误差2.08度。
2025-07-01 cs.CV cs.HC cs.RO
Beyond the Manual Touch: Situational-aware Force Control for Increased Safety in Robot-assisted Skullbase Surgery
Johns Hopkins University(约翰霍普金斯大学)
本文提出基于数字孪生情境信息的机器人辅助颅底钻孔力控制方法,初步实验表明其可有效抑制高交互力并提升手术安全性。
2024-01-22 cs.RO cs.SY eess.SY
A Rapid Instrument Exchange System for Humanoid Robots in Minimally Invasive Surgery
Tianjin University(天津大学);Institute of Medical Robotics and Intelligent Systems, Tianjin University(天津大学医学机器人与智能系统研究所)
本文提出一种沉浸式远程操控的快速工具交换系统,通过低延迟机制和实时第一人称视角感知,降低操作复杂度,提升人形机器人在受限临床环境中的工具交换稳定性。
2026-04-03 cs.CV cs.RO cs.SY