从徒手示范到自主机器人超声:解剖锚定的学习框架

· 编辑团队 estimated
医疗机器人 机器人超声 模仿学习 流匹配策略 力反馈

超声检查高度依赖操作者手法,而专家技能体现在解剖标志、超声图像与探头-组织接触三者的协同判断上。该工作提出解剖锚定的模仿学习框架:放置模块先从外部视觉识别任务相关的解剖起点,把初始探头位姿定义为扫描参考系;流式策略再以锚定相对位姿、超声图像、探头端相机视角与接触力为输入生成扫描动作,并由终止头判断任务完成。在16名未见被试上,肾脏、胆囊、肝脏标准切面与桡动脉扫查的成功率分别为96%、94%、88%、94%,腹部任务较微调后的pi_0提升10至42个百分点,并可免重训迁移到第二台机器人。

原文 · arXiv:2610.32525

超声是目前少数仍完全依赖操作者手艺的影像模态。同一台机器、同一个探头,不同医师扫出的切面质量可以差出一个诊断等级。要让机器人稳定复现专家扫描,难点不在运动控制,而在技能本身是隐性的:医师同时在看解剖标志、判读实时图像、并通过探头与组织的接触感调整力度和角度,这套协同判断很难写成手工控制律。

核心创新

作者的出发点是一个表征问题——模仿学习的观测与动作空间应当反映扫描的解剖结构,而不是把一切丢给一个通用的端到端策略。框架分两层:

解剖锚定放置。 放置模块从外部视觉观测中识别任务特定的解剖起点,并把初始探头位姿确立为整个扫描过程的参考系。此后策略不再持续依赖第三人称视觉,而是工作在锚定坐标系下,从而降低对机器人与患者相对摆放构型的敏感度。

锚定相对的扫描策略。 一个基于流匹配的策略以锚定相对的探头位姿、超声图像、探头端相机视角与接触力为条件生成扫描动作,另有终止头预测任务是否完成。为了采集训练数据,作者搭建了手持采集平台,在自然徒手扫描过程中记录多模态示范,全程不需要机器人参与。

实验结果

  • 在 16 名未见被试上评估,肾脏、胆囊、肝脏标准切面与桡动脉扫查的成功率分别为 96%、94%、88%、94%。
  • 腹部任务相较微调后的 pi_0 模型提升 10 至 42 个百分点,同时达标时间更短、峰值接触力更低、轨迹抖动更小。
  • 消融实验支持解剖锚定、自视角视觉与力反馈三者互补,缺一都会掉点。
  • 端到端(含自动放置)试验达到 90-100% 成功率。
  • 策略免重训迁移到第二台机器人,成功率 83-100%。

局限性

被试规模为 16 人,摘要未说明是否覆盖病理人群或不同体型,泛化到真实门诊人群仍需验证。终止头与自动放置的失败模式没有被单独量化,接触力的安全边界也没有给出明确阈值——这在临床场景里比成功率更关键。此外缺少多中心、跨设备的前瞻性评估。

行业影响

超声医师短缺与操作者间差异是筛查普及的两大现实障碍,机器人超声的价值正卡在”能扫”和”扫得可信”之间。这项工作最可迁移的部分不是策略网络,而是锚定参考系这一设计:它把解剖语义变成显式的坐标约定,使策略与具体机型、床位摆放解耦,换机迁移因此几乎免费。对超声设备厂商与远程医疗平台而言,这意味着自动化扫查可以按”解剖部位”打包成可部署技能,而不是为每家医院重训一套模型;手持采集平台则让数据可以在真实临床流程中自然积累,而不占用机器人机时。