发布询价单
您的位置:首页 > 资讯 > 行业资讯 > 正文

研究人员通过展示手术视频教机器人缝合

2020-06-22 08:22 性质:翻译 作者: 杨旭 来源:AGV网
免责声明:AGV网(www.chinaagv.com)尊重合法版权,反对侵权盗版。(凡是我网所转载之文章,文中所有文字内容和图片视频之知识产权均系原作者和机构所有。文章内容观点,与本网无关。如有需要删除,敬请来电商榷!)
对医务人员来说,将手术后的病人缝合在一起是一项至关重要而又单调的任务,通常要求他们重复相同的简单动作数百遍。最近在英特尔与加州大学伯克利分校之间的共同努力下,不久之后,外科医生可以将...

对医务人员来说,将手术后的病人缝合在一起是一项至关重要而又单调的任务,通常要求他们重复相同的简单动作数百遍。最近在英特尔与加州大学伯克利分校之间的共同努力下,不久之后,外科医生可以将这项繁琐的工作分担给机器人,不过只限用于实现自动缝合。

图片来源于网络

由Ajay Tanwani博士领导的加州大学伯克利分校(UC Berkeley)团队开发了一种半监督的AI深度学习系统,称为Motion2Vec。该系统旨在观看由实际医生进行的公开手术视频,在缝合时分解医生的动作(插针、拔针和移交),然后以很高的精度进行模拟。 

Tanwani告诉Engadget:“与传统界面以静态方式学习或从[模仿]轨迹学习相比,从视觉观察中学习具有很大的吸引力,因为现有视频中提供了大量信息内容,” 对于机器人教学,一张图片显然胜过千言万语。

Ken Goldberg博士是加州大学伯克利分校的实验室负责人,也是Tanwani的团队这项研究的顾问。他补充说:“ YouTube每分钟获得500个小时的新资料。这是一个令人难以置信的数据库。任何人都可以观看这些视频中的任意一个并理解它,但是机器人目前无法做到-他们只是将其视为像素流。因此,这项工作的目标是尝试弄清这些像素。那就是看视频,对其进行分析,然后能够将视频分割成有意义的序列。”

为此,该团队利用暹罗网络来训练AI。Tanwani解释说,建立暹罗网络是为了从无监督或弱监督的数据中学习距离函数。他说:“这里的想法是,您想产生大量重组视频中的数据,并将其压缩为低维流形。暹罗网络用于学习该流形内的距离函数。” 

基本上,这些网络可以对两个输入之间的相似程度进行排序,这就是为什么它们经常用于图像识别任务,例如将某人的监控镜头与驾驶执照照片匹配。但是,在这种情况下,研究小组使用网络将机械手动作的视频输入与人类医生执行相同动作的现有视频进行匹配。目的是将机器人的性能提高到接近人类的水平。 

由于该系统依赖于半监督学习结构,因此该团队仅需要JIGSAWS数据库中的78个视频即可训练其AI以85.5%的分割准确的和平均0.94厘米的目标定位精度来执行任务。

这些技术要进入实际手术室尚需时日,但Tanwani相信,一旦实现,外科手术AI将像当今的半自动汽车上驾驶员辅助系统一样发挥作用。他们不会取代人类外科医生,而是通过接管低水平,重复性的任务来提高他们的表现。Motion2Vec系统不仅用于缝合。如果有适当的训练数据,AI最终可以承担许多职责,例如清创术(从伤口中挑出死肉和碎屑),但不要指望它执行你的下一个阑尾切除术。

Goldberg说:“我们还没有做到这一步,但是我们正在朝外科医生的能力迈进,外科医生将观察系统,指出他们想要一排缝合线的位置,传达出他们想要六个手缝合线的能力。然后,机器人将基本上开始这样做,外科医生将能够稍微放松一下,以便他们可以得到更多休息时间,并能够专注于手术中更复杂或更细微的部分。” 

Tanwani补充说:“我们相信,这将有助于外科医生有效地将时间集中在执行更复杂的任务上,并使用技术来协助他们处理日常工作。”

网友评论
文明上网,理性发言,拒绝广告

相关资讯

  • 中国新疆棉花机器人助力机械化达97%
    在全球农业向智能化转型的浪潮中,中国新疆棉花生产实现了作业模式的重大更新。近日,机器人与自动化新闻报道指出,中国新疆棉花机械化作业率已超过97%,并通过激光“摘蕾”机器人实现智能化精细管...

    2025-07-22 09:09

  • 智造共振 创领新程 2025青岛物流装备展圆满落幕,AGV网为您盘点精彩亮点
    7月17-19日,2025中国青岛国际物流装备博览会在青岛国际会展中心(红岛馆)成功举办。作为亚太地区物流装备与智能制造领域的盛会,本届展会吸引了近千家全球优质企业参展,集中展示物流装备行业的...

    2025-07-21 09:06

  • 中国AGV网本周热点回顾(2025年7月14日-7月19日)
    AGV网(www.chinaagv.com)是中国自动导航机器人(AGV)和自主移动机器人(AMR)行业网站!团队拥有超过23年的行业垂直门户运营经验,多年来见证了传统内部物料搬运从粗放化、低效率沿着更加智能化、...

    2025-07-20 08:59

  • AGV换电系统:上海洋山港 “智慧驼群” 的绿色动力核心
    7月的上海洋山四期自动化码头,155台自动导引运输车(以下简称AGV)组成的 “智慧驼群”在场地上穿梭不息。上海振华重工集团在全球港机行业首创的AGV换电系统,正以24小时全天候的高效运转,为这...

    2025-07-18 10:38

  • AI+3D扫描:机器视觉技术弥合仓储与制造的差距
    随着AI、3D扫描与机器视觉技术的成熟,仓储物流领域正迎来一次与制造业差距缩小的重要变革。专家指出,物流环境较制造更复杂,但神经网络处理、硬件平台、软件工具的进步正让物流也能拥抱高端视觉...

    2025-07-18 09:07

  • 人形机器人正加速“跑进”工厂!浦东机器人产品、场景持续上新
    近日,中科新松有限公司正式推出睿可(rico)系列的两款人形机器人产品——睿可MR73A与睿可MR73B,两款产品将移动性、环境感知力与灵巧操作能力深度融合,大幅提升了机器人在复杂动态环境中的适应...

    2025-07-15 01:14

  • 在深圳,机器人自己搭地铁送货了
    今天(7月14日)在深圳地铁2号线湾厦站一个特殊的乘客引起其他乘客的关注纷纷举起手机拍摄“回头率”拉满原来这是全球首例由机器人自主搭乘地铁配送货7月14日,在深圳地铁2号线湾厦站,北极燕鸥卡...

    2025-07-15 01:13

  • 中国AGV网本周热点回顾(2025年7月7日-7月12日)
    AGV网(www.chinaagv.com)是中国自动导航机器人(AGV)和自主移动机器人(AMR)行业网站!团队拥有超过23年的行业垂直门户运营经验,多年来见证了传统内部物料搬运从粗放化、低效率沿着更加智能化、...

    2025-07-14 14:08

  • 新质生产力在虹口|目标10000台“机器人劳务外包”,这家企业争做行业老大!
    “市场对我们产品的需求量非常大,今天被大客户临时邀请去商讨方案了”。采访当天,上海米道信息科技有限公司创始人王晨下午三点多钟才匆匆赶回公司,一连抱歉过后他道出了缘由。据介绍,该企业凭...

    2025-07-07 17:39

  • 人形机器人进驻东风柳汽“实习” 搬箱子、分拣零部件超在行
    身高1.73厘米,体重约75公斤,通体银色,一台台人形机器人在生产线上分拣物料、搬运料箱、安装零件……近日,在东风柳汽商用车智能制造工厂总装车间,来了一批超能“新员工”。这批新员工,是来自...

    2025-07-07 17:38

关注官方微信

手机扫码看新闻