让 AI “穿针引线”:在仿真中训练手术机器人
cac55 2024-09-27 07:04 26 浏览 0 评论
利用 NVIDIA Isaac Sim 和 NVIDIA Omniverse 开发的 ORBIT-Surgical 正在 ICRA 机器人大会上展出。
NVIDIA 与学术研究人员正在联合开发用于手术的机器人。
ORBIT-Surgical 是一个由多伦多大学、加州大学伯克利分校、苏黎世联邦理工学院、佐治亚理工学院和 NVIDIA 研究人员共同开发的机器人训练仿真框架。它所训练的机器人可以在提升手术团队技术水平的同时，减轻外科医生的认知负荷。
该框架支持十多种操作，这些操作灵感来源于腹腔镜手术（又称微创手术）训练课程，例如抓取针头等小物件、将它们从一只机械臂传递到另一只，并高度精准地放置针头等。
这个基于物理学的框架是使用 NVIDIA Isaac Sim（一个用于设计、训练和测试 AI 机器人的仿真平台）构建而成的。研究人员在 NVIDIA GPU 上训练了强化学习和仿真学习算法，并使用 NVIDIA Omniverse（一个用于开发和部署基于通用场景描述 OpenUSD 的高级 3D 应用程序和管线的平台）进行逼真的渲染。
在下面的视频中，ORBIT-Surgical 研究团队演示了如何在实验室环境中将仿真训练中的数字孪生移植到实体机器人上。该团队使用的是由机器人手术领导者 Intuitive Surgical 支持的非营利组织 Intuitive Foundation 所提供的社群支持型“达芬奇”研究套件。
AI 以一抵九
ORBIT-Surgical 的基础是 Isaac Orbit，这是一个基于 Isaac Sim 构建的模块化机器人学习框架。Orbit 支持各种用于强化学习和仿真学习的程序库，可以让 AI 智能体进行模拟真实专家示例的训练。
借助该手术框架，开发者能够利用在 NVIDIA RTX GPU 上运行的强化学习和仿真学习框架训练像“达芬奇”研究套件机器人（dVRK）这样的机器人，来操纵刚性和柔性物体。
阅读 ORBIT-Surgical 所依据的论文：
https://arxiv.org/pdf/2404.16027
进一步了解 NVIDIA 在 ICRA 上发表的论文：
https://developer.nvidia.com/blog/nvidia-presents-new-robotics-research-on-geometric-fabrics-surgical-robots-and-more-at-icra/
全文请查看：
https://mp.weixin.qq.com/s/w5mFroXm3PlkBqkJ2CKtLA
相关推荐
- 高中生又来卷我们了!手搓 Android 浏览器，可高度定制+脚本支持
-
回想一下，你曾经的暑假，是怎么度过的？可能是无尽的娱乐时光，或者是懒洋洋的休息日。然而，对于这位Gitee上的高中生来说，他选择在这个暑假里独立开发一款Android浏览器——Vie浏览器，...
- 网页加载CAD图纸的两个方案对比说明(网页浏览编辑DWG)
-
一．说明梦想控件提供两种技术在网页中加载CAD图纸，一个是OCX技术方案，另一个是HTML5技术方案，它们各有优缺点，用户需根据实际情况进行选择，下边分别说明一下。1、ocx技术方案（1）OCX技术是...
- 前后端分离的开源在线考试系统调试实战
-
开篇在我们的教育生涯中，或多或少的都接触过在线考试系统。例如大学里最常见的各种软件考试，上机考试等，那么有没有开源的这样的系统呢？当然是有了，今天就来调试个开源的在线考试系统。本文重点是调试，因为很多...
- 网友:小松鼠长大了!UC浏览器推出18周年专版logo引热议
-
近日，互联网厂商logo更新再次引发热议。作为国内手机浏览器的代表性厂商，UC浏览器的标志性logo小松鼠悄然发生了变化，在网友中引发了关注和讨论。依照UC微博官方账号的说法，这个全新的形象是UC18...
- 超多案例!谷歌AI模型Nano Banana的5个实用+趣味玩法
-
再不用这个AI修图神器，你的同行明天就把订单抢光了。谷歌刚放出的NanoBanana，能在一张照片里把背景、姿势、衣服一次换完，脸还是那张脸。实测把地铁照改成海边大片，只用一句话，三秒出图，不用PS来...
- 2025年最佳Windows数据恢复软件解决方案前5名
-
您是否正在寻找互联网上排名前五的WindowsPC最佳数据恢复软件解决方案？其实，网上有很多工具可以恢复已删除的文件。但并非所有应用程序都值得使用。值得信赖的文件恢复工具可以帮助您快速检索丢失、删...
- 电脑数据恢复软件推荐:10个顶级数据恢复软件分享
-
在数字化的工作与生活中，电脑文件误删除的情况时有发生，这不仅会引发我们的焦虑情绪，更可能导致重要数据的丢失。不过，幸运的是，借助正确的数据恢复软件，我们仍有机会找回那些被误删的文件。10个顶级数据恢复...
- 更懂国内APP的开源智能体!感知定位推理中文能力全面提升
-
更懂国内APP的开源智能体！感知定位推理中文能力全面提升“帮我点外卖，别点到广告位。”一句话，说出了多少人对手机自动化的真实期待。浙大和美团刚扔出来的开源项目UItron，就是冲着这句吐槽来的——它真...
- 美光首家推出采用EUV技术的1γ DDR5 DRAM芯片
-
美光科技宣布已开始向部分生态系统合作伙伴和客户出货1γ（1-gamma）16GbitDDR5DRAM芯片。美光声称，它是第一个采用1-gamma（1γ）节点的公司，该节点指的是DRAM工艺技术的第...
- DDR4的PCB设计及仿真_ddr pcb
-
以下文章来源于鼎阳硬件智库，作者王彦武DDR4关键技术和方法分析1.1DDR4与DDR3不同之处相对于DDR3,DDR4首先在外表上就有一些变化，比如DDR4将内存下部设计为中间稍微突出，边缘变...
- DDR4和DDR5内存的性能差距有哪些?
-
DDR4和DDR5内存的性能差距主要体现在带宽、延迟、能效及未来扩展性上，以下是关键差异的总结及选择建议：1.带宽与频率DDR4：主流频率为2133MHz–3600MHz，带宽约25.6–30.2...
- DDR5内存一根和两根的区别，建议收藏观看。
-
大家好，我是海韵，DDR5内存条，单条和双条有什么区别，如何选择，DDR5单条和双条内存在性能上存在差距，单条内存保持在64个通道，但内部升级为32乘以2，虽然出口速度相同，但内部运行略有提升，...
- Kingston FURY叛逆者DDR5 RGB CUDIMM内存评测 强势突破9000MT/s!
-
【ZOL中关村在线原创评测】当8000MT/s从当年的液氮超频艰难达成，到如今XMP轻松开启，DDR5内存频率的极限探索似乎看不到终点。在早先，我们曾为大家带来KingstonFURY品牌的叛逆者D...
- SK海力士将在年内推出1bnm 32Gb DDR5内存颗粒
-
IT之家4月25日消息，据韩媒NEWSIS报道，SK海力士在今日的2024年一季度财报电话会议上表示将在年内推出1bnm32GbDDR5内存颗粒。32Gb颗粒意味着消费级的...
- DRAM史上最大代际倒挂继续:三星将延长DDR4生产期限至2026年
-
IT之家8月6日消息，韩媒TheElec今天（8月6日）发布博文，报道称三星决定延长DDR41zDRAM的生产期限至2026年，一方面在DRAM史上最大代际倒挂中进...
欢迎 你 发表评论:
- 一周热门
- 最近发表
- 标签列表
-
- 如何绘制折线图 (52)
- javaabstract (48)
- 新浪微博头像 (53)
- grub4dos (66)
- s扫描器 (51)
- httpfile dll (48)
- ps实例教程 (55)
- taskmgr (51)
- s spline (61)
- vnc远程控制 (47)
- 数据丢失 (47)
- wbem (57)
- flac文件 (72)
- 网页制作基础教程 (53)
- 镜像文件刻录 (61)
- ug5 0软件免费下载 (78)
- debian下载 (53)
- ubuntu10 04 (60)
- web qq登录 (59)
- 笔记本变成无线路由 (52)
- flash player 11 4 (50)
- 右键菜单清理 (78)
- cuteftp 注册码 (57)
- ospf协议 (53)
- ms17 010 下载 (60)