一个新的大型仿真平台,用于训练机器人执行日常任务

菲梦 2023-11-09 阅读:65 评论:0
英格丽德·法德利 , 科技探索 人工智能(AI)工具的性能,包括用于自然语言处理(NLP)和计算机视觉算法的大型计算模型,在过去几十年中一直在迅速提高。原因之一是用于训练这些算法的数据集呈指数级增长,收集了通常从互联网收集的数十万张...

英格丽德·法德利 , 科技探索

人工智能(AI)工具的性能,包括用于自然语言处理(NLP)和计算机视觉算法的大型计算模型,在过去几十年中一直在迅速提高。原因之一是用于训练这些算法的数据集呈指数级增长,收集了通常从互联网收集的数十万张图像和文本。

另一方面,机器人控制和规划算法的训练数据仍然不够丰富,部分原因是获取数据并不那么简单。因此,一些计算机科学家一直在尝试创建更大的数据集和平台,用于训练各种机器人应用的计算模型。

在最近的一篇论文中,预先发布在服务器上 arXiv 德克萨斯大学奥斯汀分校和 NVIDIA Research 的研究人员将在机器人技术:科学与系统 2024 年会议上展示其中一款平台,名为 RoboCasa。

RoboCasa 是一个大型仿真框架,可用于训练多面手机器人完成日常环境中的各种任务。

该论文的主要作者 Yuke Zhu 告诉 Tech Xplore:“人工智能领域的最新进展在很大程度上是通过在海量数据源上训练大型模型来推动的。”

“受到这些进步的启发,我们寻求为能够执行各种日常任务的通用机器人开发基础模型。RoboCasa 旨在提供训练此类机器人基础模型所需的高质量仿真数据。”

Zhu、Soroush Nasiriany、Abhiram Maddukuri、Lance Zhu、Adeet Parikh、Aaron Lo、Abhishek Joshi 和 Ajay Mandlekar 最近工作的主要目标是开发一个新的开源仿真平台,以促进机器人算法的训练。

他们的努力最终促成了 RoboCasa 的开发,这是他们几年前推出的模拟框架 RoboSuite 的扩展。 RoboSuite 用作团队用来创建 RoboCasa 模拟环境的模拟基础设施。

“我们利用生成式人工智能工具来创建不同的对象资产、场景和任务,”朱解释道。 “这些人工智能工具显着提高了模拟世界的多样性和真实性。此外,RoboCasa 支持各种机器人硬件平台,并提供超过 10 万条轨迹的大型数据集用于模型训练。”

RoboCasa 平台包括数千个 3D 场景,其中包含 150 多种不同类型的日常物品以及数十种家具和电器。 RoboCasa 具有高度真实的模拟功能,并通过生成式 AI 工具进行了丰富。

Zhu 和他的同事设计了 100 个可以训练机器人算法的任务,并为这些任务编写了高质量的人类演示。他们的平台还包括生成有效轨迹和运动的方法,使机器人能够完成这些任务。

“有两个重要的发现最让我兴奋,”朱说。 “首先,我们展示了一种扩展趋势:随着我们增加(机器生成的)训练数据集的大小,模型的性能稳步增长。其次,通过将模拟数据与真实数据相结合,我们发现增强的数据集增强了机器人在现实世界任务中的表现。”

更多信息: Soroush Nasiriany 等人,RoboCasa:多面手机器人日常任务的大规模模拟, arXiv (2024)。作者:10.48550/archiv.2406.02523

期刊信息: arXiv

© 2024 科学 X 网络

分享:

扫一扫在手机阅读、分享本文

热门文章
  • 法国国家铁路公司 (SNCF) 将在意大利提供高速客运线路

    法国国家铁路公司 (SNCF) 将在意大利提供高速客运线路
    通过安东尼·盖伊 法国国家铁路运营商 SNCF 周三表示,计划从 2026 年起在邻国意大利提供高速客运服务,在其本土与竞争对手 Trenitalia 竞争。 SNCF Voyageurs 城际 TGV(高速列车)服务主管 Alain Krakovitch 表示:“意大利是一个天然的高速列车市场,每年接待 5600 万名乘客。” “但这是一个尚未成熟的市场,仍有许多乘客需要引进。” SNCF 计划最终在都灵、米兰、罗马和那不勒斯之间提供每日 9 趟往返列车...
  • 新的168飞艇官方开奖历史记录查询图形处理技术比现有解决方案显示出显着的速度优势

    新的168飞艇官方开奖历史记录查询图形处理技术比现有解决方案显示出显着的速度优势
    经过168飞艇官方开奖历史记录查询高等教育出版社管理大规模图数据的行业对高效、快速的数据处理工具的需求导致了 GraphCP 的发展,这项技术可以显着提高处理速度。GraphCP不仅满足甚至大大超过了现有图处理系统的性能:这种性能改进使 GraphCP 成为依赖快速高效的图形数据处理的应用程序的领先解决方案。该研究的通讯作者 Yongli Cheng 表示:“GraphCP 在减少冗余数据访问和提高 I/O 带宽利用率方面的进步有助于我们领域的发展。”凭借其增强的速度,Gra...
  • 苹果面临在开发者大会上交付人工智能的压力

    苹果面临在开发者大会上交付人工智能的压力
    作者:格伦·查普曼 预计苹果公司将于下周证明,在科技界的竞争对手在人工智能领域大放异彩之际,它并没有被抛在后面。 分析师称,人工智能,甚至与 ChatGPT 制造商 OpenAI 的合作,都可能成为周一在硅谷举行的苹果年度 WWDC 开发者大会的主题。 这次会议是为苹果生态系统创建应用程序和软件的开发人员举办的年度盛会,首席执行官蒂姆库克将努力说服他们,随着竞争对手微软和谷歌连续快速推出创新,该公司是人工智能的关键参与者。 尽管苹果多年来一直在其 iPho...
  • 3D打印的微型执行器可以移动小型软机器人,将它们锁定成新的形状

    3D打印的微型执行器可以移动小型软机器人,将它们锁定成新的形状
    通过马特·希普曼 , 北卡罗来纳州立大学 北卡罗来纳州立大学的研究人员展示了微型软液压执行器,可用于控制厚度不到一毫米的软机器人的变形和运动。研究人员还证明,这项技术适用于形状记忆材料,允许用户反复将软机器人锁定为所需的形状,并根据需要返回到原始形状。 “软机器人技术在许多应用中都有前景,但设计小规模驱动软机器人运动的执行器具有挑战性,”该工作论文的通讯作者、机械和航空航天副教授杰尹说。北卡罗来纳州立大学的工程学。 “我们的方法利用商用多材料 3D 打印技术和...
  • 四足狗形机器人幸运飞行艇168官方开奖在人迹罕至的环境中“嗅探”有害气体

    四足狗形机器人幸运飞行艇168官方开奖在人迹罕至的环境中“嗅探”有害气体
    经过 美国化学会噩梦材料还是真正人类最好的朋友?幸运飞行艇168官方开奖一组研究人员为一个像狗一样的四足机器人配备了机械臂,可以从潜在危险的情况下采集空气样本,例如废弃的建筑物或火灾。在《2019》上发表研究的团队表示,机器狗会将样本带到一个人面前,由他筛选样本中是否存在潜在危险的化合物。 分析化学 。虽然该系统需要进一步完善,但演示显示了其在危险条件下的潜在价值。对于科学家和技术人员来说,在危险工作场所或火灾等事故后测试空气中的危险化学品是一项重要但非常危险的任务。为了...