📢 转载信息
原文链接:https://blogs.nvidia.com/blog/adam-robot-vegas-golden-knights-thor/
原文作者:Scott Martin
在拉斯维加斯的T-Mobile竞技场,黄金骑士队的球迷们得到的不仅仅是冰球——他们正在领略未来的风采。ADAM,一个利用NVIDIA Isaac 库开发的机器人,正在NHL最激动人心的场馆之一为人们调制饮品,吸引了众人的目光。
ADAM,全称为Automated Dual Arm Mixologist(自动化双臂调酒师),由总部位于拉斯维加斯的Richtech Robotics公司开发。它不仅仅是一个新奇的摆设——它也是针对酒店服务业中真实挑战(如劳动力短缺和对独特客户体验的需求)的解决方案。
Richtech Robotics总裁Matt Casella表示:“酒店服务业面临着巨大的劳动力挑战,而ADAM是我们满足这些需求并提升客户体验的答案。借助NVIDIA的Isaac平台,我们开发了一个可扩展、一致的解决方案,并且坦率地说,它为球迷创造了难忘的时刻。在T-Mobile竞技场的反响非常热烈——人们喜欢与ADAM互动。”
在模拟环境中学习调制饮品
在ADAM第一次调制饮品之前,它在一个虚拟酒吧中进行了训练。Richtech使用了基于NVIDIA Omniverse构建的开源参考机器人模拟框架——NVIDIA Isaac Sim,来创建一个高保真、物理精确的ADAM工作站模拟环境,包括杯子、器皿和各种光照条件。该团队生成了合成数据,用于教会ADAM即使在眩光或反射等棘手条件下也能识别物体。
ADAM的倾倒和摇晃等技能是通过使用NVIDIA的开源机器人学习框架——Isaac Lab在模拟中得到完善的。结果是:一个不仅仅是遵循指令,而是能精确适应其环境的机器人。
使用Jetson在边缘实时运行AI
ADAM运行在NVIDIA Jetson AGX Orin上,这是一个强大的边缘AI平台,具备275 TOPS的算力。利用Isaac ROS 2 库,ADAM可以实时捕获摄像机馈送、检测物体并校准工作空间。ADAM的感知堆栈——使用TAO Toolkit构建并使用TensorRT优化——使其能够以低于40毫秒的延迟识别杯子、测量液位并调整动作。
这意味着ADAM可以发现放错位置的杯子,检测到泡沫到达杯沿,并及时纠正倾倒动作——所有操作都行云流水,毫不迟疑。
用NVIDIA Thor创造工业灵活性
虽然ADAM忙于在黄金骑士队的比赛中提供饮品,但Richtech Robotics也在使用Dex(一款专为工厂和仓库环境打造的新型移动人形机器人)在工业自动化方面取得了重大进展。
Dex最近在GTC DC上首次亮相,它结合了自主轮式平台的移动能力和双臂灵巧性的精确性。它被设计用来处理轻到中型的工业任务,如机器操作、零件分拣、物料搬运和包装——同时具备适应不同工具和工作流程的灵活性。
Dex运行在NVIDIA Jetson Thor上,这是一种下一代机器人处理器,使其能够在动态工业环境中实现实时传感器处理和AI推理能力。
Dex是通过真实世界数据与Isaac Sim生成的合成数据的混合训练而成的。这使得Dex的模型能够在各种场景中进行泛化应用。
了解更多关于Jetson Thor的信息。🚀 想要体验更好更全面的AI调用?
欢迎使用青云聚合API,约为官网价格的十分之一,支持300+全球最新模型,以及全球各种生图生视频模型,无需翻墙高速稳定,文档丰富,小白也可以简单操作。
评论区