通过英伟达 Isaac 平台为智能移动机器人提供支持
原创 2024-01-10 11:51 南山 来源:AGV生成式人工智能正在重塑价亿美元的产业,而英伟达公司作为智能机器人领域的领跑者,正在抓住这一机遇。 英伟达™(NVIDIA®)机器人与边缘计算副总裁Deepu Talla在今天的CES展前特别演讲中详细介绍了英伟达™(NVIDIA®)及其合作伙伴如何将人工智能与机器人技术相结合。
英伟达™(NVIDIA®)机器人与边缘计算事业部副总裁 Deepu Talla 详细介绍了英伟达™(NVIDIA®)及其合作伙伴如何将生成式人工智能与机器人技术结合在一起。
Talla说:"人工智能驱动的自主机器人正被越来越多地用于提高效率、降低成本和解决劳动力短缺问题。"
参与创造
英伟达从一开始就一直是生成式人工智能革命的核心。十年前,英伟达创始人兼首席执行官黄仁勋亲手将第一台英伟达 DGX AI 超级计算机交付给 OpenAI。现在,得益于 OpenAI 的 ChatGPT,生成式人工智能已成为当代发展最快的技术之一。
而这一切才刚刚开始
Talla 预测,生成式人工智能的影响将超越文本和图像生成,进入家庭和办公室、农场和工厂、医院和实验室。关键在于LLM 类似于大脑的语言中心,将让机器人更自然地理解和响应人类的指令。这些机器将能够不断地向人类学习、相互学习以及向周围的世界学习。
Talla说:"鉴于这些特性,生成式人工智能非常适合机器人技术。"
机器人如何使用生成式人工智能
Agility Robotics、NTT 和其他公司正在将生成式人工智能融入机器人,帮助它们理解文本或语音命令。Dreame Technology 公司的机器人吸尘器正在生成式人工智能模型创建的模拟生活空间中接受训练。而 Electric Sheep 公司正在开发一种用于自动割草的世界模型。
英伟达™(NVIDIA®)的技术,如英伟达™(NVIDIA®)Isaac和Jetson平台,为开发和部署人工智能机器人提供了便利,目前已有120多万开发人员和1万多家客户与合作伙伴依赖这些技术。
其中许多公司都参加了本周的 CES,包括 Analog Devices、Aurora Labs、Canonical、Dreame Innovation Technology、DriveU、e-con Systems、Ecotron、Enchanted Tools、GluxKind、Hesai Technology、Leopard Imaging、Segway-Ninebot、Nodar、Orbbec、Qt Group、Robosense、Spartan Radar、TDK Corporation、Telit、Unitree Robotics、Voyant Photonics 和 ZVISION Technologies Co.
两个大脑胜过一个大脑
在 CES 的演讲中,Talla 展示了在机器人技术中部署人工智能所必需的双计算机模型(如下图),展示了英伟达在人工智能开发和应用方面的综合方法。
第一台计算机被称为 "人工智能工厂",是创建和不断改进人工智能模型的核心。AI 工厂利用英伟达数据中心计算基础设施以及 AI 和 NVIDIA Omniverse 平台来模拟和训练 AI 模型。
第二台计算机代表机器人的运行环境
运行环境因应用而异:它可以位于云端或数据中心;也可以位于内部服务器中,用于半导体制造中的缺陷检测等任务;还可以位于配备多个传感器和摄像头的自主机器中。
生成优质资产和场景
Talla 还强调了 LLM 在打破技术壁垒方面的作用,它将普通用户转变为技术艺术家,能够创建复杂的机器人工作单元或整个仓库模拟。
利用英伟达毕加索(NVIDIA Picasso)等生成式人工智能工具,用户可以根据简单的文本提示生成逼真的三维资产,并将其添加到数字场景中,从而创建动态、全面的机器人训练环境。同样的功能还可以扩展到在 Omniverse 中创建各种物理上精确的场景,从而增强机器人的测试和培训,确保其在现实世界中的适用性。
这与生成式人工智能在重新配置机器人部署方面的变革潜力不谋而合。传统上,机器人是为特定任务而专门制造的,而为不同任务修改机器人则是一个耗时的过程。 但 LLM 和视觉语言模型的进步正在消除这一瓶颈,通过自然语言与机器人进行更直观的互动。 这种适应能力强、能感知周围环境的机器很快就会遍布全球。