NVIDIAとHugging Faceは、Hugging FaceのオープンソースロボットプラットフォームLeRobotに新しい人工知能モデルとロボットフレームワークを導入するために協力を拡大しました。この統合には、ヒューマノイドロボット向けに設計された視覚-言語-行動（VLA）モデルであるNVIDIA Isaac GR00T 1.7と、開発者にロボットの構築、トレーニング、デプロイを容易にするためのより標準化されたワークフローを提供するNVIDIA Isaac Teleopフレームワークが含まれています。
両社はまた、将来的に物理的人工知能の基礎モデルであるNVIDIA Cosmos 3をこのプラットフォームに追加する計画を立てています。この取り組みは、先進的なロボットツールのアクセスを向上させ、オープンな協力を促進し、物理的人工知能アプリケーションの発展を促すことを目的としています。
最近、NVIDIAはHalos for Roboticsを発表しました。これは、ハードウェア、ソフトウェア、センサー、検証ツールを組み合わせた全スタックの安全プラットフォームで、自動ロボットが人間と安全に共存できるように設計されています。NVIDIAとHugging Faceは、LeRobotに新しい人工知能モデルとロボットフレームワークを導入するために協力を拡大し、先進的なロボット開発ツールを研究者や開発者にとってよりアクセスしやすくすることを目指しています。Hugging FaceのLeRobotは、ロボットデータセット、人工知能モデル、ポリシー、開発ワークフローをトレーニング、実行、共有するためのオープンソースロボットライブラリです。
NVIDIAとHugging Faceの協力がロボット技術の発展を促進
NVIDIAは、Hugging Faceとの継続的な協力により、300万人以上のロボット開発者コミュニティを1600万人の人工知能開発者とつなげ、オープンな協力ワークフローを通じて先進的な物理人工知能ツールへのアクセスを拡大していると述べています。両者は、この取り組みがデータ収集、モデルのトレーニング、性能テスト、ロボットのデプロイをカバーするオープンで標準化されたワークフローを提供することで、ロボット基礎モデルの開発を簡素化することを目的としていると述べています。彼らは、オープンソース人工知能が開発者にモデル、データセット、ツールを共有させることで革新を加速させる一方で、ロボット開発はデータ収集、シミュレーション、計算リソース、検証の高コストにより分散していると指摘しています。
NVIDIAは、これらの技術をLeRobotに統合することで、これらの障壁を低くし、ロボットコミュニティのより広範な協力を促進したいと考えています。新たに追加されたNVIDIA Isaac Teleopは、外部入力デバイスを使用した人間のデモンストレーションを通じて高品質なロボットトレーニングデータを収集できるオープンソースフレームワークです。このフレームワークはデータ収集を標準化し、LeRobotエコシステム内でデータセットを拡張および共有することを可能にします。
この統合には、NVIDIA Isaac GR00T 1.7も含まれており、同社はこのモデルを最初のオープンで商業的に実行可能なロボット基礎モデルとして説明しています。このモデルは、後期のトレーニングとデプロイを簡素化し、開発者がさまざまなロボット設計やアプリケーションに適応できるようにすることを目的としています。NVIDIAはまた、Cosmos 3をLeRobotに統合する計画を立てており、このモデルは合成ロボットデータを生成し、シミュレーション環境を提供し、現実世界のデータ収集が困難または高価な場合にロボットポリシーの開発をサポートします。
この協力は、LeRobotを通じて提供されるNVIDIAのさまざまなリソースに基づいており、350,000以上の実際およびシミュレーションされたロボット軌跡と57,000,000のグラブサンプルを含むオープンソース物理人工知能データセットが含まれています。
NVIDIAによれば、このプラットフォームはIsaac SimおよびIsaac Labシミュレーションツールをサポートしており、Isaac Lab-Arena環境はロボットポリシーのトレーニングに使用され、NVIDIA Jetson Thorとの統合によりReachy 2ヒューマノイドロボット上で視覚-言語-行動モデルをデプロイできるようになります。