Добро пожаловать в Shenzhen Mingjiada Electronics Co., Ltd.

Рабочий процесс Isaac GR00T для синтетических данных и базовая модель мира NVIDIA Cosmos способствуют разработке гуманоидных роботов общего назначения.

6 января основатель и генеральный директор NVIDIA Дженсен Хуанг (Jen-Hsun Huang) объявил на CES, что NVIDIA официально запустила NVIDIA Isaac GR00T Blueprint для генерации синтетических движений, который помогает разработчикам генерировать огромное количество синтетических данных о движениях для обучения гуманоидных роботов с помощью имитационного обучения.

Согласно официальным прогнозам, рынок гуманоидных роботов достигнет 38 миллиардов долларов в ближайшие два десятилетия. Чтобы удовлетворить этот огромный спрос, особенно в промышленном и производственном секторах, NVIDIA выпустила серию базовых моделей робототехники, конвейеров данных и фреймворков для моделирования, чтобы ускорить процесс разработки гуманоидных роботов нового поколения.

Имитационное обучение - это подмножество робототехники, которое позволяет гуманоидным роботам приобретать новые навыки, наблюдая и подражая демонстрациям человеческих экспертов. Сбор таких обширных высококачественных наборов данных в реальном мире - дело утомительное, трудоемкое и зачастую непомерно дорогое. С помощью Isaac GR00T Blueprint for Synthetic Motion Generation разработчики могут легко генерировать массивные синтетические наборы данных, используя всего несколько демонстраций человека.

Начиная с рабочего процесса GR00T-Teleop, пользователи могут фиксировать движения человека в среде цифрового двойника с помощью Apple Vision Pro. Эти человеческие действия записываются в качестве золотого стандарта и усваиваются роботом, имитирующим их в среде моделирования.

Рабочий процесс GR00T-Mimic затем расширяет захваченные человеческие демонстрации в большой синтетический набор данных движений. Наконец, рабочий процесс GR00T-Gen, построенный на платформах NVIDIA Omniverse и NVIDIA Cosmos, экспоненциально расширяет этот набор данных с помощью рандомизации доменов и методов 3D-лифтинга.

Затем эти данные могут быть использованы в качестве исходных данных для стратегий роботов в NVIDIA Isaac Lab - модульной платформе с открытым исходным кодом для обучения роботов, чтобы научить их эффективно и безопасно перемещаться и взаимодействовать в окружающей среде.

NVIDIA также представила на CES платформу Cosmos, которая включает ряд открытых, предварительно обученных базовых моделей мира, предназначенных для генерации состояний мира, необходимых для разработки физически осознанного видео и физического ИИ. Она включает в себя модели авторегрессии и диффузии, которые имеют различные размеры и работают с различными форматами входных данных. Модели обучаются на 1800 триллионах единиц данных, включая 2 миллиона часов видео, снятого автопилотами, роботами, дронами, и синтетические данные.

Кроме того, что Cosmos помогает генерировать большие массивы данных, он преодолевает разрыв между моделированием и реальностью, расширяя изображения из 3D в реальные сцены. Интеграция Omniverse, интерфейса программирования приложений и платформы разработки микросервисов для создания 3D-приложений и сервисов, с Cosmos имеет решающее значение, обеспечивая ключевые гарантии благодаря высококонтролируемым, физически точным симуляциям, которые помогают свести к минимуму проблемы галлюцинаций, характерные для моделей мира.

NVIDIA Isaac GR00T, Omniverse и Cosmos помогают совершить огромный скачок в области физического ИИ и инноваций в гуманоидной робототехнике. Крупнейшие робототехнические компании, включая Boston Dynamics и Figure, уже начали использовать Isaac GR00T и демонстрируют результаты.

Производители программного и аппаратного обеспечения для гуманоидных роботов, а также производители робототехники также могут подать заявку на ранний доступ к программе NVIDIA для разработчиков гуманоидных роботов.