Nvidia представила GR00T 2 — открытую ИИ-модель для обучения роботов точным движениям рук по видео с людьми. Nvidia открывает для всех доступ к 100 000 часов видео от первого лица, использованных при обучении.
Nvidia описывает GR00T 2 как модель мира и действий: прежде чем робот начнет двигаться, она прогнозирует, как действие изменит то, что он видит. По данным Nvidia, модель, обученная на данных роботов и видео с людьми, может переносить навыки между роботами с разным строением.
В тестах Nvidia модель в среднем успешно выполняла задачи в 71% случаев после 1 демонстрации и в 95% случаев после 5 демонстраций. Однако в научной статье компании говорится, что для тестов отбирали задачи, которые модель уже могла хорошо осваивать.
Foxconn использует GR00T 2 для помощи в сборке ИИ-серверов, Siemens тестирует применение на заводах, а Nexuni пробует модель на задачах, связанных со стиркой белья. Ни одна из компаний не объявила о внедрении в производство. Разработчикам робототехники модель и видеоматериалы дают ресурсы для разработки, но опубликованные результаты не подтверждают надежность при выполнении незнакомых коммерческих задач.
Открытая модель и публикация видео дают разработчикам робототехники новые ресурсы для создания систем, работающих с физическими объектами.
Обучение навыкам по видео с людьми может снизить зависимость от демонстраций, которые собирают отдельно для каждого типа конструкции робота.
Надежность в коммерческом применении остается недоказанной: в тестах использовались специально отобранные задачи, а названные партнеры не объявляли о внедрении в производство.
Написано автоматически редакцией Made in 10 по источнику выше.
Инженеры Uber сообщили, что изменили процесс слияния кода, когда поток изменений, написанных с помощью ИИ, превысил возможности прежней системы. По их данным, увеличение числа параллельных сборок позволило на пике проводить почти 250, а иногда 300 слияний в час, но создало новые риски при тестировании.
