Компания NVIDIA создала новый исследовательский отдел GEAR (Generalist Embodied Agent Research), который будет заниматься вопросами создания универсальных воплощенных ИИ-агентов в физическом (робототехника) и виртуальном (игры и любые симуляции) мирах.
Основателями GEAR являются Джим Фан (Jim Fan) и Юке Зу (Yuke Zhu). Оба ранее сотрудничали в рамках других проектов.
«Мы верим в будущее, где каждая машина сможет двигаться автономно, а использование роботов и смоделированных агентов станет таким же повсеместным, как использование iPhone», — концептуально описал цели нового исследовательского отдела его руководитель Джим Фан.
Он добавил, что одной из задач исследовательского отдела будет «создание ИИ-агента, который сможет учиться умело действовать как виртуальном, так и реальном мирах». По сути, речь идёт о разработке так называемого сильного ИИ (Artificial General Intelligence — AGI) или общего ИИ общего назначения, то есть системе, способной решать задачи наравне с человеком. По словам Фана, 2024 года станет годом развития робототехники, развития игрового ИИ и годом моделирования.
На домашней странице GEAR сайта NVIDIA выделены четыре основных пункта, описывающих программу исследований. Свою работу команда начнёт с разработки мультимодальных моделей базового ИИ, роботов общего назначения, базовых виртуальных ИИ-агентов, а также будет заниматься моделированием данных.
На сайте исследовательской группы также представлены четыре предыдущих проекта, в которых Джим Фан и Юке Зу принимали участие. Два из них касаются разработки проекта специализированных и проактивных ИИ-агентов, которые были встроены в популярную игру Minecraft. Другой проект касается оптимизированной техники обучения с подкреплением для роботов, призванной повысить «ловкость до сверхчеловеческого уровня». Кроме того, специалисты вели разработку системы для мультимодальных запросов для установки задач для роботов, а также системы оценки для таких действий.
