Исследования и разработки в области искусственного интеллекта приводят ко все более удивительным результатам. Последний вклад Исследования NVIDIA это агент искусственного интеллекта под названием Эврика, способен обучать роботов сложным навыкам. Этот агент обучил роботизированную руку быстро и точно выполнять игры с вращением ручек, достигнув результатов, подобных человеческим. Но на этом возможности Eureka не заканчиваются: она может научить роботов открывать ящики и двери, бросать и собирать мячи, обращаться с ножницами и это лишь некоторые из них.

Эврика: новый прорыв в обучении роботов

Проект «Эврика» был представлен в научная статья, опубликованная NVIDIA Research. Разработчики могут экспериментировать с алгоритмами искусственного интеллекта Eureka, используя NVIDIA Isaac Gym, приложение для моделирования физики для исследований в области обучения с подкреплением. Это приложение основано на NVIDIA Омниверс, платформа разработки для создания 3D-инструментов и приложений на основе платформы OpenUSD. Сама Eureka основана на языковой модели GPT-4, отличной языковой модели.

Второй Анима Анандкумар, старшего директора по исследованиям искусственного интеллекта в NVIDIA и одного из авторов статьи Eureka, обучение с подкреплением добилось впечатляющих результатов за последнее десятилетие, но остается еще много проблем, требующих решения, таких как дизайн вознаграждений. Eureka представляет собой первый шаг на пути к разработке новых алгоритмов, которые объединяют методы генеративного обучения и обучения с подкреплением для решения сложных задач.

Как Эврика учит роботов

Программы вознаграждения, созданные Eureka, которые позволяют роботам обучаться с подкреплением, превосходят программы, написанные вручную экспертами, более чем в 80 процентах случаев, улучшая среднюю производительность роботов более чем на 50 процентов. Отличительной особенностью Eureka является то, что она не требует конкретных подсказок для задач или заранее определенных моделей вознаграждения, но легко адаптируется к отзывам людей, чтобы изменять вознаграждения для достижения результатов, более соответствующих видению разработчиков.

Использование моделирования, ускоренного ГПУ в спортзале «Исаак», Eureka может быстро оценить качество больших партий кандидатов на вознаграждение, тем самым повышая эффективность обучения. Кроме того, Eureka создает сводку ключевых статистических данных о результатах обучения и маршрутизирует языковую модель для улучшения генерации функций вознаграждения.

Таким образом, искусственный интеллект постоянно совершенствует свои возможности. Эврика была обучена решать широкий спектр задач: от изучения сложных навыков манипулирования роботизированными руками до движений четвероногих, двуногих, квадроторных и коллаборативных роботов-манипуляторов.

Неожиданные результаты и перспективы на будущее

В исследовательском документе Eureka представлены результаты углубленной оценки 20 задач, обученных Eureka, на основе тестов ловкости с открытым исходным кодом, которые требуют, чтобы роботизированные руки демонстрировали широкий спектр сложных навыков манипулирования. Моделирование среды Айзека Гима было визуализировано с помощью NVIDIA Omniverse, что обеспечило визуальное представление достигнутого прогресса.

Линьси «Джим» Фан, один из участников проекта Eureka и старший научный сотрудник NVIDIA, отметил, что Eureka представляет собой уникальное сочетание больших языковых моделей и технологий моделирования с ускорением на графическом процессоре. Считается, что Eureka позволит умело управлять роботами и предоставит художникам новый способ создания физически реалистичной анимации.

Заключение

Результаты, полученные с помощью Eureka, представляют собой важный шаг вперед в области обучения роботов. Эти исследования и разработки дополняют другие важные разработки NVIDIA Research, такие как Voyager, агент искусственного интеллекта на основе GPT-4, способный автономно играть в Minecraft.

NVIDIA Research состоит из сотен ученых и инженеров по всему миру, специализирующихся на таких темах, как искусственный интеллект, компьютерная графика, компьютерное зрение, беспилотные автомобили и робототехника.

Узнайте больше об Eureka и NVIDIA Research и приготовьтесь к будущему, в котором роботы будут осваивать все более сложные навыки благодаря искусственному интеллекту.