Nvidia выпустила ИИ-модель NitroGen — она может играть более чем в 1000 видеоигр

3dnews.ru:

Исследователи из Nvidia, Стэнфорда, Калифорнийского технологического института и ряда других учреждений представили ИИ-модель NitroGen, которая способна взаимодействовать с виртуальными мирами различных видеоигр. Глава Nvidia по ИИ Джим Фан (Jim Fan) охарактеризовал нейросеть, как «базовую модель с открытым исходным кодом, обученную играть в более чем 1000 игр». Это исследование также имеет большое значение для других сфер, таких как построение симуляций и робототехника.

Источник изображений: tomshardware.com

Можно сказать, что данное исследование является попыткой создать что-то похожее на «GPT для действий». В целом же работа стала прорывом в области больших языковых моделей, в которых для обучения применяется проверенная технология масштабного обучения за пределами сфер языка и компьютерного зрения. В описании научной статьи к этому исследованию также сказано, что «создание универсальных агентов, способных работать в неизвестных средах, долгое время считалось Святым Граалем исследований в сфере ИИ».

Любопытно, что в основе NitroGen лежит архитектура GROOT N1.5, изначально созданная для робототехники. Её использование в мире видеоигр демонстрирует потенциал для извлечения пользы в робототехнике, дав преимущества роботам, работающим в непредсказуемых условиях. Исследователям удалось адаптировать NitroGen для игр с кардинально различающейся механикой и физикой. Для обучения ИИ-модели задействовали более 40 тыс. часов доступных в открытом доступе записей игрового процесса, которыми делились разные стримеры. Особенно полезными оказались ролики, авторы которых поверх трансляции накладывали изображение контроллера и в режиме онлайн демонстрировали нажимаемые в процессе игры кнопки.

После завершения обучения NitroGen