Разработчики из Ubisoft поделились деталями проекта нейросетевых напарников для видеоигр
На конференции разработчики из студии Ubisoft Paris поделились новыми подробностями своего экспериментального проекта под названием AI Teammates. Инициатива стартовала около 4 лет назад, а ее дебютный показ состоялся на мероприятии GDC. Цель команды заключается во внедрении генеративного искусственного интеллекта в видеоигры для создания по-настоящему интерактивных неигровых персонажей, способных свободно общаться с игроком и реагировать на изменения в окружающем мире.
В представленных материалах игрок взаимодействует с отрядом, состоящим из персонажей по имени Пабло и София, а также с ИИ-помощником Джаспаром. Геймеры могут отдавать команды голосом. Система обрабатывает речь, анализирует игровой контекст и генерирует уникальные ответы и действия. Персонажи не просто произносят сгенерированный текст, но и обладают восприятием окружения, социальной моделью поведения, эмоциями и памятью. Они могут самостоятельно принимать решения в зависимости от игровой ситуации, например, занимать укрытия или открывать огонь.
Техническая реализация проекта опирается на связку из системы распознавания речи, большой языковой модели и генератора голоса. Главной проблемой при разработке стала задержка между словами игрока и реакцией персонажа. Изначально этот показатель составлял 3.25 секунды, что ломало погружение. За счет смены базовых моделей и оптимизации обработки данных инженерам удалось снизить задержку до 1.5 секунды. В процессе тестирования авторы использовали решения от Nvidia, модель Gemini 2.5 Flash Lite и технологии синтеза речи от ElevenLabs.
Особое внимание Ubisoft уделяет возможности локального запуска нейросетей непосредственно на компьютерах игроков. Это необходимо для снижения затрат на поддержку серверов и обеспечения
