Смартфон, который сам во всём разберётся: в Китае показали прототип с ИИ-ассистентом нового типа
В сети появились видео с необычным прототипом смартфона Nubia M153, который способен самостоятельно выполнять сложные задачи, взаимодействуя с интерфейсом приложений. Устройство, разработанное ZTE при участии специалистов из ByteDance, интегрирует ИИ-агента Doubao прямо в операционную систему Android. В отличие от обычных голосовых помощников, этот агент не просто отправляет запросы, а видит экран, нажимает кнопки, заполняет формы и скачивает необходимые программы. Фактически, он управляет смартфоном так же, как это делал бы человек.
На демонстрационных роликах показано, как устройство решает повседневные задачи по голосовой команде. Например, пользователь может попросить забронировать столик в ресторане. ИИ-агент самостоятельно находит и устанавливает нужное приложение, указывает детали бронирования и выводит на экран итоговый экран для подтверждения. В другом случае система помогла заказать роботакси. Она определила подходящего оператора для конкретного маршрута, запустила приложение Baidu Apollo, указала адреса, а затем, по просьбе пользователя, изменила точку назначения уже во время поездки. Когда потребовалось подтвердить номер телефона для входа в машину, агент сам нашёл эти данные в настройках аккаунта.
За основу взята мультимодальная модель Doubao, которая обрабатывает и текст, и изображения. Сложные семантические задачи, вроде понимания контекста запроса, выполняются в облаке, а вот анализ интерфейса на экране и непосредственное управление элементами делегировано локальной нейросети Nebula-GUI, которая работает на самом устройстве. Это ускоряет отклик и может повысить безопасность личных данных. Аппаратную часть представляет флагманский чип Snapdragon 8 Elite и 16 ГБ оперативной памяти, что позволяет обрабатывать
