На ежегодной конференции Connect в Менло-Парке генеральный директор Meta Марк Цукерберг представил новые возможности персонального ИИ-агента Muse. Сервис, запущенный в начале сентября, компания рассматривает как один из главных проектов в сфере потребительского искусственного интеллекта. О планах Meta сообщило издание TechCrunch.
Muse подключается к приложениям и цифровым аккаунтам пользователя, включая электронную почту и календари, и способен выполнять повседневные задачи. Система работает на мультимодальной модели Muse Spark, созданной для автономного выполнения поручений. По словам Цукерберга, со временем агент должен превратиться в персональный сверхинтеллект, которым будут пользоваться миллиарды людей.
«Центральным элементом нашего видения того, что мы создаём, является Muse», — заявил глава Meta. Он также сообщил, что сервис будет бесплатным для большого числа токенов, а в дальнейшем компания рассчитывает получать небольшую комиссию с транзакций. Физический аватар агента получил имя Jolly.
Пользователи смогут создать для Muse отдельного цифрового персонажа и общаться с ним по видеосвязи в реальном времени. Для этого Meta разработала модель Muse Realtime Avatar, которая наделяет программного помощника лицом, телом и голосом. Через такого аватара можно будет задавать вопросы и поручать ему различные действия.
Muse также интегрируют с умными очками Meta (признана в РФ экстремистской и запрещена). Пользователь сможет обращаться к агенту голосом, активируя его специальным словом, а тот поможет провести персональную тренировку, записать приём пищи, забронировать встречу или купить замеченный товар. Сервис будет выполнять задачи в фоновом режиме и связываться с пользователем после завершения работы; запуск этой функции ожидается в ближайшие месяцы.
Кроме того, Meta (признана в РФ экстремистской и запрещена) готовит версию Muse для компьютеров Mac. Агент сможет работать с любыми приложениями на рабочем столе и выполнять поручения без постоянного присутствия пользователя. «Вы сможете поручить ему управление небольшим бизнесом или просто выполнение рабочих задач. Можно отойти от компьютера, а он продолжит выполнять все поставленные задания», — сказал главный специалист Meta (признана в РФ экстремистской и запрещена) по искусственному интеллекту Александер Ван.
Для работы в фоновом режиме Muse получит собственный адрес электронной почты, причём Meta (признана в РФ экстремистской и запрещена) обещает представить эту возможность в ближайшее время. Пользователи смогут добавлять агента в переписку или пересылать ему письма для выполнения поручений. Компания также заключила партнёрства со Stripe и Shopify, предоставив Muse доступ к каталогу Shopify и возможность совершать покупки через Lync и Shop Pay, а также расширив поддержку платежей PayPal.
В список новых партнёров вошли Best Buy, Gap, Sephora, Walmart и Wayfair. Muse сможет подключаться к приложениям этих компаний, а также к Expedia и в будущем к Instacart; среди других интеграций названы GitHub, Granola и Notion. Meta (признана в РФ экстремистской и запрещена) открыла платформу для разработчиков, желающих создавать собственные коннекторы, и получила более 1,5 тыс. заявок менее чем за неделю.