Meta стремительно расширяет возможности своего персонального AI-агента Muse, запущенного всего несколько недель назад. На ежегодной конференции Connect компания представила целый набор новых функций: Muse сможет работать с компьютером, электронной почтой и интернет-магазинами, управлять задачами через умные очки и даже обзавестись собственным физическим устройством.

Глава Meta Марк Цукерберг назвал Muse центральной частью стратегии компании в области потребительского ИИ. В будущем, по его словам, агент должен превратиться в персональный «сверхинтеллект», которым будут пользоваться миллиарды людей для достижения своих целей.

Muse работает на основе мультимодальной модели Muse Spark и уже задуман не как обычный чат-бот, а как агент, способный выполнять действия в подключенных приложениях и сервисах. Теперь Meta постепенно превращает его в постоянно доступного цифрового помощника.

У Muse появится лицо и голос

Одной из новых функций станет цифровой аватар Muse. Пользователь сможет создать отдельного персонажа для своего агента и разговаривать с ним по видеосвязи в реальном времени.

Для этого Meta разработала модель Muse Realtime Avatar. Она должна превратить пока преимущественно безликого AI-помощника в персонажа с внешностью, голосом и телом.

На презентации Meta показала, как пользователь общается с таким аватаром и одновременно ставит ему задачи. Таким образом, компания добавляет к агенту еще один уровень взаимодействия — вместо текстового интерфейса пользователь сможет разговаривать с персонажем практически как с собеседником.

Muse поселится в умных очках

Еще один важный шаг — интеграция Muse с умными очками Meta. Пользователю не придется доставать телефон или открывать приложение: достаточно будет обратиться к агенту голосом.

Muse сможет, например, провести человека через персональную тренировку, записать съеденную пищу, помочь записаться на прием или приобрести товар, который пользователь увидел вокруг себя.

При этом агент сможет работать в фоновом режиме. Пользователь дает ему задачу, продолжает заниматься своими делами, а Muse возвращается с результатом, когда закончит работу.

Meta планирует запустить эту возможность в ближайшие месяцы, но точной даты пока нет.

ИИ сможет самостоятельно работать на Mac

Muse также получит доступ к компьютеру Mac. Пользователь сможет делегировать агенту задачи, а тот сможет работать практически с любыми приложениями на компьютере.

В Meta приводят вполне практический пример: Muse можно поручить часть работы небольшого бизнеса или обычные рабочие задачи, после чего отойти от компьютера. Агент продолжит выполнять порученную работу самостоятельно.

Таким образом, Muse приближается к модели AI-агента, который не просто отвечает на вопросы, а непосредственно управляет программами и выполняет последовательность действий вместо пользователя.

У Muse появится собственный электронный адрес

Meta также готовит для Muse отдельный email-адрес.

Это позволит добавлять агента в переписку или пересылать ему письма, чтобы он мог обработать их от имени пользователя. Функция пока находится в разработке и должна появиться в ближайшее время.

Собственный почтовый адрес особенно важен для концепции постоянно работающего агента: Muse сможет получать задания независимо от того, находится ли пользователь перед экраном.

Покупки без привычного интернет-магазина

Meta активно развивает и торговую часть Muse. Компания заключила партнерства со Stripe и Shopify, а сам агент сможет получать доступ ко всему каталогу Shopify и совершать покупки через Lync и Shop Pay. Meta также расширяет поддержку PayPal.

Кроме того, Muse сможет подключаться к приложениям крупных торговых сетей и сервисов, включая Best Buy, Gap, Sephora, Walmart, Wayfair и Expedia. В будущем к ним должен присоединиться Instacart.

Список интеграций не ограничивается покупками: среди новых подключений есть GitHub, Granola и Notion.

Meta также открыла платформу для сторонних разработчиков, которые могут создавать собственные коннекторы для Muse. По словам руководителя направления ИИ Meta Александра Вана, менее чем за неделю компания получила более 1500 заявок.

У Muse появится собственный гаджет

Самым неожиданным анонсом стал Muse Charm — небольшой носимый гаджет, который Meta представила в формате «еще одна вещь».

Устройство размером примерно с небольшой брелок должно стать физическим интерфейсом для Muse. Внутри находится весь необходимый стек для голосового общения и работы цифрового аватара, а на небольшом экране отображается сам персонаж.

Пользователь сможет носить устройство в кармане или прикрепить к ключам. Для начала разговора достаточно будет прикоснуться к сенсору на корпусе — не придется разблокировать смартфон или запускать приложение.

Цукерберг сравнил Muse Charm с самым быстрым способом связаться с Muse, когда пользователь не носит умные очки. Устройство сможет также воспринимать происходящее вокруг пользователя и использовать эту информацию при взаимодействии с агентом.

По внешнему виду и концепции гаджет напоминает современный вариант Tamagotchi: маленькое постоянно доступное устройство с живым цифровым персонажем, с которым можно разговаривать.

Muse Charm пока не готов к продаже. Meta планирует завершить разработку компонентов и выпустить устройство к декабрьским праздникам.

Meta строит не отдельный чат-бот, а целую экосистему

За несколько недель после запуска Muse Meta уже успела превратить его из нового AI-сервиса в основу целой экосистемы интерфейсов и подключений.

У пользователя появляется выбор: общаться с Muse через обычные устройства, разговаривать с цифровым аватаром, поручать ему работу на Mac, отправлять электронные письма, делать покупки, обращаться к нему через умные очки или носить отдельный гаджет на ключах.

При этом Цукерберг рассматривает Muse не только как пользовательский сервис, но и как потенциальный источник дохода. Meta планирует сделать большой объем использования бесплатным, рассчитывая в дальнейшем получать небольшую комиссию с транзакций, которые агент будет совершать для пользователей.

Именно здесь становится понятен масштаб ставки Meta: компания пытается сделать Muse не еще одним окном для общения с ИИ, а посредником между человеком и цифровыми сервисами. Если эта модель приживется, пользователю все реже придется самостоятельно открывать приложения, искать товары, писать письма или выполнять рутинные действия — значительную часть этой работы сможет брать на себя один постоянно доступный агент.