Muse Image стала самой продвинутой моделью генерации изображений Meta*. По заявлению компании, она лучше следует текстовым инструкциям, умеет точно редактировать готовые изображения, объединять элементы из нескольких референсов и использовать информацию из Instagram* для более релевантного визуального контекста. Модель также интегрирована с языковой моделью Muse Spark, которая помогает планировать создание медиаконтента.
Muse Image использует агентный подход к генерации. Вместо простого преобразования текстового запроса в изображение модель может самостоятельно использовать поиск в интернете и запускать программный код для повышения точности результата. Например, она способна создавать графики, QR-коды, а также искать актуальную информацию при запросах, связанных с реальными событиями или фактами.
Во время генерации Muse Image анализирует собственный результат, исправляет обнаруженные ошибки, при необходимости перерисовывает изображение или использует дополнительные инструменты для улучшения качества. По данным Meta, такое поведение возникло в процессе обучения с подкреплением без отдельного программирования.
Кроме того, модель поддерживает сложное редактирование изображений. Она может изменять только указанные пользователем элементы, сохранять последовательность изменений в нескольких итерациях и комбинировать объекты, людей, стили и окружение сразу из нескольких исходных изображений. По состоянию на начало июля Muse Image занимает второе место в рейтинге Arena Elo. Она отстает от новейшей модели GPT Image 2 от OpenAI, но превосходит модель Nano Banana 2 в задачах редактирования изображений.
Одновременно Meta показала предварительную версию Muse Video — модели генерации видео с поддержкой синхронизированного звука. Система обеспечивает реалистичную физику и временную согласованность кадров.
Разработчики продолжают улучшать синхронизацию аудио и видео, а также воспроизведение сложных движений. В рейтинге Arena Elo среди моделей преобразования текста в видео Muse Video занимает третье место.
Muse Image уже начала появляться в приложении Meta AI*, на сайте Meta AI*, в историях Instagram* в США и WhatsApp* в ряде стран, а в дальнейшем станет доступна и в Facebook*. Muse Video пока находится на этапе предварительного запуска и сначала станет доступна создателям контента.
Вместе с запуском Muse Image Meta столкнулась с критикой из-за новой ИИ-функции в Instagram*. Если профиль открыт, другие пользователи могут создавать ИИ-изображения на основе опубликованных фотографий, просто отметив владельца аккаунта. Функция включена по умолчанию, а в политике Meta* указано, что уведомлять владельца фото о таком использовании не требуется. Отключить возможность можно только вручную через настройки конфиденциальности. Пользователи уже назвали эту функцию «миной замедленного действия» для приватности.
*Деятельность компании Meta Platforms Inc. запрещена на территории РФ.
