Présentation de Muse Image

Meta a lancé Muse Image, un modèle de génération d'images capable d'écrire du code et de rechercher sur le web. Ce modèle est le deuxième algorithmique publié par Meta Superintelligence Labs, le groupe de recherche en intelligence artificielle de l'entreprise.

Muse Image peut générer des images basées sur des prompts détaillés et éditer des photos existantes. Il peut également supprimer des éléments tels que le brouillard, changer l'angle de la caméra et effectuer d'autres modifications.

Fonctionnement de Muse Image

Muse Image partage des similitudes avec les modèles de langage optimisés pour la raisonnement. Il dispose d'une fonctionnalité d'utilisation d'outils qui lui permet de rechercher des informations sur le web si un prompt ne contient pas tous les détails nécessaires pour générer une image.

Le modèle peut également générer du code, par exemple, un script Python pour convertir le contenu d'une feuille de calcul en graphique. Les scripts aident à améliorer la précision des visualisations complexes.

# Exemple de code généré par Muse Image
import matplotlib.pyplot as plt

# Données de la feuille de calcul
donnees = [1, 2, 3, 4, 5]

# Génération du graphique
plt.plot(donnees)
plt.show()

Architecture et performances

Muse Image utilise une approche différente de la méthode best-of-N (BoN) pour affiner sa sortie. Le modèle engage dans une « raisonnement délibéré » avant de commencer à générer une image, ce qui lui permet de mieux utiliser les ressources sous-jacentes.

Le modèle prend en charge une fonctionnalité de calcul à l'exécution, ce qui signifie que l'augmentation du matériel à sa disposition améliore la qualité de la sortie. Il examine les images qu'il génère avant de les afficher aux utilisateurs et apporte des ajustements si nécessaire.

Disponibilité et applications futures

Muse Image est disponible via le chatbot Meta AI dans un nombre limité de marchés et alimente un ensemble de nouveaux effets d'image dans les histoires Instagram. Meta prévoit de rendre le modèle disponible sur Facebook, Messenger et d'autres parties d'Instagram à l'avenir.

La société prévoit également de lancer un générateur de clips appelé Muse Video, qui est actuellement en troisième position sur le classement Arena AI des générateurs de vidéos.