Meta sort l’artillerie lourde sur l’IA : Chat, Stickers et Image

Meta a présenté plusieurs nouvelles applications basées sur l’intelligence artificielle générative lors de sa conférence annuelle Connect. Ces applications comprennent un assistant de chat, des stickers personnalisés, des chats de célébrités et des outils d’édition d’image. Toutes ces applications utilisent le modèle de langage Llama 2 et le modèle d’image Emu de Meta, qui promettent une meilleure qualité et une plus grande créativité que les modèles concurrents.

L’assistant de chat Meta AI est conçu pour améliorer les produits Meta tels que WhatsApp, Messenger, Instagram et les appareils XR de Meta. Il est basé sur le modèle Llama 2, qui est un concurrent du ChatGPT d’OpenAI. Meta AI peut générer des images via une commande “@MetaAI /imagine Texte” directement dans l’interface de l’assistant. Il peut également accéder à des informations en temps réel grâce à la navigation par chat avec Bing, en partenariat avec Microsoft.

Les utilisateurs de WhatsApp, Messenger et Instagram peuvent également accéder à des chatbots spéciaux qui sont basés sur Meta AI mais représentent des personnalités spécifiques. Il s’agit notamment de chatbots de célébrités comme Tom Brady, Paris Hilton et Naomi Osaka qui parlent dans leur propre style de sujets qui leur sont typiques, comme le sport, l’humour ou la détente.

Pour WhatsApp, Messenger, Instagram et Facebook Stories, Meta combine Llama 2 avec le modèle d’image Emu pour des stickers générés par l’IA. Par exemple, taper “pizza jouant au basket” générera une pizza dessinée avec un ballon de basket dans sa main directement dans la fenêtre de chat. Les stickers IA seront déployés auprès de certains utilisateurs anglophones le mois prochain.

Meta apporte également de nouvelles capacités d’IA à l’édition d’image sur ses plateformes. Par exemple, vous pouvez entrer du texte pour changer le style d’une image (“Restyle”), transformant une photo en peinture par exemple, ou utiliser du texte pour changer les arrière-plans et placer de nouveaux objets dans l’environnement (“Backdrop”). Selon Meta, les images qui ont été modifiées par l’IA seront marquées en conséquence.

Derrière les nouvelles offres d’image et de sticker de Meta se trouve le nouveau modèle d’image Emu et le modèle de segmentation d’image Segment Anything introduits précédemment par Meta AI.

Meta affirme avoir réussi à expérimenter le raffinement d’image avec son modèle Emu. Un modèle de diffusion pré-entraîné avec 1,1 milliard de paires image-texte a été affiné avec quelques milliers d’images “soigneusement sélectionnées et de haute qualité”.

Selon Meta AI, le raffinement d’image de haute qualité a amélioré significativement la qualité de la génération d’image : par rapport au modèle standard sans raffinement d’image, les testeurs humains ont préféré les images du modèle raffiné 82 % du temps. Lorsqu’il est comparé au modèle d’image SDXL v.1.0 open-source, Emu a été préféré jusqu’à 71,3 % du temps. Comme approche générique, le raffinement d’image fonctionne également pour d’autres architectures, selon Meta AI.