Apple dépense des millions par jour pour l’IA

Selon un rapport du site The Information, Apple investit des millions de dollars par jour pour entraîner son équipe de modèles de langage de grande taille (LLM), composée de 16 personnes. Cette équipe, dirigée par l’ingénieur en IA John Giannandrea, recruté chez Google en 2018, se concentre sur l’IA conversationnelle, similaire à ChatGPT.

L’un des projets de cette équipe est le LLM “Ajax GPT”, qui serait plus puissant que le GPT-3.5 d’OpenAI, avec plus de 200 milliards de paramètres. Ce modèle, développé pour un usage interne, serait encore loin du GPT-4, qui en compte 1,8 trillion.

L’objectif d’Apple est d’améliorer les commandes vocales pour l’iPhone, en utilisant les LLM pour créer des commandes plus complexes que les commandes prédéfinies. Par exemple, Apple prévoit une fonctionnalité vocale qui permettra d’envoyer des GIFs par commande vocale via l’application Shortcut, qui sert à programmer des séquences d’applications. Cette fonctionnalité devrait arriver avec une nouvelle version d’iOS l’année prochaine.

Apple explore tous les domaines de l’IA générative

En plus de l’équipe LLM, Apple dispose d’autres équipes qui travaillent sur la vision par ordinateur, une technologie clé pour Apple’s Vision Pro, et l’IA générative pour les images, la vidéo et les scènes 3D. Par le passé, les chercheurs d’Apple ont démontré GAUDI, une IA générative pour transformer du texte en scènes intérieures 3D.

Selon The Information, Apple a “au moins deux autres équipes relativement nouvelles” qui développent des modèles de langage et d’image. La société travaillerait également sur des modèles multimodaux pour le texte, les images et la vidéo. Cependant, il s’agit d’un projet de recherche à long terme.