MOSS, le ChatGPT chinois devient 100 % Open Source !

Le chatbot MOSS n’est pas encore au niveau de ChatGPT, mais c’est l’objectif que visent les chercheurs chinois pour leur chatbot. La mise à disposition de son code en open source pourrait aider à atteindre cet objectif. Actuellement, ChatGPT est le modèle de référence dans l’espace des chatbots alimentés par l’intelligence artificielle. Bien que loin d’être parfait, son intégration avec le moteur de recherche Bing de Microsoft suscite à la fois de l’enthousiasme et de l’irritation.

Les créateurs du chatbot chinois MOSS le comparent à son homologue américain. Comme ChatGPT, MOSS est capable de répondre à des questions, de générer ou de résumer du code ou du texte. De plus, MOSS serait en mesure de détecter les fausses déclarations et de rejeter les demandes inappropriées.

Victime de son succès

Contrairement à ChatGPT, dont le code est gardé secret, les scientifiques chinois de l’université Fudan à Shanghai prévoient de développer MOSS dans un environnement open source à partir de fin mars 2023.

“Les modèles de langage à grande échelle sont presque monopolisés par des pays étrangers. Ils ne développent que des API et nous sommes laissés sur le carreau“, a déclaré Qiu à China Daily. “Nous espérons partager MOSS, les codes du modèle et l’expérience de développement avec tout le monde, et espérons que la Chine pourra être à la pointe du monde en termes de modèles de langage à grande échelle“.

Dans un effort pour améliorer le modèle de langage grâce aux commentaires humains, les chercheurs ont ouvert l’accès à MOSS le 20 février. Comme pour ChatGPT, l’infrastructure technique n’a pas été en mesure de faire face à la demande et a été mise hors ligne.

MOSS parle mieux l’anglais que le chinois

Les captures d’écran sur le site officiel donnent une idée des performances de MOSS. En raison des données d’entraînement utilisées (nettement moins de paramètres que ChatGPT), MOSS ne connaît pas encore d’autres langues que l’anglais. La prochaine étape sur la liste des chercheurs serait d’améliorer le chatbot en chinois.

Bien que MOSS ait acquis certaines des capacités de ChatGPT, il est clair que de nombreuses limites persistent et que MOSS est encore très loin derrière ChatGPT en raison du manque de données de haute qualité, de ressources de calcul et de capacité de modèle.

Stable Diffusion a montré comment la mise à disposition en open source de modèles d’IA peut stimuler le développement pour la génération d’images, Midjourney et DALL-E 2 ne peuvent pas être entraînés avec des données personnalisées et adaptés à des cas d’utilisation individuels.

De nouveau, le match se fait entre l’Open Source et le code propriétaire. Et comme avec le match entre Windows et Linux, c’est l’Open Source qui va gagner sur le long terme.

---

Mes livres

Le Basilic de Roko	Mon parcours de rédacteur web	Science corrompue et servile	Nous, Tueurs en série