Mistral Large 4, le modèle à 1 000 milliards de paramètres surnommé Le Chonk

Mistral a présenté Mistral Large 4, un modèle d’intelligence artificielle à 1 000 milliards de paramètres que l’équipe surnomme elle-même “Le Chonk”, et l’entreprise française annonce ni plus ni moins que c’est le meilleur modèle ouvert jamais développé en dehors de la Chine. Rien que ça.

Le modèle n’est pour le moment accessible qu’en préversion via l’API de Mistral, l’interface qui permet aux développeurs de la brancher sur leurs applications. Les poids, autrement dit le fichier complet qui permet de faire tourner le modèle sur ses propres serveurs, arriveront le 27 octobre sur Hugging Face, le grand entrepôt public des modèles d’IA.

C’est tout le contraire des boîtes noires d’OpenAI ou d’Anthropic, le créateur de Claude, qui gardent jalousement les leurs.

Sur le papier, le chiffre de 1 000 milliards en jette, sauf que le Chonk n’active que 49 milliards de paramètres à chaque réponse, avec une architecture qui fonctionne un peu comme une grosse administration où seul le guichet compétent traite votre dossier. Du coup, il coûte bien moins cher à faire tourner que sa taille ne le laisse penser.

L’entraînement a pris deux mois sur près de 4 000 puces Nvidia Grace Blackwell installées dans les datacenters européens de Mistral, soit deux à trois fois moins de matériel que la concurrence chinoise d’après Pierre Stock, le responsable scientifique de la maison. Le modèle parle au passage plus de 160 langues.

Mistral insiste surtout sur les capacités agentiques de son Chonk, c’est-à-dire sa faculté à enchaîner tout seul des actions, lancer du code, éplucher des documents, remplir un tableur, plutôt que de simplement répondre à vos questions.

Sur les tests de performance publiés par Mistral, le Chonk se place au niveau des meilleurs modèles chinois de DeepSeek, Alibaba ou Moonshot sur le code, la finance et le droit, avec une vraie pointe en cybersécurité où il se classe parmi les cinq meilleurs au monde. Les mesures indépendantes sont un peu moins flatteuses, puisque le cabinet Artificial Analysis le situe entre DeepSeek et les modèles les plus accessibles d’OpenAI, encore loin du haut de gamme GPT-6 Astra, ce qui est déjà pas mal pour un modèle qu’on pourra télécharger gratuitement.

Côté tarifs, l’API facture environ 0,70 dollar le million de tokens, les morceaux de mots qui servent d’unité de facturation à tous les fournisseurs d’IA. Airbus et HSBC figurent déjà parmi la centaine de clients revendiqués.

J’avoue que je me demande déjà quelle machine il faudra pour faire tourner un bestiau pareil dans un salon, mais c’est tentant.

Source :

TechCrunch