Mistral Large 4 : le mastodonte français de 1 000 milliards de paramètres

Mistral AI vient de lâcher Mistral Large 4, un modèle d'IA multimodal baptisé affectueusement "Le Chonk" parce qu'il pèse un bon trillion de paramètres. L'idée, c'est de proposer une troisième voie face aux modèles fermés américains et aux modèles ouverts souvent made in China, un peu dans la lignée du discours de Macron sur l'indépendance européenne en IA.

Pour l'instant, Mistral Large 4 n'est accessible que via une API avec des garde-fous, mais les poids du modèle seront rendus publics dans trois semaines, une fois les tests de sécurité bouclés. Pierre Stock, VP Science chez Mistral, explique que la boîte veut d'abord s'assurer avec des partenaires et des gouvernements que ces poids ouverts servent à se défendre et pas à attaquer. Logique, vu que les clients principaux de Mistral sont des entreprises et des institutions plutôt chatouilleuses sur la sécurité.

Détail qui compte : tout l'entraînement s'est fait sur seulement 4 000 GPU NVIDIA, soit deux à trois fois moins que les concurrents chinois et encore moins que les boîtes fermées type OpenAI. Mistral vise surtout l'excellence dans des usages bien précis comme la cybersécurité, la finance et la conception de puces électroniques, un domaine qui parle forcément à ASML et Samsung, deux investisseurs majeurs de la startup française.

Avec ce nouveau modèle, Mistral veut clairement montrer qu'elle reste un labo de pointe et pas juste un hébergeur de modèles chinois, comme certains l'avaient soupçonné après sa dernière levée de fonds.