Retour
Menu des articles80

News · Logiciel

OVHcloud dévoile Olala mini, son premier modèle d’IA

Dévoilé le 17 novembre, Olala mini 7A1B inaugure la famille de modèles d’OVHcloud. Le groupe mise sur une architecture compacte et un entraînement mobilisant trois supercalculateurs européens.

Par Publié le 3 min de lecturePartager ou intégrer
OVHcloud dévoile Olala mini, son premier modèle d’IA

OVHcloud a dévoilé le 17 novembre Olala mini 7A1B, premier représentant de sa famille de modèles de langage Olala. L’entreprise mise sur un modèle compact, conçu pour réduire les ressources nécessaires à son fonctionnement. Son lancement officiel est prévu le 19 novembre, lors de l’événement annuel parisien d’OVHcloud, rapporte Next (ouvre next.ink dans un nouvel onglet).

Un milliard de paramètres activés à la fois

Olala mini compte 7 milliards de paramètres au total, mais n’en mobilise qu’un milliard pour traiter une requête. Cette architecture dite « mélange d’experts », ou MoE, répartit le travail entre plusieurs groupes spécialisés. Le modèle comprend 256 experts par couche, selon Next (ouvre next.ink dans un nouvel onglet) et Clubic (ouvre clubic.com dans un nouvel onglet).

OVHcloud associe Differential-TPA et Mamba-3. D’après Clubic, ces mécanismes visent à réduire la mémoire nécessaire et à conserver une représentation compacte des informations déjà traitées. La fenêtre de contexte atteint 32 000 tokens : elle correspond au volume de texte que le modèle peut prendre en compte dans une interaction.

OVHcloud affirme qu’Olala mini peut fonctionner avec une carte graphique disposant d’au moins 8 Go de mémoire. Le groupe annonce 160 tokens par seconde sur une RTX A4500 et 50 tokens par seconde sur un processeur, sans GPU dédié. Ces performances sont celles avancées par l’entreprise et rapportées par Next (ouvre next.ink dans un nouvel onglet) et Clubic (ouvre clubic.com dans un nouvel onglet).

Entraînement européen et licence ouverte

Pour entraîner le modèle, OVHcloud a utilisé des ressources de calcul sur trois supercalculateurs publics européens : Jupiter, MeluXina et Jean Zay. Clubic rapporte que cette contribution représente l’équivalent de 7 millions d’euros d’heures de calcul. OVHcloud a également constitué une équipe interne dédiée aux modèles de langage, nommée OVHai LLM.

À son lancement, Olala mini doit être publié sur Hugging Face sous licence Apache 2.0. OVHcloud prévoit de mettre à disposition ses poids, son modèle de base pré-entraîné, un rapport technique et sa documentation de conformité à l’AI Act, selon les deux médias. Cette publication doit permettre de réutiliser le modèle, notamment pour l’adapter à des données d’entreprise.

Qwant l’utilise déjà, d’autres versions sont prévues

Le modèle est déjà utilisé par Qwant pour sa fonction de réponses flash. Selon les chiffres communiqués par OVHcloud et relayés par Next et Clubic, les réponses sont 20 % plus rapides et les coûts de fonctionnement trois fois moins élevés que ceux de la solution précédente.

OVHcloud prévoit une version 1.1 avant la fin de 2026. Elle doit porter la fenêtre de contexte à 128 000 tokens et améliorer le raisonnement mathématique. À plus long terme, l’entreprise évoque Olala 2.0 et des modèles spécialisés pour les usages agentiques en entreprise, le code et la cybersécurité. Le modèle spécialisé dans les usages agentiques devrait aussi soutenir le projet OVHai Workspace, l’environnement de travail développé par OVHcloud.

Partager cet article

Un clic ouvre le réseau choisi avec le titre et le lien déjà remplis.

Laisser un avis

Ta note :

Anti-robots : recopie le code

Avis des lecteurs

Pas encore de note. La première est pour toi.

Aucun avis publié pour le moment.

À lire aussi