L’industrie mondiale des télécommunications dispose désormais d’une méthode plus robuste pour évaluer les grands modèles de langage (LLM) adaptés à ses besoins uniques. La GSMA, en collaboration avec l’Université Khalifa et le Centre de recherche Huawei Paris, a publié la troisième itération du Open Telco AI Leaderboard au Mobile World Congress (MWC) de Barcelone. Cette plateforme de référence ouverte classe les LLM spécifiquement pour les applications de télécommunications, comblant ainsi une lacune critique du secteur.
Pourquoi c’est important : un domaine complexe a besoin de mesures claires
Les télécommunications sont notoirement complexes du point de vue de l’IA. Le développement de modèles capables de gérer les opérations réseau, le service client et les tâches techniques hautement spécialisées nécessite des références précises. Sans eux, les progrès sont lents et comparer différents LLM devient subjectif. Le classement Open Telco AI offre la clarté dont le secteur a besoin. Il fait passer le domaine des conjectures aux résultats mesurables.
Quoi de neuf dans la version 3 ?
Cette dernière version étend la référence pour inclure des tâches reflétant les flux de travail réels des opérateurs. Il teste les LLM sur les attributs clés spécifiques aux télécommunications :
- Précision dans la réponse aux requêtes techniques.
- Raisonnement mathématique pour les calculs de réseau.
- Performance dans les scénarios d’exploitation réseau.
- L’efficacité énergétique, vitale pour les déploiements à grande échelle.
La plate-forme prend également en charge l’évaluation de méthodes telles que le réglage fin et la génération augmentée par récupération (RAG) pour des applications telles que les chatbots du service client et les outils de configuration réseau.
Un écosystème collaboratif
L’Open Telco AI Leaderboard fait partie de l’initiative OpenTelco AI plus large, lancée au MWC de Barcelone. Cette initiative vise à créer une base ouverte pour l’IA de qualité télécom, comprenant des modèles, des ensembles de données et un développement collaboratif. Les partenaires fondateurs incluent AT&T (qui publie des modèles d’IA de télécommunications ouverts) et AMD (fournissant une capacité de calcul via des GPU et TensorWave).
Le Digital Future Institute (DFI) de l’Université de Khalifa est un contributeur clé, dirigeant le groupe de gestion et de configuration du réseau au sein du programme Open Telco AI. Le DFI a déjà contribué à l’écosystème des modèles spécifiques aux télécommunications tels que RF-GPT (pour les applications radiofréquences) et TelecomGPT-R1.
Le classement Open Telco AI ne se limite pas à classer les modèles ; il s’agit de construire une base commune et ouverte pour l’avenir de l’IA dans les télécommunications.
La publication de ce classement marque une évolution vers un développement d’IA standardisé et vérifiable dans un secteur qui a longtemps manqué de critères d’évaluation clairs. Cela accélérera l’innovation et aidera les opérateurs à déployer des solutions d’IA plus efficaces.
Cette initiative constitue une étape cruciale vers un avenir plus efficace et plus fiable, basé sur l’IA, pour l’industrie mondiale des télécommunications.
