La propagation de l'intelligence artificielle dans le secteur TLC peut déterminer de nombreux avantages pour les entreprises. Commencer par l'optimisation des performances de l'infrastructure évitant les échecs et les interruptions jusqu'à l'augmentation des revenus grâce à la croissance de la demande de qualité pour le réseau pour les maisons des entreprises et la demande d'offres personnalisées pour les utilisateurs finaux.
Dans le même temps, cependant, des problèmes critiques ont été trouvés sur le front du Genai, avec le modèle grand langage (LLM) qui a montré des carences importantes dans la gestion des connaissances techniques, la conformité réglementaire et la résolution des problèmes dans la CCM.
Selon les tests récents, GPT4 a obtenu un score inférieur à 75% sur Teleqna, un ensemble de données pour évaluer les connaissances de LLM dans le domaine des télécommunications et moins de 40% sur la classification 3GPPTDOCS, un ensemble de données basé sur la norme 3GPP documentation.
Microsoft's PH2, un modèle beaucoup plus petit, n'a obtenu que 10% sur MATH500, une référence de 500 questions en mathématiques générales.
L'initiative de la GSMA
Pour aider à résoudre ces critiques, le GSMA Foundry, le GSMA Innovation Hub, a lancé des repères GSMA Open-Celco LLM, une communauté open source visant à améliorer les performances du modèle de grande langue pour des applications spécifiques destinées aux télécommunications.
Plus précisément, la communauté aura la tâche de développer un cadre unique pour l'évaluation des modèles GENII en cas d'utilisation. Pour soutenir l'initiative Hugging Face, l'Université Khalifa, la Fondation Linux et une série d'opérateurs et de fournisseurs de réseaux mobiles. Parmi ces Deutsche Telekom, LG Uplus, SK Telecom et Turkcell et Huawei.
«Les modèles d'intelligence artificielle d'aujourd'hui ont des difficultés avec des requêtes spécifiques pour les télécommunications, qui produisent souvent des recommandations inexactes, trompeuses ou pas très pratiques – il explique qu'il a dit Louis Powell, chef des initiatives, GSMA – En créant une série de référence au niveau du secteur, non seulement nous améliorons les performances des modèles, mais nous garantissons également que l'intelligence artificielle dans les télécommunications est sûre, fiable et alignée sur les besoins opérationnels du monde réel « .
Une référence standardisée
La communauté des références GSSA Open-Cleco LLM permettra aux opérateurs de réseaux mobiles, de chercheurs et de développeurs d'intelligence artificielle d'envoyer des cas d'utilisation, des ensembles de données et des modèles d'évaluation. Un cadre d'analyse comparative standardisé garantit en fait que tous les modèles d'intelligence artificielle sont évalués en ce qui concerne les défis les plus contraignants que le secteur se prélore: de la consommation d'énergie à la sécurité, à Esmevio. La référence sera organisée en étreignant le visage pour garantir la transparence et encourager l'implication de la communauté.