GSMA lanza comunidad de IA de código abierto para telecomunicaciones

En la antesala del MWC 2025, GSMA presentó Open-Telco LLM Benchmarks, una comunidad de código abierto que busca mejorar el rendimiento de los modelos de lenguaje grande (LLM) para aplicaciones específicas de telecomunicaciones.

Desarrollada por GSMA Foundry, su brazo de innovación, ofrece un marco pionero en la industria para evaluar modelos de Inteligencia Artificial (IA) en casos de uso para el sector en el mundo real y cuenta con el respaldo de Hugging Face, Khalifa University, la Fundación Linux y los operadores europeos y asiáticos Deutsche Telekom, LG Uplus, SK Telecom y Turkcell, además del proveedor de tecnología Huawei.

Según la GSMA, los grandes modelos de lenguaje han demostrado deficiencias significativas en el manejo de conocimientos técnicos de telecomunicaciones, cumplimiento normativo y resolución de problemas de red. En pruebas recientes, GPT-4 obtuvo menos del 75 por ciento en TeleQnA, un conjunto de datos integral diseñado para evaluar el conocimiento de los LLM en el campo de las telecomunicaciones, y menos del 40 por ciento en 3GPPTdocs, un dataset basado en la documentación de estándares 3GPP.

Consulta: GSMA promete un MWC 2025 en Barcelona lleno de anuncios sobre IA

“Los modelos de IA actuales tienen dificultades con las consultas específicas de las telecomunicaciones y, a menudo, producen recomendaciones inexactas, engañosas o poco prácticas”, asentó el director de Iniciativas de IA de GSMA, Louis Powell.

De acuerdo con la asociación mundial de operadores móviles, estos resultados resaltan las limitaciones actuales de los modelos de IA para abordar consultas específicas de telecomunicaciones. La nueva comunidad busca abordar estas brechas al proporcionar evaluaciones transparentes y abiertas de los modelos de IA en todas las capacidades, la eficiencia energética y la seguridad.

Open-Telco LLM Benchmarks permite a los operadores móviles, investigadores de IA y desarrolladores enviar casos de uso, conjuntos de datos y modelos para su evaluación. Los puntos de referencia resultantes se alojarán en Hugging Face para garantizar la transparencia y fomentar la participación de la comunidad.

“Al crear un conjunto de puntos de referencia para toda la industria, no sólo estamos mejorando el rendimiento del modelo, sino que también garantizamos que la IA en las telecomunicaciones sea segura, confiable y esté alineada con las necesidades operativas del mundo real”, concluyó Powell.