Crowdsourcing frente a medidas de redes de telefonía móvil

Ante la necesidad de una evaluación objetiva de la calidad y el rendimiento de las redes de telefonía móvil puede recurrirse a dos métodos que se diferencian fundamentalmente: el «crowdsourcing» y las medidas de redes de telefonía móvil. El mercado del crowdsourcing esta ampliamente saturado. Más de 20 compañías mantienen un enfoque muy centrado en las medidas de la red mediante crowdsourcing. Para recabar los resultados de medida, utilizan distintos conceptos que atienden a diferentes fines. Esta ficha de aplicación describe la estructura del espacio de crowdsourcing y analiza las ventajas y los inconvenientes de ambos planteamientos.

/

Su misión

Los operadores de redes de telefonía móvil y las autoridades reguladoras tienen un creciente interés por obtener información detallada acerca de la calidad de la red y la situación de la competencia en mercados específicos. Este interés se concreta en tres requisitos clave:

Evaluación comparativa– aporta una visión del rendimiento relativo de diferentes redes de telefonía móvil
Optimización de las operaciones– mejora la eficiencia operativa para el operador de red (incluyendo el servicio de atención al cliente, la garantía de prestación de servicio y la ingeniería de la red)
Marketing/gestión de la experiencia del cliente (CEM)– evalúa la experiencia del usuario final respecto a la calidad de la red

El crowdsourcing y las medidas de redes de telefonía móvil (MNT) son dos enfoques fundamentalmente distintos para abordar estos requisitos. Para los operadores de redes de comunicaciones móviles y las autoridades reguladoras es importante sopesar estos dos enfoques y cotejarlos con sus necesidades específicas. Esta ficha de aplicación analiza los pros y contras de ambos planteamientos.

Solución de crowdsourcing

Las soluciones de crowdsourcing se pueden agrupar en tres categorías:

Sindicación– permite la integración de un SDK (kit de desarrollo de software) de medida en aplicaciones no relacionadas aportando una compensación monetaria (de forma similar a los anuncios integrados en aplicaciones). A menudo, los usuarios finales no son conscientes de que se están recopilando datos en el trasfondo y se envían a un espacio de almacenamiento en la nube para su análisis posterior, lo que puede generar una zona entre la legalidad y la ilegalidad.
Aplicación del operador– integra un SDK de medida en una aplicación del operador
Aplicación propia– pone a disposición una aplicación específica en las tiendas de apps y se dirige de forma específica a los usuarios que están interesados en conocer el rendimiento de la red

Segmentación del mercado de crowdsourcing según el posicionamiento de las compañías

Figura 1: Segmentación de las soluciones de crowdsourcing en función de la prioridad y la categoría de la aplicación (ejemplos, sin carácter exhaustivo).

/

Figura 1: Segmentación de las soluciones de crowdsourcing en función de la prioridad y la categoría de la aplicación (ejemplos, sin carácter exhaustivo).

Análisis del crowdsourcing

Pros	Contras
La información de crowdsourcing se recaba de forma continua y autónoma, sin necesidad de lanzar una campaña de medida específica. La gran cantidad de datos acumulados aporta un análisis de muy alta resolución. Se obtienen datos de cualquier lugar donde se encuentren los usuarios. No obstante, esto no garantiza una cobertura geográfica íntegra. Se obtienen estadísticas de la cobertura y la calidad de la red de telefonía móvil para todo un país o región. La identificación de instalaciones, ubicaciones y operadores con el mayor tráfico de datos pueden aportar información de interés para la planificación de nuevas instalaciones o la ampliación de capacidad. Permite reconocer cómo se utiliza el espectro disponible en diferentes zonas geográficas. La gran cantidad de datos en masa se puede filtrar y aprovechar para análisis detallados en función de distintos criterios (operadores, ubicación, horas, etc.).	Las condiciones de la recopilación de datos mediante crowdsourcing son impredecibles y casi siempre desconocidas: Temperatura: el smartphone en el bolsillo del usuario se calienta a la temperatura del cuerpo; calentamiento por otras aplicaciones que se ejecutan en paralelo Ubicación: el smartphone puede encontrarse en una planta baja o un primer piso, o en un 10° o 20° piso de un edificio Condicionamiento del dispositivo: teléfonos más antiguos con capacidades limitadas utilizados durante mucho tiempo – la medida del rendimiento de la red puede verse afectada por la capacidad limitada del equipo del usuario Límites de tráfico del cliente: el volumen de datos puede estar agotado y haberse reducido la velocidad a través de la red Las medidas no son reproducibles (el análisis mediante crowdsourcing se puede repetir o ejecutarse con un nuevo conjunto de datos, pero no se puede reproducir). En caso de surgir un desacuerdo por una anomalía notificada, no podrá reproducirse para su validación. Los datos del crowdsourcing no se pueden utilizar para la optimización de la red. No se obtiene información sobre las causas raíz, o solo de forma limitada. Generalmente, las soluciones de crowdsourcing tienen una programación de propio desarrollo con un método de valoración de los resultados que no se da a conocer. Las valoraciones o los resultados de diferentes soluciones no pueden compararse entre sí. Normalmente, las soluciones de crowdsourcing limitan sus test activos a los siguientes KPI de calidad: caudal de enlace ascendente/enlace descendente, latencia media, jitter promedio y pérdida de paquetes. Los sistemas operativos de los smartphones son cada vez más restrictivos y limitan los parámetros disponibles que pueden utilizar las aplicaciones de crowdsourcing (ejecutadas en el trasfondo). Las aplicaciones de crowdsourcing específicas suelen generar un sesgo negativo (los abonados con conocimientos técnicos, en particular, solo activan estas pruebas cuando constatan un problema en la red).

Pros

Contras

La información de crowdsourcing se recaba de forma continua y autónoma, sin necesidad de lanzar una campaña de medida específica.
La gran cantidad de datos acumulados aporta un análisis de muy alta resolución. Se obtienen datos de cualquier lugar donde se encuentren los usuarios. No obstante, esto no garantiza una cobertura geográfica íntegra.
Se obtienen estadísticas de la cobertura y la calidad de la red de telefonía móvil para todo un país o región.
La identificación de instalaciones, ubicaciones y operadores con el mayor tráfico de datos pueden aportar información de interés para la planificación de nuevas instalaciones o la ampliación de capacidad.
Permite reconocer cómo se utiliza el espectro disponible en diferentes zonas geográficas.
La gran cantidad de datos en masa se puede filtrar y aprovechar para análisis detallados en función de distintos criterios (operadores, ubicación, horas, etc.).

Las condiciones de la recopilación de datos mediante crowdsourcing son impredecibles y casi siempre desconocidas:
- Temperatura: el smartphone en el bolsillo del usuario se calienta a la temperatura del cuerpo; calentamiento por otras aplicaciones que se ejecutan en paralelo
- Ubicación: el smartphone puede encontrarse en una planta baja o un primer piso, o en un 10° o 20° piso de un edificio
- Condicionamiento del dispositivo: teléfonos más antiguos con capacidades limitadas utilizados durante mucho tiempo – la medida del rendimiento de la red puede verse afectada por la capacidad limitada del equipo del usuario
- Límites de tráfico del cliente: el volumen de datos puede estar agotado y haberse reducido la velocidad a través de la red
Las medidas no son reproducibles (el análisis mediante crowdsourcing se puede repetir o ejecutarse con un nuevo conjunto de datos, pero no se puede reproducir). En caso de surgir un desacuerdo por una anomalía notificada, no podrá reproducirse para su validación.
Los datos del crowdsourcing no se pueden utilizar para la optimización de la red. No se obtiene información sobre las causas raíz, o solo de forma limitada.
Generalmente, las soluciones de crowdsourcing tienen una programación de propio desarrollo con un método de valoración de los resultados que no se da a conocer. Las valoraciones o los resultados de diferentes soluciones no pueden compararse entre sí.
Normalmente, las soluciones de crowdsourcing limitan sus test activos a los siguientes KPI de calidad: caudal de enlace ascendente/enlace descendente, latencia media, jitter promedio y pérdida de paquetes.
Los sistemas operativos de los smartphones son cada vez más restrictivos y limitan los parámetros disponibles que pueden utilizar las aplicaciones de crowdsourcing (ejecutadas en el trasfondo).
Las aplicaciones de crowdsourcing específicas suelen generar un sesgo negativo (los abonados con conocimientos técnicos, en particular, solo activan estas pruebas cuando constatan un problema en la red).

Solución de medida de redes de telefonía móvil

Los drive test y walk test constituyen conceptos de prueba específicos para verificar las redes de telefonía móvil. Se utilizan smartphones específicos (equipos de usuario comerciales) y escáneres de red en un sistema de medida controlado (con aislamiento de temperatura y de RF lo más amplio posible) y se ejecuta un conjunto de casos de test que reflejan el comportamiento del usuario final. Los servicios de voz (telefonía) y los servicios de datos (transferencia de datos, streaming de vídeo, redes sociales y navegación por la web) son los servicios más utilizados y constituyen la mayor parte del volumen de tráfico de las redes móviles.

El informe técnico de ETSI TR 103 559 describe prácticas recomendadas para una evaluación comparativa y valoración sólidas de la calidad de servicio de la red. El citado informe técnico proporciona una recomendación sobre cómo evaluar la calidad de redes móviles sobre la base de la percepción del usuario final.

La valoración del rendimiento de la red de Rohde & Schwarz implementa el método de ETSI.

Las aplicaciones se someten a prueba conforme a las tres siguientes categorías:

Accesibilidad– disponibilidad del servicio, p. ej. llamadas interrumpidas
Tiempo de espera– tiempo empleado para el establecimiento de la llamada
Calidad multimedia– calidad de las imágenes o de la voz

Los resultados se pueden trasladar a una escala de puntos y se genera una puntuación agregada que refleja la calidad percibida por el usuario (un vídeo de streaming que no se inicia tiene más gravedad que si la calidad del vídeo es ligeramente inferior, y por lo tanto se pondera correspondientemente).

Para obtener información más detallada, visite:
www.rohde-schwarz.com/nps

Campaña de prueba en autopistas

Figura 2: La valoración del rendimiento de la red de Rohde & Schwarz (NPS) abarca todas las aplicaciones del usuario final.

/

Figura 2: La valoración del rendimiento de la red de Rohde & Schwarz (NPS) abarca todas las aplicaciones del usuario final.

Análisis de las medidas de redes de telefonía móvil

Pros	Contras
Los datos se recopilan en condiciones definidas y en una configuración de test controlada (temperatura, apantallamiento de RF). Siempre se sabe en qué condiciones se recaban los datos (en exteriores, en interiores, cuál es la posición del dispositivo medido, temperatura, etc.). Las campañas de medida se planifican con los smartphones y las capacidades de terminales más avanzadas para garantizar que las medidas del rendimiento no se vean afectadas por posibles deficiencias del equipo. Todas las aplicaciones que los abonados estén ejecutando en el trasfondo contribuyen a la valoración integral de la calidad de la red. El uso de métodos de test definidos y armonizados permite comparar y reproducir las medidas Las campañas de medida están claramente definidas (rutas, equipos, horarios, configuraciones de medida, etc.) y se pueden repetir con facilidad al cabo de 3, 6 o 12 meses para medir la mejora del rendimiento a lo largo del tiempo. El alcance del test es mucho más amplio que en el caso del crowdsourcing. Las soluciones de medida de redes de telefonía móvil profesionales también pueden calcular métricas avanzadas como la nota media de opinión (NMO) relativa a contenido de voz y de vídeo. La valoración del rendimiento de la red según el método de ETSI proporciona información exhaustiva para la optimización de la red gracias al enfoque estandarizado de medida y valoración. Todos los datos están disponibles para el análisis posterior. En caso de notificarse problemas se dispone del contexto (condiciones de RF, mensajes L3 detallados de la red y las aplicaciones) para la localización de errores. La posibilidad de comparación que facilitan los métodos de test armonizados significa que las medidas de redes de telefonía móvil se pueden utilizar para comparar redes de acceso radioeléctrico abiertas (O-RAN) con una arquitectura de RAN de un fabricante individual. Existen acuerdos con fabricantes de dispositivos móviles y chipsets para atajar las limitaciones de sistemas operativos restrictivos del smartphone.	Es necesario planificar y poner en marcha campañas de medida específicamente, lo que supone un trabajo adicional. En comparación con el crowdsourcing, suponen una mayor inversión de tiempo y de dinero (si bien los informes obtenidos por crowdsourcing tampoco son gratuitos). Los resultados del rendimiento de la red solo están disponibles para las áreas en las que se han recopilado datos. Las medidas de redes de telefonía móvil no permiten crear de forma eficiente un mapa de cobertura para un país completo.

Pros

Contras

Los datos se recopilan en condiciones definidas y en una configuración de test controlada (temperatura, apantallamiento de RF). Siempre se sabe en qué condiciones se recaban los datos (en exteriores, en interiores, cuál es la posición del dispositivo medido, temperatura, etc.).
Las campañas de medida se planifican con los smartphones y las capacidades de terminales más avanzadas para garantizar que las medidas del rendimiento no se vean afectadas por posibles deficiencias del equipo. Todas las aplicaciones que los abonados estén ejecutando en el trasfondo contribuyen a la valoración integral de la calidad de la red.
El uso de métodos de test definidos y armonizados permite comparar y reproducir las medidas
Las campañas de medida están claramente definidas (rutas, equipos, horarios, configuraciones de medida, etc.) y se pueden repetir con facilidad al cabo de 3, 6 o 12 meses para medir la mejora del rendimiento a lo largo del tiempo.
El alcance del test es mucho más amplio que en el caso del crowdsourcing. Las soluciones de medida de redes de telefonía móvil profesionales también pueden calcular métricas avanzadas como la nota media de opinión (NMO) relativa a contenido de voz y de vídeo.
La valoración del rendimiento de la red según el método de ETSI proporciona información exhaustiva para la optimización de la red gracias al enfoque estandarizado de medida y valoración. Todos los datos están disponibles para el análisis posterior. En caso de notificarse problemas se dispone del contexto (condiciones de RF, mensajes L3 detallados de la red y las aplicaciones) para la localización de errores.
La posibilidad de comparación que facilitan los métodos de test armonizados significa que las medidas de redes de telefonía móvil se pueden utilizar para comparar redes de acceso radioeléctrico abiertas (O-RAN) con una arquitectura de RAN de un fabricante individual.
Existen acuerdos con fabricantes de dispositivos móviles y chipsets para atajar las limitaciones de sistemas operativos restrictivos del smartphone.

Es necesario planificar y poner en marcha campañas de medida específicamente, lo que supone un trabajo adicional. En comparación con el crowdsourcing, suponen una mayor inversión de tiempo y de dinero (si bien los informes obtenidos por crowdsourcing tampoco son gratuitos).
Los resultados del rendimiento de la red solo están disponibles para las áreas en las que se han recopilado datos. Las medidas de redes de telefonía móvil no permiten crear de forma eficiente un mapa de cobertura para un país completo.

Recomendaciones

El análisis y la comparación de las ventajas y los inconvenientes de ambos enfoques muestra que, más que competir, el crowdsourcing y las medidas de redes de telefonía móvil son soluciones complementarias, y que una no puede reemplazar a la otra.

Dependiendo de cuál sea el objetivo perseguido o los requisitos planteados, será más conveniente uno u otro método. Algunos ejemplos:

Evaluación comparativa de la calidad de la red/ranking de redes de operadores de un país:Para obtener una visión general aproximada pueden ser suficientes los datos obtenidos mediante crowdsourcing. Sin embargo, si se desea establecer una comparación equitativa y extraer conclusiones tangibles, un método de test comparable como el que especifica ETSI TR 103 559 para medidas de redes de telefonía móvil es lo más recomendable.
Mapa de cobertura de todo un país:Si se desea trazar un mapa de cobertura de todo un país, la mejor solución es el crowdsourcing. Los datos básicos de RF, como la potencia de recepción (RSRP) suelen ser suficientes en la mayoría de los casos, si bien se está discutiendo en la Conferencia Europea de Administraciones postales y de Telecomunicaciones (CEPT) la redefinición del término «cobertura», en especial con vistas a la formación de haz en 5G. Las medidas de redes de telefonía móvil no pueden abarcar todo un país con cada calle de cada ciudad, localidad o población con unos costes razonables.
Optimización de la red: Si se pretende llevar a cabo la optimización de la red sobre la base de los datos recopilados, estos deberán ser fiables, es decir, haberse obtenido en condiciones conocidas y definidas, y ser reproducibles. Los datos deben estar además disponibles con su contexto (condiciones de RF, mensajes L3 detallados de la red y las aplicaciones) para poder asignar los problemas identificados a eventos de la RAN y así identificar las causas raíz de dichos problemas. Solamente las medidas de redes de telefonía móvil satisfacen estos requisitos, mientras que los datos del crowdsourcing no aportan este contexto.
Análisis de utilización de la red:Para identificar ubicaciones o zonas geográficas con un alto uso de datos y de espectro, el crowdsourcing es una solución viable, puesto que los datos en masa se pueden analizar, y en este caso la fiabilidad de los datos tiene menor importancia.
El crowdsourcing puede ser un complemento adecuado a los drive test tradicionales:El crowdsourcing se puede utilizar para detectar áreas con baja cobertura o problemas de red. Se puede enviar a equipos de drive test para recopilar datos. El crowdsourcing puede ser útil para justificar campañas de evaluación comparativa a escala nacional (p. ej. campañas de valoración del rendimiento de la red), por ejemplo para la planificación de campañas y rutas para determinar si una campaña realmente cubre las zonas relevantes del país.

Información adicional

Para obtener más información sobre las soluciones de medida de redes de telefonía móvil con fines de evaluación comparativa que se tratan en esta ficha de aplicación póngase en contacto con su representante de ventas de Rohde & Schwarz o visite nuestro sitio web:
www.rohde-schwarz.com/mnt/network-benchmarking

Descargar