Tahitii Obioha Network Planning and Optimisation Engineer Planet Network International, France

Kampala, Uganda, 25 June 2014

Suivi QoS / QoE de l’approche nouvelle des réseaux mobiles Pourquoi suivre la QoS / QoE des réseaux mobiles?

Tahitii ObiohaNetwork Planning and Optimisation Engineer

Planet Network International, France.

Forum régional de normalisation de l'UIT pour l'Afrique

(Kampala, Ouganda, 23-25 Juin 2014)

Suivi = observation, contrôle et maintien d'un registre continu du progrès ou de la qualité de quelque chose.

Suivi = observation, contrôle et maintien d'un registre continu du progrès ou de la qualité de quelque chose. C'est l'utilisation de tout outil technique disponible pour évaluer en permanence ou pour une période de temps donnée, un paramètre de qualité de service particulier, par exemple, un temps d’installation d’appels. (ETSI EG 202 009-2)

RAISONS Pour les utilisateurs finaux: Satisfaction signifie obtenir la meilleure valeur

pour leur argent parmi d'autres choix Pour les opérateurs: la satisfaction des utilisateurs accroît les revenus, affermit la loyauté de leur clientèle, consolide l'avantage concurrentiel parmi les concurrents. Des enquêtes ont montré que près de 90% des clients ne se plaignent pas avant de faire défection. Pour les régulateurs: la satisfaction signifie protéger les consommateurs, assurer la satisfaction de l'utilisateur final, créer un espace d’activités économiques à niveau pour les opérateurs pour la libre concurrence parmi les concurrents. Ils partagent tous un un objectif commun : LA SATISFACTION CLIENT

Kampala, Uganda, 25 June 2014 2

Mesure QoE

La Qualité d'Expérience (QoE) est devenue un concept important depuis la croissance des services mobiles. La QoE est très subjective en soi car elle implique des dimensions humaines. La mesure et l’amélioration de la QoE malgré les défis doivent être entreprises afin d'évaluer la vision la plus précise et complète de la valeur offerte par le fournisseur à l'utilisateur final. Si la QoE est élevée, l'utilisateur est heureux, satisfait et fidèle tandis qu’une QoE faible se traduira par des clients mécontents.


Mesure QoE

Les attentes des utilisateurs peuvent être regroupés en deux grandes catégories 1. FIABILITE (qualité de service de l'accessibilité et continuabilité KPI) 2. COMFORT (qualité de service de l'intégrité KPI)


KPI POUR QoE

QoE KPI Most important measuresService availability(anywhere)

Local and global coverage includedHow seamless it is for the user?

Service accessibility(anytime)

The success rate of user connections for any service

Service access time The delays in setting up any service connection

Continuity of service connection-interruption ratio

The retainability of the service connection and its performance overtime

Fiabilité KPI de QoE

Mesure de QoE


QoE KPI Most important measures

Quality of Session Jitter (delay variation %)Average throughput(kbits/s) towards mobile Bearer stabilityApplication layer packet loss ratioAverage end-to-end delay (ms)

Ease of use How easy is it to use service offered by the network

Level of support How quick and easy is it to get customer support

Confort KPI DE QoE

Mesure de QoE

approche de niveau de service en utilisant des échantillons statistiques • Cette approche s'appuie sur un échantillon statistique des utilisateurs globaux du réseau pour mesurer la QoE pour tous les utilisateurs dans le réseau. (Moyenne Opinion Score (MOS)) approche du système de gestion de réseau à l'aide des paramètres de qualité de service • Cette approche repose sur l'utilisation NMS pour recueillir les KPI de QoS à partir d'éléments de réseau et les comparer avec la cible prédéfinie.Sachant très bien que le Saint Graal de mesures subjectives est de le prédire à partir des mesures objectives, c'est-à-dire prédire la QoE d’un ensemble de paramètres QoS. L’approche NMS offre une plus grande précision que le niveau de service en raison de sa nature objective et deterministe.


Deux approches Pratique la mesure de la QoE

Relations entre NP et QoS

QoE = f(AQoS, NQoS) + other subjective factors (expectations, mood, etc.)

Strong Correlation between QoS and QoE

Relationship Between QoE and QoS may be near-linear for a voice call

but non-linear for a video call



Il existe une relation exponentielle entre QoS et QoE La QoS de bout en bout est un facteur important pour la QoE ; en d’autres termes, une meilleure qualité de service de réseau dans de nombreux cas, se traduira par une meilleure qualité d'expérience La QoE peut être prédite à partir d'un ensemble donné de paramètres de qualité de service et vice versa (ETSI TS 102 250-1) La QoE peut être améliorée avec les vrais mécanismes de QoS

Relationship Between QoE and QoS may be near-linear for a voice call

but non-linear for a video callKampala, Uganda, 25 June 2014 8

Mesures des QoS

La qualité de service (QoS) est advenue avec les réseaux de 2e génération Capacité d'un réseau à fournir un service avec un niveau de service assuré. Il est de manière intrinsèque un concept technique, mesuré et compris en termes de réseaux et d’éléments de réseau. Une métrique objective qui fait référence à la capacité du réseau pour obtenir un comportement plus déterministe. La qualification de service est basée sur six composantes principales telles que définies dans la Recommandation UIT-T Rec E-800

Operability Accessibilty

Retainability Integrity Security

Support

La QoS peut être mesurée en utilisant KPIs et KQIs


Performance

Assurance

85%

15%

Key Performance Indicators(KPIs)

Key Quality (Assurance) Indicators(KQIs)


Forte corrélation entre NP et QoS En d'autres termes, les NP médiocres aboutissent aux QoS médiocres


QoS aspects of service usage(ETSI TS 102 250-1)

Network related QoS



Non network related QoS criteria

Network related QoS criteria85%

Mapping

Network PerformanceIndicators/Parameters Target - range or limit

CALL DROP RATECALL SETUP SUCCESS RATE……PARAMETER N

< 2%< 90%……<= x%

Critères d'OS

15%

QoSQoS

ObjectiveObjective

NP Non-NP

IntrusiveIntrusiveNon-IntrusiveNon-Intrusive

Walk/Drive Test Around test

Walk/Drive Test Around test

OMC-R Counters using NMS

OMC-R Counters using NMS

Active Passive

Surveys, churn-rate, etc…Surveys, churn-rate, etc…

Ex. DT Tools: Nemo, XCAL, TEMS …

Ex.NMS: RPM System, Net Act,imanager M2000 …

SubjectiveSubjective

Mesure QoS

Relations entre NP, QoS et QoE

NP QoS et QoE QoS NP est un sous-ensemble de la qualité de service qui, à son tour, est un sous-ensemble de la portée générale QoE NP paramètres déterminent finalement la qualité de service QoE peut être prédit à partir d'un ensemble donné de paramètres de qualité de service et vice versa (ETSI TS 102 250-1)


QoS / QoE Assesement

Deux approches différentes et complémentaires pour la qualité de service mobile (ETSI EG 202 057-3) Test :Marcher/Conduire Des mesures basées sur les compteurs d'éléments de réseau à l'aide de NMS

Suivi: utilisation d'un outil technique permettant d'évaluer de façon permanente ou pour une période de temps donnée, un paramètre QoS particulier. (ETSI EG 202 009-2)


QoS Assesment Target Best Suitable QoS Approach(es)

One-time snap shot DT

Acceptance Procedure DT/ NMS

Continuous Monitoring NMS

Optimisation Cycle DT + NMS

Différence entre SMN et DT


Network Management System Drive Test (DT)QoS experienced by users are taken into account as the calls are made with the real terminals by the real users.

The QoS experienced is not taken into account by users depends to some extent on the design of their terminals which may differ somewhat from those used for formal tests.

Representativity is assured as real traffic provides measurements from the entire network 24h/7

Drive test does not provide a representative of the performance of the whole network because of variation in user density and the complexity of providing service in different areas. (60% of calls made in a network are made indoor).

Track performance down to the cell level Performance stops at Base station level

Provides comparabilty of Congestion and network failures

Misses out on planned Site outages and network failures.

Follow up on Operators’ network expansion, type of equipment deployed and mobile evolution

Impossible to track Network Expansion using DT

NMS reports are actionable as it tracks the availability of network elements (Ex. BSC/RNC)

DT reports are simply informative

Indepedent of enviromental factors Depedent on environmental factors such as weather conditions, seasons, location, timing etc

Traffic carried over the network and associated grade of service (GoS) are obtained using this approach

DT has no information on Traffic carried over a given network.

KPI Build flexibility from numerous counters of NEs Limited KPI observation as it measures the network from an external point.

Relatively no OPEX involved High OPEX as well as time and Labor intensive

Passive and non- intrusive, best approach in continious QoS monitoring.

Active and intrusive, best approach for QoS (coverage) benchmarking purposes.

Inconvénients de DT Illustrés






Recherche d'un outil de surveillance

Surveiller simultanément 24H / 7 l'état de toutes les technologies d’accès et d’ éléments de réseau / dans un réseau d'opérateur passivement sans compromettre leurs activités quotidiennes Mettre un frein à la dégradation du service et des pannes parfois au profit du gouvernement et les masses. Recherche d'un système qui peut surveiller les performances des opérateurs mobiles indépendantes du fournisseur et de la technologie Audit de référence flexible; hebdomadaire, mensuelle ou trimestrielle. Suivre l'évolution et l'expansion du réseau des opérateurs mobiles. Réduire le taux d'utilisateurs finaux directement ou indirectement le taux de désabonnement Un système robuste qui est facilement mis à niveau pour répondre à l'évolution rapide de la technologie mobile. Une plate-forme qui facilitera la prise de décision pour le bénéfice de toutes les parties concernées avec peu ou pas OPEX. Créer un espace de jeu de niveau pour tous les opérateurs et de protéger l'intérêt de tous les consommateurs et pas seulement ceux dans les zones urbaines


Systèmes de gestion de réseau

Des exemples de solutions NMS sur le marché aujourd'hui Pour les régulateurs (Vendor-indépendant) Système compatible (RPM)de la gestion des performances des Régulateurs (QoS) , avec tous les principaux fournisseurs de réseau (Huawei, ZTE, Ericcsson, Alcatel et NSN) POUR OPÉRATEURS (Vendor-dépendant) imanager M2000 pour Huawei fournisseur NetNumen U31 pour ZTE vendeur NetAct pour Nokia Siemens vendeur NetOp SME pour Ericsson et Omnivista 2500 pour Alcatel vendeur


APERÇU DU SYSTÈME DE RPM

• QoS monitoring and reporting 24/7 all year round

• Automatic Reporting and 3D GIS display(compatible with google earth

• Unlimited number of Users/ Single License

• Multi vendor Multi access technology

• Friendly and intuitive web user interface

Le Système de gestion de la performance des Régulateurs (QoS) est la solution NMS nouvelle qui gère la tâche de l'interfaçage entre le système de suivi des réseaux de tous les opérateurs, fournisseurs, collecte des registres de données sur les performances et créer des rapports KPI qui fournissent une performance de réseau donné évalués par un benchmarking publié.

• No running costs and upgrades easily as mobile access technology evolves

Main Features

• Built in compliance with ETSI TS 102 250-4&7/ ETSI EG 202 057-3 and ETSI EG 202 009-2


Conclusion

The assessment of the QoS/QoE is expected to be evaluated in checking criteria against reference values. These criteria are measured either objectively via technical means or subjectively via surveys amongst the users. Experts agree that a mix of objective(intrusive and non-intrusive) and subjective measurements remains the best means to get the whole QoS picture.

Today, four out of five Regulators only employ Drive Test(intrusive) both for one-time snap shot, benchmarking and continuous QoS monitoring(reactive sense). Given DTs drawbacks and inaccuracy with respect to continuous QoS monitoring, its high-time Regulators, gaining from operators’ perspective, adopted the novel, practical and more efficient approach – the use of Network Management Systems (NMS) for proactive continuous QoS monitoring.


Recommandations

Les Régulateurs, tel que recommandé dans l'ETSI EG 202 009-1 alinéa 7, en quête d’ évaluation et de suivi des QoS continus et objectifs doivent eux meme realiser les mesures et rendre les résultatsn publics au lieu de les confiés aux Opérateurs mobiles de fournir l’information sur la QoS Ainsi les régulateurs devraient procurer un système de RPM ou tout autre NMS qui facilite la tâche complexe qui consiste à amener les opérateurs mobiles à adhérer au KPI convenu, mettre un frein aux dégradations de service / pannes et même des pénalités pour défaillance répétées pour réaliser des objectifs QoS / QoE minima.


MERCI DE VOTRE ATTENTION

Pour plus d'informations sur le système de RPM ou tout autre

NMS N'hésitez pas à me contacter

ou par courriel [email protected]


mailto:[email protected]

Documents

Tahitii Obioha Network Planning and Optimisation Engineer Planet Network International, France