Qualit de la 3G : Une dgradation annonciatrice dune transhumance force des consommateurs vers la 4G ?

Service des tudes 19 novembre 2013

Introduction
En janvier 2013, lUFC-Que Choisir rendait publique une tude sur la qualit de lInternet mobile avec les services 3G. Cette analyse1, base sur des mesures in situ, ralises la fin de lanne 2012 par un prestataire spcialis dans le domaine des tlcommunications, mettait en lumire deux phnomnes : la mauvaise qualit de laccs aux services 3G sur le rseau de Free Mobile, et lanormale dgradation que gnrait le passage litinrance2. Litinrance prsentait ainsi des taux de non qualit trs nettement suprieurs ceux constats sur le rseau propre de Free, et ces taux croissaient en mme temps que les dbits, ce qui tait particulirement troublant. Ces constats ont notamment conduit lUFC-Que Choisir porter plainte contre la socit Free Mobile pour pratiques commerciales trompeuses sur le fondement de larticle L. 121-1 du Code de la consommation. La procdure est aujourdhui en cours et lUFCQue Choisir, respectueuse du temps judiciaire, attend ses rsultats. Cette attente nest cependant pas synonyme dinaction pour lassociation. En effet, les questionnements relatifs la qualit gnrale de la 3G perdurent, voire sintensifient avec larrive des offres 4G des oprateurs, et lexercice consistant valuer la qualit des services 3G reste donc plus que jamais pertinent. Cest la raison pour laquelle prs dun an aprs sa prcdente enqute et les engagements de Free sur le dveloppement de son rseau propre, lUFC-Que Choisir a dcid de ractualiser son tude 3G, sur la base du mme protocole, afin de constater lvolution de la situation pour lensemble des oprateurs. Les rsultats de cette nouvelle tude viennent conforter les positions exprimes par lassociation en janvier 2013, soulignent la dgradation de laccs aux services 3G via le rseau propre de Free, et plus largement, interrogent quant au devenir de lensemble des rseaux 3G avec lmergence doffres 4G dans le paysage des Tlcoms. Une dgradation gnralise de la 3G dans un futur proche nest ainsi pas exclure.

http://image.quechoisir.org/var/ezflow_site/storage/original/application/37eb0b161795b0d9fc98587c42bceb68.pdf

Cest--dire quand les abonns de Free Mobile, en raison de labsence dantennes de loprateur sur certaines zones, passent sur le rseau dOrange (suite un accord contractuel entre les deux oprateurs).

Etude 3G

Contenu

I. MTHODOLOGIE DES MESURES TECHNIQUES ............................................................... 3 1. UN PROTOCOLE IDENTIQUE, UN PERIMETRE ELARGI..................................................................... 3 2. PROTOCOLE DE LENQUETE .................................................................................................... 3 2.1. DESCRIPTION DES MESURES ................................................................................................ 3 2.2. INDICATEURS ....................................................................................................................... 4 II. RSULTATS : DES DBITS LIMITS, DES USAGES PERFECTIBLES ............................ 5 1. LES DEBITS CONSTATES : DES RESULTATS ENCORE TROP ELOIGNES DES DEBITS MAXIMUMS THEORIQUES ................................................................................................................................. 5 2. USAGES : DES QUALITES DISPARATES ..................................................................................... 7 2.1. LES SERVICES DE STREAMING VIDEO..................................................................................... 8 2.2. LE SERVICE DE STREAMING AUDIO DEEZER .......................................................................... 11 2.3. LE TLCHARGEMENT DUNE APPLICATION ........................................................................... 16 III. UN ENSEIGNEMENT PROCCUPANT : LA DGRADATION DE LACCS AUX SERVICES DE LA 3G VIA LE RSEAU PROPRE DE FREE MOBILE .................................... 21 IV. DE LA 3G LA 4G : VERS UNE TRANSHUMANCE FORCE DES CONSOMMATEURS ? 25 1. DGRADER LA 3G POUR POUSSER LA 4G ? ........................................................................... 25 2. LA BAISSE DE LA QUALIT DES OFFRES 3G : LILLUSTRATION DES OFFRES 3G DE BOUYGUES TELECOM ................................................................................................................................... 26 3. QUID DES INVESTISSEMENTS DANS LA 3G ? ........................................................................... 28 V. ENSEIGNEMENTS DE LENQUTE 3G ET DEMANDE DE LUFC-QUE CHOISIR .......... 30

Etude 3G

I.

Mthodologie des mesures techniques

1. Un protocole identique, un primtre largi Lide qui a prvalu au lancement de cette nouvelle enqute a t de partir du primtre retenu dans celle de janvier 2013 (pour mettre en lumire lvolution de la situation primtre constant) et de ltendre une nouvelle zone gographique. En plus des trois zones testes dans notre tude prcdente, savoir lle-de-France, Lille et Toulouse, nous avons choisi de fixer galement notre attention sur la situation Grenoble, ville de taille intermdiaire caractrise par une densit de la population plus leve qu Lille et Toulouse et situe dans un espace non test jusqu prsent. Cet largissement simposait. En effet, en braquant les projecteurs sur lle-de-France, Lille et Toulouse, lUFC-Que Choisir laissait dj entrevoir quelle testerait nouveau ces zones pour vrifier lvolution de la situation de la qualit des services 3G. Lide que les oprateurs seraient susceptibles daccorder un soin tout particulier au dveloppement de leurs infrastructures dans ces zones a naturellement conduit au test dun nouveau territoire.

2. Protocole de lenqute
2.1.Description des mesures

Au cours de deux vagues de mesures distinctes (pour viter les phnomnes ponctuels anormaux ) effectues en septembre et octobre 2013, les 4 oprateurs de rseau ont t tests dans les configurations identiques suivantes : Mmes lieux de mesures ; Mmes tranches horaires ; Mmes squences vido et audio ; Mme application tlcharge.

Comme pour notre prcdente tude, les tests ont t effectus partir diPhone 4S et de Samsung Galaxy S2, chaque oprateur tant test avec ces deux types de tlphone (8 tlphones ont donc t ncessaires la ralisation des mesures). Chaque test a consist : Mesurer les dbits montants et descendants et latence avec SpeedTest en dbut et en fin de chaque cycle de mesures ;

Etude 3G

Visionner/couter une squence sur les applications YouTube, Dailymotion, FranceTV Pluzz, et Deezer sur les smartphones (dernires versions disponibles sur les stores Apple et Google) ; Tlcharger une application SNCF TER sur chacun des deux stores et pour chaque oprateur.

Lenchainement des mesures faites en septembre-octobre 2013 suit celui prsent dans notre tude de janvier 2013 (base sur des mesures faites en novembre-dcembre 2012). Sur chaque lieu 1 test par mobile est ralis, soit 6 services tests par lieu et par mobile. Ainsi, hors tests de dbits, 3 040 mesures ont t effectues (soit 21,3 % de mesures supplmentaires par rapport notre enqute de janvier 2013).

2.2.

Indicateurs

Afin dassurer la ncessaire comparabilit entre ltude de janvier 2013 et celle de novembre 2013, nous reprenons les trois indicateurs dvelopps au dbut de lanne savoir : NOK APPLI = problme lors du lancement de lapplication, impossible de lancer une squence ou un tlchargement ; NOK TIME OUT = la squence na pas dmarr au bout dune minute/le tlchargement nest pas complt au bout de 2 minutes ; NOK DUREE = la dure de la squence est infrieure la moyenne sur lensemble des rseaux propres (cest--dire hors Free en itinrance)3.

Pour pallier le problme que constitue une moyenne mobile dans le cadre dune comparabilit inter temporelle, nous retenons ici les moyennes constates lors de notre tude de janvier 2013.

Etude 3G

II.

Rsultats : des dbits limits, des usages perfectibles

1. Les dbits constats : des rsultats encore trop loigns des dbits maximums thoriques En janvier, ltude de lUFC-Que Choisir pointait des dbits rels particulirement loigns des dbits thoriques annoncs pour lensemble des oprateurs (en prenant en compte le matriel utilis pour les mesures), et des dbits particulirement faibles sur le rseau propre de Free. Cest encore le cas aujourdhui.

Tableau 1 Dbits selon les oprateurs en le-de-France, Lille et Toulouse (donnes agrges) en octobre 2013
Dbits en kb s + , --3 .-- 4 , --3 --- 4 3 .-.-- 4 3 --- 4 .-!ou"gues #elecom .,/3 0 1/3 0 3-/, 0 3-/2 0 ,-/3 0 $ree 43/1 0 5/3 0 32/4 0 33/, 0 36/6 0 $ree %itinrance& .3/- 0 31/6 0 4/. 0 3-/1 0 3./, 0 'range 1-/2 0 33/6 0 1/3 0 3/3 0 35/- 0 ($) .-/- 0 5/1 0 5/1 0 34/5 0 35/- 0 *o"enne .,/2 0 2/5 0 2/, 0 2/2 0 35/, 0

Source : UFC-Que Choisir, novembre 2013.

Le tableau 1 vient confirmer les mesures de terrain de dcembre 20124. Force est nouveau de dnoncer le dcalage persistant entre les dbits thoriques mis en avant par les oprateurs et ceux, bien faibles, auxquels doivent se confronter les utilisateurs au quotidien. La proportion des mesures qui prsentent un dbit infrieur 2 000 kb/s5, reprsentent ainsi prs de 50 % des cas. Nous sommes ainsi toujours loin des dbits quautorisent les technologies employes !

Afin dvaluer lvolution des dbits constats entre dcembre 2012 et octobre 2013, une dissociation est faite entre les rsultats des mesures des dbits en le-de-France, Lille et Toulouse dune part, et ceux obtenus Grenoble dautre part. Les comparaisons sont ainsi faites primtre quivalent. A titre dinformation, les moyennes des dbits descendants suprieurs 2 000 kb/s pour les diffrents oprateurs sont quivalentes. Elles sont (toutes zones gographiques retenues pour cette tude confondues) de 4 273 kb/s pour Bouygues Telecom, de 4 392 kb/s pour Free, de 4 260 kb/s pour Free en itinrance, de 4 441 kb/s pour Orange et de 3 942 kb/s pour SFR.
5

Etude 3G

Graphique 1 Evolution des dbits selon les oprateurs en le-de-France, Lille et Toulouse entre dcembre 2012 et octobre 2013

Source : UFC-Que Choisir, novembre 2013.

Plusieurs lments se dtachent de la comparaison. Globalement, pour lensemble des oprateurs, les dbits suprieurs 2 000 kb/s ont tendance saccrotre ( lexception notable de SFR, dont la part de ces dbits connat une baisse importante). Mais cet accroissement saccompagne dune hausse notable de la part des faibles dbits (entre 0 et 500 kb/s). En consquence, les dbits intermdiaires diminuent chez lensemble des oprateurs. En ce qui concerne Free Mobile, llment le plus saillant tient laugmentation sensible entre dcembre 2012 et octobre 2013, de la part des dbits suprieurs 2 000 kb/s sur son rseau propre (sans passer sur le rseau dOrange) puisquelle passe de 29 % 43,6 %. Nanmoins, le rseau propre de Free Mobile reste le seul sur lequel on observe une majorit de mesures qui prsentent des dbits infrieurs 2 000 kb/s.

Etude 3G

Tableau 2 Dbits selon les oprateurs Grenoble en octobre 2013

Dbits en kb s + ,--3 .-- 4 , --3 --- 4 3 .-.-- 4 3--- 4 .-!ou"gues #elecom 62/3 0 4/, 0 4/, 0 3,/. 0 -/- 0 $ree 23/6 0 5/3 0 -/- 0 -/- 0 -/- 0 $ree %itinrance& 43/6 0 5/. 0 31/1 0 31/1 0 31/1 0 'range .-/- 0 -/- 0 4/3 0 31/6 0 ,2/- 0 ($) .-/- 0 4/, 0 5/3 0 3,/. 0 ,./- 0 *o"enne 13/4 0 4/, 0 1/3 0 3,/. 0 3./1 0

Source : UFC-Que Choisir, novembre 2013.

Les rsultats transcrits dans le tableau 2 qui ont trait la nouvelle zone gographique tudie ont ceci de particulier quils offrent une analyse qui tranche avec celle du tableau 1. En effet, les dbits sur le rseau de Free sont quasi systmatiquement suprieurs 2 000 kb/s. Si cette proportion est galement leve sur le rseau de Bouygues Telecom, il en est autrement sur ceux dOrange et SFR qui parviennent tout juste obtenir 50 % des mesures suprieures 2 000 kb/s. La faible proportion des mesures suprieures 2 000 kb/s sur le rseau dOrange peut au passage parfaitement expliquer la relative mdiocrit des dbits sur litinrance. Mais au-del des lments chiffrs relatifs aux dbits, cest la faon dont ces derniers permettent lusage de services mobiles qui intresse particulirement les utilisateurs. Or, nous allons voir que, si lcart entre les dbits constats sur le rseau de Free et ceux constats sur litinrance peut a priori sexpliquer, il nen va pas de mme sagissant de la pitre qualit des usages des services sur le rseau de Free et sur litinrance.

2. Usages : des qualits disparates

Les taux de non qualit que nous avons mesurs pour chaque service test permettent de dterminer si les consommateurs sont en mesure ou non dutiliser ces services dans de bonnes conditions. Lorsquau cours du test dun service, lun des indicateurs retenus est constat, il est alors catgoris comme tant de non qualit . Dans notre nouvelle enqute nous prsentons trois types de rsultats :

Ceux qui sobtiennent primtre constant par rapport lenqute de janvier 2013 ( savoir conserver lagrgation des donnes de lle-de-France, de Lille et de Toulouse) ; Ceux qui prsentent les rsultats propres Grenoble, comparer aux premiers pour voir si des similitudes sont notables ;

Etude 3G

Ceux qui agrgent les quatre zones testes afin de dgager des constats globaux ; Enfin, ceux qui permettent de dterminer lvolution de la qualit 3G entre nos deux enqutes, primtre constant.

2.1.

Les services de streaming vido

Tableau 3 Taux de non qualit pour le visionnage de vidos en streaming, par service et par oprateur sur lle-de-France, Lille et Toulouse, en octobre 2013

7ou#ube

Dail"motion

$rance#8 9lu::

Dbits en kb s Bouygues Telecom Free Free Itinrance Orange !F" Bouygues Telecom Free Free Itinrance Orange !F" Bouygues Telecom Free Free Itinrance Orange !F"

.--+d+3--14,3 % 57,1 % 85,7 % 25, % 15,8 % 71,4 % 28,# % 85,7 % 5 , % 47,4 % 14,3 % 42,9 % 71,4 % 5 , % 15,8 %

3 ---+d+, --4,8 % 52,9 % 57,1 % 13, % , % 28,# % 25,5 % 28,# % 3 ,4 % 27,3 % 4,8 % 47,1 % 78,# % 2#,1 % , %

d+, --1,5 % 14,8 % 37,1 % 5,1 % 3,1 % 1 ,4 % 25,9 % 14,3 % 14,1 % 1 ,9 % , % 44,4 % 4 , % #,4 % 7,8 %

Source : UFC-Que Choisir, novembre 2013.

Le tableau 3 met en vidence linversement de la tendance que lUFC-Que Choisir avait relev en janvier 2013 : la dcorrlation entre taux de non qualit et niveau de dbits sur litinrance. En effet, alors que nous avions constat une augmentation des taux de non qualit au fur et mesure que le dbit augmentait, dsormais, les taux de non qualit sur litinrance dcroissent logiquement mesure que le dbit augmente. Cependant, il subsiste toujours un problme de non qualit sur les deux rseaux de Free (propre et itinrance) par rapport ceux sur les rseaux des historiques . En effet, quel que soit le service de streaming vido auquel on sintresse, il apparait que les abonnes Free Mobile doivent se heurter des difficults pour y accder. Le graphique 2, tir du tableau 3, illustre ces difficults. Nous comparons les taux de non qualit sur le rseau propre de Free, sur litinrance, et sur les rseaux des

Etude 3G

historiques pour les dbits suprieurs 2 000 kb/s, soit ceux pour lesquels la qualit devrait tre la meilleure.

Graphique 2 Taux de non qualit pour les services de streaming vido sur lle-deFrance, Lille et Toulouse pour les dbits suprieurs 2 000 kbit/s, en octobre 2013

Source : UFC-Que Choisir, novembre 2013.

Dans le dtail, dans le cadre de lutilisation du service YouTube, pour les dbits suprieurs 2 000 kb/s, le taux de non qualit en itinrance est prs de 12 fois suprieur celui du taux de non qualit moyen des historiques ! Lorsque lon sintresse Dailymotion, on constate que la palme de la non qualit revient de loin Free Mobile ; les rsultats de lensemble des oprateurs tant par ailleurs mauvais. Pire, pour FranceTV Pluzz, cest la dbandade pour Free Mobile. Alors que pour les dbits suprieurs 2 000 kb/s les taux de non qualit sont trs faibles chez les historiques (moins de 5 %), celui sur le rseau propre de Free frle les 50 %.

Etude 3G

10

Graphique 3 Evolution (en points) entre dcembre 2012 et octobre 2013 des taux de non qualit pour le visionnage de vidos en streaming, par service et par oprateur sur llede-France, Lille et Toulouse, pour les dbits suprieurs 2 000 kb/s

Source : UFC-Que Choisir, novembre 2013.

Si lon compare lvolution entre dcembre 2012 et octobre 2013, plusieurs constats peuvent tre dresss. Sur YouTube, lensemble des oprateurs voient leur qualit samliorer. A linverse, sur le service Dailymotion, et lexception notable de litinrance, les taux de non qualit de tous les oprateurs augmentent : cest particulirement le cas chez Orange. Pour France TV Pluzz, le rsultat est plus contrast, en particulier pour Free o la qualit de son rseau propre se dgrade fortement, alors quen itinrance la qualit samliore trs sensiblement. Au final, mme si les taux de non qualit de Free, sont toujours importants pour les clients utilisant le rseau dOrange grce (ou cause) de litinrance, la tendance est une amlioration de la situation. Cependant une autre tendance se fait jour : les taux de non qualit sur le rseau propre de Free croissent fortement, et bien plus que chez les autres oprateurs.

Etude 3G

11

Tableau 4 Taux de non qualit pour le visionnage de vidos en streaming, par service et par oprateur Grenoble, en octobre 2013

7ou#ube

Dail"motion

$rance#8 9lu::

Dbits en kb s Bouygues Telecom Free Free Itinrance Orange !F" Bouygues Telecom Free Free Itinrance Orange !F" Bouygues Telecom Free Free Itinrance Orange !F"

.--+d+3 --, % $ 1 % 25, % , % ##,# % $ 5 , % , % ##,# % , % $ 1 % 5 , % , %

3 ---+d+, --, % , % 33,3 % , % , % 5 , % , % ##,# % , % , % , % , % 33,3 % , % 33,3 %

d+, --, % , % # , % , % 8,3 % 2#,3 % 27,3 % # , % 33,3 % 33,3 % , % , % # , % , % , %

Source : UFC-Que Choisir, novembre 2013.

Les mesures complmentaires que nous avons fait effectuer Grenoble viennent nouveau souligner un problme spcifique sur litinrance puisque les taux de non qualit sur litinrance sont presque toujours les plus levs pour tous les services de streaming vido, quels que soient les dbits retenus. Systmatiquement pour lensemble des sites de streaming vido et pour les dbits suprieurs 2 000 kb/s, il est impossible daccder dans des conditions convenables ces sites dans 6 cas sur 10 par litinrance ! Ceci est dautant plus troublant que via le rseau Free lutilisation des services de streaming vido se fait dans des conditions plutt bonnes voire trs bonnes, qui se rapprochent de celles constates chez les historiques .

2.2.

Le service de streaming audio Deezer

Les tests que nous avons effectus sur le service audio Deezer viennent confirmer les mauvaises tendances auxquelles sont confronts les clients de Free Mobile, mais aussi ceux dOrange.

Etude 3G

12

Tableau 5 Taux de non qualit pour lcoute de musique en streaming partir de Deezer sur lle-de-France, Lille et Toulouse, en octobre 2013

Dbits en kb s Bouygues Telecom Free Free Itinrance Orange !F"

.--+d+3 --28,# % 28,# % 71,4 % 25, % 31,# %

3 ---+d+, --9,5 % 35,3 % #4,3 % 34,8 % 9,1 %

d+, --4,5 % 33,3 % 37,1 % 11,5 % 9,4 %

Source : UFC-Que Choisir, novembre 2013.

Sur cet aspect, Bouygues et SFR affichent des taux de non-qualit plutt faibles ds que le dbit dpasse les 1 000 kb/s. Les taux dOrange sont nettement moins bons que ceux des autres historiques . Mais le constat le plus frappant est la mauvaise qualit de laccs au service de streaming audio Deezer sur le rseau de Free et en itinrance. Pour les dbits suprieurs 2 000 kb/s, qui sont majoritaires, le taux de non qualit sur le rseau Free (rseau propre et itinrance) est en moyenne plus de 4 fois plus lev que le taux de non qualit moyen des oprateurs historiques !

Graphique 4 Taux de non qualit pour lcoute de musique en streaming partir de Deezer, par service et par oprateur sur lle-de-France, Lille et Toulouse, pour les dbits suprieurs 2 000 kb/s, en dcembre 2012 et octobre 2013

Source : UFC-Que Choisir, novembre 2013.

Etude 3G

13

Au global sur cet aspect, la non qualit a tendance au mieux stagner (Bouygues), mais le plus souvent, augmenter, parfois trs fortement. On remarquera que pour les historiques le mauvais lve est Orange puisque le taux de non qualit a trs sensiblement augment depuis dcembre 2012 : + 9,5 points ! Cependant, en valeur absolue, Free reste le rseau avec le plus fort taux de non qualit. On notera ainsi laugmentation par rapport notre prcdente enqute du taux de non qualit sur le rseau propre de Free : pour les dbits suprieurs 2 000 kb/s, il a cr de 15,3 points. Litinrance ne peut gure se prvaloir dautoriser une meilleure utilisation de Deezer : si le taux de non qualit a diminu depuis dcembre 2012, il reste suprieur celui constat sur le rseau Free.

Tableau 6 Taux de non qualit pour lcoute de musique en streaming partir de Deezer Grenoble, en octobre 2013

Dbits en kb s Bouygues Telecom Free Free Itinrance Orange !F"

.--+d+3 --33,3 % $ 5 , % 25, % , %

3 ---+d+, --, % , % 33,3 % , % , %

d+, --5,3 % 9,1 % 2 , % 1#,7 % , %

Source : UFC-Que Choisir, novembre 2013.

La situation que lon constate aujourdhui Grenoble vient confirmer certaines tendances observes dans le tableau 5. La qualit en itinrance est faible et pour les dbits suprieurs 2 000 kb/s, Orange est loprateur qui, parmi les historiques se remarque dfavorablement. La rcurrence des problmes rencontrs justifie lagrgation des donnes des 4 zones pour illustrer concrtement la faon dont la qualit disparate des services de streaming impacte lexprience des utilisateurs.

Etude 3G

14

Tableau 7 Capacit daccs la lecture des streamings et temps effectifs de lecture pour lensemble des tests (donnes de Grenoble, lle-de-France, Lille et Toulouse agrges), en octobre 2013

#au; d<acc=s > la lecture du streaming Bouygues Telecom Free 7ou#ube Free Itinrance Orange !F" Bouygues Telecom Free Dail"motion Free Itinrance Orange !F" Bouygues Telecom Free $rance#8 9lu:: Free Itinrance Orange !F" Bouygues Telecom Free Dee:er Free Itinrance Orange !F"
Source : UFC-Que Choisir, novembre 2013.

#em?s effectif de lecture 1- secondes a?r=s le lancement du ?la" 53,5 secon%es 4#,8 secon%es 43,2 secon%es 52,7 secon%es 53,8 secon%es 5 ,5 secon%es 5 ,2 secon%es 48,3 secon%es 51,3 secon%es 49,5 secon%es 53,4 secon%es 5 ,7 secon%es 48, secon%es 52,3 secon%es 53,7 secon%es 55,5 secon%es 54, secon%es 53,4 secon%es 54,5 secon%es 55,1 secon%es

9 ,8 % 83,8 % 59, % 88,2 % 94,7 % 8 ,9 % 78,4 % 75,# % 79,# % 87,5 % 9 ,8 % ##,2 % 5 , % 81,# % 9 ,1 % 88,8 % 73, % 55,1 % 8#,2 % 94,1 %

La premire colonne du tableau 7 vient illustrer la capacit des clients des oprateurs pouvoir lire de la vido ou de laudio en streaming. Systmatiquement, la capacit lire de faon effective de la vido ou de laudio est davantage contrainte pour les clients de Free Mobile. Elle lest spcifiquement lorsque lon sintresse litinrance : dans moins de 6 cas sur 10 lutilisateur peut accder la lecture du flux, alors que pour les oprateurs historiques , cette proportion se rapproche de 9 fois sur 10. Pour les oprateurs historiques , Orange est systmatiquement en retrait, tandis que SFR est loprateur qui globalement sen tire le mieux.

Etude 3G

15

La seconde colonne du tableau 6 vient souligner que lorsque la lecture dune piste audio ou dune piste vido est possible, elle est quasi systmatiquement dune dure moins longue pour les clients de Free Mobile, et systmatiquement dans le cas spcifique de litinrance. Cette tendance est principalement marque pour la lecture des vidos sur YouTube o le temps effectif de lecture sur litinrance est en moyenne 10 secondes moins lev sur une vido de 60 secondes que pour les oprateurs historiques . Autrement dit, les utilisateurs de Free Mobile sont victimes dune double peine lorsquil sagit daccder aux services de streaming : non seulement ils peinent pouvoir ne serait-ce quaccder la lecture de la vido ou de la bande audio, mais en plus, quand ils y parviennent, ce nest quaprs un buffering (un temps de chargement) qui dure sensiblement plus longtemps que celui constat chez les autres oprateurs.

Graphique 5 Taux daccs la lecture des streaming sur lensemble des zones et pour tous les dbits, en octobre 2013

Source : UFC-Que Choisir, novembre 2013.

Il est tout fait curieux quen itinrance, la capacit accder aux services de streaming soit 20 % moindre (soit de plus de 15 points) que sur le rseau propre de Free.

Etude 3G

16

2.3.

Le tlchargement dune application

Les tendances observes pour les usages des services de streaming caractrisent galement la capacit tlcharger une application sur les stores.

Tableau 8 Taux de non qualit pour le tlchargement dune application par oprateur sur lle-de-France, Lille et Toulouse, en octobre 2013

Dbits en kb s Bouygues Telecom Free Free Itinrance Orange !F"

.--+d+3--28,# % 42,9 % 71,4 % 25, % 21,1 %

3---+d+,--9,5 % 7 ,# % 78,# % , % 9,1 %

d+,--7,5 % #3, % 51,4 % 3,8 % #,2 %

Source : UFC-Que Choisir, novembre 2013.

Si les taux de non-qualit sont plutt faibles pour les oprateurs historiques, ceux de Free sont largement suprieurs. Pour les dbits suprieurs 2000 kb/s, le diffrentiel est particulirement frappant.

Graphique 6 Taux de non qualit pour le tlchargement sur le store pour les dbits suprieurs 2 000 kb/s, par oprateur sur lle-de-France, Lille et Toulouse, en dcembre 2012 et octobre 2013

Source : UFC-Que Choisir, novembre 2013.

Etude 3G

17

Ce qui interpelle, cest lvolution des rsultats depuis notre tude de janvier 2013. Nous devons dnoncer une dgradation gnrale, mme si les taux rels de non qualit sont sans commune mesure entre les oprateurs historiques et Free. Nous mettions alors en avant un taux de non qualit de 27 % pour Free et de 80 % pour Free en itinrance. Alors que depuis notre tude prcdente le taux de non qualit pour litinrance baisse, il explose en ce qui concerne le rseau propre de Free puisquil passe de 27 % 63 %, soit une hausse de 133 % !

Tableau 9 Taux de non qualit pour le tlchargement dune application par oprateur Grenoble, en octobre 2013

Dbits en kb s Bouygues Telecom Free Free Itinrance Orange !F"

.--+d+3--##,# % $ 5 , % 25, % 33,3 %

3---+d+,--5 , % , % ##,# % , % ##,# %

d+,--21,1 % 54,5 % 8 , % 1#,7 % 25, %

Source : UFC-Que Choisir, novembre 2013.

A Grenoble, les rsultats de lensemble des oprateurs ne sont pas brillants, lexception dOrange. On notera avec intrt quon retrouve aujourdhui lanormale corrlation positive entre hausse des dbits et hausse des taux de non qualit sur litinrance. Comme prcdemment, la palme de la mauvaise qualit revient Free Mobile, sur son rseau propre et sur litinrance Orange. Nous pouvons ds prsent mettre un bilan sur les taux de non qualit des oprateurs, pour chaque service test faisant appel aux flux descendants, en prenant en compte tous les dbits, et non pas seulement ceux suprieurs 500 kb/s.

Etude 3G

18

Tableau 10 Taux de non qualit pour les services faisant appel aux flux descendants, selon les oprateurs (tous dbits et toutes zones confondues), en octobre 2013
!ou"gues #elecom 'range ($) *o"enne @historiAues@ $ree $ree %itinrance&

7ou#ube Dail"motion $rance#8 9lu:: Dee:er #lchB (tore *o"enne

33/, 0 ,2/1 0 33/, 0 3./, 0 ,,/4 0 35/6 0

3./5 0 ,3/- 0 ,3/6 0 ,3/6 0 35/4 0 ,-/2 0

2/, 0 ,2/1 0 33/3 0 33/3 0 ,3/3 0 36/, 0

3,/6 0 ,6/4 0 31/6 0 36/3 0 ,-/1 0 35/2 0

33/3 0 ,6/- 0 32/, 0 ,2/6 0 1./3 0 35/. 0

../3 0 34/1 0 .1/4 0 44/2 0 1./3 0 .3/3 0

Source : UFC-Que Choisir, novembre 2013.

Graphique 7 Taux de non qualit moyen pour lensemble des services faisant appel aux flux descendants, selon les oprateurs (tous dbits et toutes zones confondues), en octobre 2013

Source : UFC-Que-Choisir, novembre 2013.

Etude 3G

19

Le tableau 10 et le graphique 7 rsument eux-seuls les problmatiques relatives laccs aux services via la 3G. Les taux de non qualit sur le rseau propre de Free sont 103,7 % plus levs que celui de la moyenne des historiques ! Pire encore, pour litinrance, ce chiffre grimpe vertigineusement 171,4 % ! Si la mauvaise qualit relative du rseau de Free est prjudiciable en termes de confort dutilisation pour les clients de Free, que dire de litinrance ? La mauvaise qualit relative laisse place une mauvaise qualit absolue puisquau total, la non qualit totale se constate plus dune fois sur deux ! Quelles que soient les difficults rencontres par les oprateurs lorsquil sagit dutiliser tel ou tel service (on pense en premier lieu laccs Dailymotion), celles auxquelles sont confrontes les clients de Free Mobile se dmarquent de faon particulirement dfavorable.

Graphique 8 Evolution entre dcembre 2012 et octobre 2013 des taux de non qualit moyens pour lensemble des services faisant appel aux flux descendants, pour chaque oprateur, pour les dbits suprieurs 2 000 kb/s et primtre constant

Source : UFC-Que Choisir, novembre 2013.

Etude 3G

20

Le graphique 8 apporte une vision gnrale de la dgradation de la qualit de la 3G. Bien que la situation samliore sur litinrance (pour rester malgr tout un haut niveau), pour les rseaux propres de chaque oprateur on constate cette dgradation dans trois cas sur quatre, alors quon ne fixe lattention que sur les tests de services raliss dans les meilleures conditions de dbits. La hausse est de 1,3 point pour SFR. Elle est plus marque pour Orange puisquelle atteint 3 points. Mais comme lors de notre prcdente tude, la palme de la non qualit doit tre dcerne, et de trs loin, Free.

Etude 3G

21

III.

Un enseignement proccupant : la dgradation de laccs aux services de la 3G via le rseau propre de Free Mobile

Lvolution des donnes que nous prsentions en janvier et celle que nous prsentons aujourdhui font apparaitre une volution des taux de non qualit sur le rseau propre de Free particulirement marque. Par exemple, la dgradation de la navigation sur le rseau propre de Free se mesure laune de la comparaison de nos deux tudes. Alors quen moyenne les taux de non qualit pour lensemble des services de streaming vido, avec des dbits suprieurs 2000 kb/s, tait de 18 %, ils atteignent dsormais 28,4 %, soit un accroissement de 57,8 % !

Graphique 9 Evolution des taux de non qualit sur le rseau propre de Free entre dcembre 2012 et octobre 2013, pour les dbits suprieurs 2 000 kb/s et primtre constant

Source : UFC Que-Choisir, novembre 2013

Etude 3G

22

Le graphique 9 met particulirement en vidence la nouvelle problmatique souleve par la prsente tude de lUFC-Que Choisir : la trs forte dgradation de la qualit du rseau propre de Free Mobile. Mis part pour le service Free Mobile, les taux de non qualit sont systmatiquement suprieurs aujourdhui ceux que nous prsentions en janvier 2013. Aujourdhui, les taux de non qualit, lorsque lon ne sintresse quaux tests seffectuant dans les meilleures conditions de dbits, atteignent 36,3 % contre 19,8 % en dcembre 2012, soit une hausse de 83,3 % (16,5 points) !

Graphique 10 Evolution des diffrents indicateurs de non qualit pour lensemble des services de streaming sur le rseau propre de Free entre dcembre 2012 et octobre 2013, pour les dbits suprieurs 2 000 kb/s et primtre constant

Source : UFC-Que Choisir, novembre 2013

Lvolution de la ventilation des diffrents indicateurs est particulirement clairante. Laugmentation des taux de non qualit nest pas due celle de lindicateur NOK DUREE, qui reste un indicateur de non qualit relative montrant que le temps de lecture du streaming est infrieur sur le rseau de Free au temps de lecture moyen du streaming pour lensemble des oprateurs de rseau (Bouygues Telecom, Free, Orange et SFR), mais lvolution particulirement significative des indicateurs NOK APPLI et NOK TIME OUT, qui passent de 5,5 % 25 % ! Concrtement ; dans un des cas il est tout simplement impossible de lire ne serait-ce quune seconde du streaming !

Etude 3G

23

Graphique 11 Evolution des diffrents indicateurs de non qualit pour le tlchargement sur les stores sur le rseau propre de Free entre dcembre 2012 et octobre 2013, pour les dbits suprieurs 2 000 kb/s et primtre constant

Source : UFC-Que Choisir, novembre 2013

La dgradation concerne galement le tlchargement sur les stores, o lon constate entre nos deux enqutes une explosion des taux de non qualit impacte par laccroissement fulgurant de lindicateur NOK TIME OUT, cest--dire que le tlchargement de lapplication nest pas complt au bout de 2 minutes.

Il est particulirement instructif de noter que cette dgradation a lieu dans un environnement caractris par le dveloppement de la couverture de la population par le rseau propre de Free6. Justement, cette concordance entre le dploiement du rseau propre de Free et la hausse spectaculaire des taux de non qualit sur ce rseau propre interpelle. Derrire cette concordance, une corrlation est susceptible de poindre : le dploiement du rseau de Free privilgie-t-il ltendue de la couverture son paisseur ? La possibilit laisse Free Mobile depuis le dbut de lanne dutiliser des frquences 900 MHz dans les zones denses (cest le cas pour Paris, Lille et Toulouse) ne semble pas tre trangre au constat dune dgradation de la qualit de son rseau.

Lors de la prsentation de ses rsultats le 2 septembre 2013, le groupe iliad a affirm que son rseau propre couvrait dsormais plus de 50 % de la population.

Etude 3G

24

La caractristique de cette frquence est dmettre sur une distance plus tendue que la frquence des 2,1 GHz, galement utilise par Free pour la 3G. Toutes choses gales par ailleurs, elle devra donc accueillir plus dutilisateurs des services 3G : le phnomne de saturation sera ainsi davantage constat. Ds lors, se pose la question du dimensionnement du rseau propre de Free. Est-il assez dvelopp pour accueillir les abonns de Free dans de bonnes conditions ? La dgradation des conditions daccs au rseau propre de Free que nous mettons en vidence semble apporter une rponse. En consquence, il est ainsi indispensable de contrler plus largement, et ds aujourdhui, les conditions dans lesquelles lextension du rseau propre de Free a lieu. En effet le phnomne que nous voquons risque de samplifier : dici janvier 2015, Free devra couvrir 75 % de la population sur son rseau propre.

Plus largement, cest le maintien de rseaux 3G de qualit qui interroge, particulirement dans un environnement caractris par lmergence et le dploiement des rseaux 4G.

Etude 3G

25

IV.

De la 3G la 4G : vers une transhumance force des consommateurs ?

1. Dgrader la 3G pour pousser la 4G ? Dans le cadre dun colloque organise par lARCEP, qui sest tenu le 17 octobre 2013, laxe qui a fait lobjet des changes les plus pousss, conformment au thme mme dudit colloque7, a t celui de la cration de valeur pour les oprateurs, aussi bien sur les rseaux fixes que sur les rseaux mobiles. Ce colloque a t loccasion pour lUFC-Que Choisir, par lintermdiaire de son Prsident, de faire entendre sa voix sur les craintes que la volont farouche des oprateurs daccroitre leurs revenus moyens par utilisateur fait natre sur le devenir de la technologie 3G. Il existe deux faons dinciter les consommateurs souscrire une offre 4G : une bonne, et une mauvaise. La bonne faon consiste vanter les mrites de la 4G pour elle-mme, cest--dire dvoquer les mrites propres cette technologie. A titre dexemple, on voquera la possibilit doffrir de meilleures conditions de lecture de vidos en streaming en 4G quen 3G, grce des dbits descendants qui en thorie sont plus importants sur les rseaux permettant laccs au trs haut dbit mobile. Les oprateurs peuvent ainsi aujourdhui, et probablement plus largement demain lorsque de nouveaux services gourmands en bande passante mergeront, vanter les bienfaits que seule la 4G peut procurer aux consommateurs. La mauvaise faon consiste vouloir favoriser la transhumance des consommateurs des offres 3G vers les offres 4G en accroissant artificiellement le gain qualitatif entre les deux technologies. Par artificiellement, nous entendons une dgradation de la qualit de la 3G qui engendrerait un avantage comparatif pour la 4G dune ampleur qui naurait pas t atteinte sans cette dgradation. Or le peu dapptence actuelle des Franais pour la 4G 8 peut laisser penser aux oprateurs que pour inciter les consommateurs se ruer vers des offres 4G, il ne serait pas inopportun de justement dgrader cette 3G.

Quelles perspectives de cration et de rpartition de la valeur pour les tlcoms ? .

Selon un sondage ralis en septembre 2013 par Ipsos pour la socit Prixtel, seulement 16,7 % des Franais se disent intresss par une offre 4G.

Etude 3G

26

Cette dgradation peut se faire sur deux aspects, distincts mais complmentaires : une dgradation des offres 3G, une dgradation des infrastructures.

2. La baisse de la qualit des offres 3G : lillustration des offres 3G de Bouygues Telecom LUFC-Que Choisir a regard lvolution des offres 3G proposes par les oprateurs tlphoniques sur leurs sites internet. Elle a constat que Bouygues Telecom se livre une dgradation technologique de ses offres 3G. La dgradation sest faite en deux temps. Tout dabord, avec larrive de la nouvelle grille des forfaits de Bouygues Telecom en avril. Par rapport aux offres prcdentes, il ntait plus possible davoir un forfait 3G avec 3 gigas de datas, cette quantit tant dsormais uniquement rserve la 4G. En avril, le forfait le plus cher hors 4G ne proposait ainsi quun accs au web avec 500 Mo de fair use. Il tait dj, par ailleurs, trs surprenant quun forfait moins cher propose 1Go de data. Usuellement, lorsque la gamme de prix augmente, les temps dappels proposs et la quantit de datas utilisable croissent simultanment. Premire curiosit.
Illustration 1 Forfaits mobiles de Bouygues Telecom en avril 2013

Source :http://www.edcom.fr/23764-bouygues-telecom-les-nouveaux-forfaits-mobiles-sontdisponibles.html

Etude 3G

27

Illustration 2 Nouvelles offres 3G de Bouygues Telecom

Source :http://www.laboutique.bouyguestelecom.fr/offres-mobiles/forfaits-3g-sans-engagement.html (illustration releve sur le site Bouygues Telecom le 28 octobre 2013).

Un bref regard sur les nouvelles offres hors 4G de Bouygues Telecom souligne une seconde curiosit : la H+ 42 Mbits/s qui jusqualors apparaissait dans le forfait premium , disparait des offres de la vitrine de Bouygues Telecom et est remplace (sans baisse de prix qui plus est), par de la 3G+ 7,2 Mbit/s seulement. Ds lors, deux questions se posent :

Pourquoi cette dgradation de la capacit daccs en volume aux services du web via la 3G avant que le dbit (trs) rduit vienne faire son office ?

Etude 3G

28

Comment justifier que la H+, dont la structure de rseau est en partie dploye et, dailleurs, toujours utilise et propose (jusqu quand ?) via les offres B&You, ne soit plus au catalogue de Bouygues Telecom ?

A ces deux interrogations, une rponse commune vient lesprit : le saut qualitatif entre une offre H+ 42 Mbit/s avec 3 Go de fair use et une quelconque offre 4G est bien moindre quentre une offre 3G+ 7,2 Mbits/s avec 500 Mo et une quelconque offre 4G. LUFC-Que Choisir na pas remarqu une dgradation technologique des offres 3G chez les deux autres oprateurs proposant la 4G leurs catalogues, savoir Orange et SFR, mais craint cependant la gnralisation de ce procd qui contraindrait les consommateurs souhaitant accder aux services du web de souscrire donreux forfaits 4G9 qui viendraient grever leur pouvoir dachat.

3. Quid des investissements dans la 3G ? Nous voquions la H+, la dernire technologie de la 3G. Cest une chose que de constater quun oprateur ne la propose plus, cen est une autre que de sinterroger sur le devenir des investissements sur les rseaux 3G, que ce soit sur la maintenance, o sur lextension des territoires qui sont aujourdhui privs de la meilleure technologie 3G. La remarque que nous faisons aujourdhui sur la dgradation du rseau de Free Mobile peut trs bien tre le signe avant-coureur de la dgradation future de lensemble du rseau 3G. Les questions qui mergent avec la commercialisation de la 4G dpassent, nous le voyons, le seul cadre de cette technologie de dernire gnration. Comment les oprateurs comptent-ils ventiler leurs investissement dans les rseaux mobiles entre les rseaux 3G et les rseaux 4G ? Autrement dit, les investissements dans les infrastructures permettant aux consommateurs laccs la H+, ou dans le pire des cas un accs la 3G dans des conditions convenables, sont-ils vous disparaitre au profit de ceux irriguant le rseau 4G ?

Dans cette phase transitoire o les forfaits 4G sont marqus du sceau des offres promotionnelles, la visibilit du paysage tarifaire de la 4G reste tre amliore. Elle sera particulirement accrue au dbut de lanne 2014.

Etude 3G

29

Ces lments et questionnements que nous mettons en avant confortent la pertinence de lexercice consistant vrifier la qualit des services 3G qui est susceptible de se dgrader, quel que soit loprateur auquel on sintresse.

Etude 3G

30

V.

Enseignements de lenqute 3G et demande de lUFCQue Choisir

Si lon assiste une dgradation gnrale de la qualit de la 3G, la singularisation de Free sagissant de limportance de ces taux de non qualit demeure encore aujourdhui. Les consommateurs de Free Mobile ont ainsi un accs particulirement dgrad aux services 3G, et les utilisateurs qui passent par litinrance ont la dsagrable opportunit davoir un accs encore plus dgrad auxdits services. Nous tirions en janvier 2013 des conclusions judiciaires de pareils enseignements. Aujourdhui, lUFC-Que Choisir souhaite attendre les rsultats de lenqute en cours, plutt que de lancer une nouvelle procdure. Notre nouvelle enqute met par ailleurs en lumire deux phnomnes particulirement inquitants : la dgradation depuis les mesures effectues fin 2012 de la qualit du rseau propre de Free, dune part, et la dgradation des offres 3G de Bouygues. Ce double constat laisse craindre une dgradation gnralise de la 3G afin de crer un avantage artificiel au profit des onreux forfaits 4G.

Au vu de ces lments, lUFC-Que Choisir, soucieuse de garantir aux consommateurs un Internet mobile de qualit : - saisit lARCEP pour lui demander de fixer ds prsent des exigences sur une qualit de service minimale pour la 3G, et de lier ces exigences la capacit des oprateurs exploiter les frquences 4G. Ainsi, ceux-ci ne pourront faire bnficier la seule technologie 4G dinvestissements au dtriment de la poursuite de la construction dun rseau 3G de qualit, que les consommateurs appellent de leurs vux. - lance aujourdhui lObservatoire de la couverture mobile du territoire avec lappui des consommateurs quelle appelle la mobilisation en tlchargeant gratuitement lapplication Info Rseau sur le Play Store. Lassociation pourra ainsi disposer, en temps rel, dinformations prcieuses sur lvolution de la qualit des rseaux mobiles, quelles que soient leurs technologies.

Etude 3G