Interview QoSi (4Gmark) : les smartphones Samsung nuisent-ils à la qualité de service de Free ?

12

Depuis quelques jours, une polémique enfle autour des mesures de qualité de service publiées par l’Arcep : le comportement des téléphones Samsung sur le réseau Free serait à l’origine des mauvais résultats de l’opérateur. Ces critiques sont-elles fondées ?

L’utilisation du Samsung Galaxy S7 dans le protocole de test défini par l’Arcep a été vivement critiquée ces derniers jours. En effet, les smartphones Samsung auraient un comportement « conservatif », les poussant à rester connectés plus longtemps sur le réseau d’itinérance (Orange) lorsque celui-ci est disponible. En utilisant l’itinérance, essentiellement bridée et dégradée, les mesures seraient donc défavorables à Free. Le sujet a fait l’objet de tweets, de vidéos et d’articles plus ou moins virulents…

Free n’a émis « aucune objection » sur le choix d’un téléphone Samsung

Pour en avoir le cœur net, nous avons posé nos questions à Thierry Moncorger, fondateur et directeur marketing de QoSi. En plus d’éditer le logiciel de mesure 4Gmark, c’est cette société qui réalise les mesures de qualité sur le terrain pour le compte de l’Arcep.

Freenews : en quelques mots, quels sont les reproches adressés aux mesures ?

QoSi : En gros, une majorité de smartphones dont les Samsung et les iPhones, qui représentent une part incroyablement large du parc français, ont un comportement conservatif sur l’itinérance Orange chez Free. Ils restent en itinérance un certain temps, alors que parfois l’utilisateur pourrait avoir du réseau propre Free.

Pourquoi ce comportement ?

C’est probablement un réglage par défaut du roaming (l’itinérance). À la base le roaming c’est le cas de figure à l’étranger où vous êtes en itinérance sur un réseau partenaire de votre opérateur. Vous accrochez par exemple un opérateur à la sortie de l’avion, il n’y a pas de raison de changer cela toutes les minutes entre les différents opérateurs locaux du pays.

En France, Free, en attendant de couvrir tout le territoire avec son réseau propre, utilise le réseau d’Orange en dehors de sa zone de couverture, comme vous le feriez en passant la frontière. Donc une session initiée en zone d’itinérance va se poursuivre.

Pourquoi Samsung et Apple ont-ils ce réglage ?

C’est peut-être un réglage par défaut, qui suit une logique conservative pour ne pas pénaliser la batterie avec des recherches de réseau trop nombreuses. Encore une fois, l’utilisation de l’itinérance nationale est une spécificité de Free qui n’a pas encore de couverture totale du territoire. Samsung propose probablement ce réglage logique qui est adapté à l’utilisation originelle du roaming, c’est-à-dire à l’étranger.

Que faire pour améliorer cela ?

Nous dressons un constat. Les solutions sont à la charge de Free. Des twittos ont démontré que des profils sont existants pour un nombre très important d’opérateurs mais pas Free, pourquoi ? Peut-être est-ce possible via les réglages opérateurs émis pour le réseau ? Peut-être que Free a des difficultés avec Samsung et Apple ? Peut-être que Free ne travaille pas le sujet ? Peut-être que ce comportement est voulu ou souhaitable, par exemple pour éviter un basculement itinérance vers réseau propre en cours de sessions ou d’appel ?

Est-ce que cela a une incidence sur la qualité de service chez Free ?

Ce qui est primordial, c’est de prendre la problématique dans le bon sens. À la base, l’itinérance Orange, est officiellement et fortement bridée, pour tous les utilisateurs Free quel que soit leur smartphone. Ainsi, un utilisateur Free en itinérance Orange, a une qualité de service particulièrement dégradée sur l’ensemble de ses services data, y compris sous très bonne couverture (d’itinérance), alors que ce réseau est le numéro 1 depuis 7 ans.

Le sujet en question ne concerne que le délai nécessaire à un smartphone pour rebasculer en réseau propre Free après avoir trafiqué en itinérance Orange. Ce délai étant supposé plus long pour les Samsung et Apple.

Peut-on en conclure que la campagne menée pour l’Arcep est biaisée ?

En aucun cas. Ce comportement de lente remontée en réseau propre est avéré au niveau du grand public et non-spécifique de la campagne ARCEP. Ce comportement touche (a minima) les utilisateurs de smartphones Samsung et Apple qui représentent entre 45% et 70% du parc des terminaux 4G. Ceci n’est ni induit par un choix du prestataire, ni par l’outil (ndlr: 4Gmark), ni par le protocole. On parle de constructeurs retenus qui sont majoritaires en part de marché et ne souffrent d’aucun débat sur leur représentativité des consommateurs.

Qu’aurait-on dit d’un dysfonctionnement sur une campagne avec un terminal exotique utilisant un téléphone non natif (rooté ou jailbreaké) ? Certains proposent cela mais quid de la représentativité chez tous les opérateurs ?

Comment s’est fait le choix du terminal ?

Tous les opérateurs, Free y compris, font des recommandations de terminaux normalement basées sur leur représentativité dans leurs parcs d’abonnés. Avant la campagne, 4 terminaux ont été testés (iPhone 6S, iPhone 7, Samsung S7, Huawei P9), dont 2 sélectionnés au final. Free n’a émis aucune objection sur le choix du Samsung S7 et de l’iPhone 7 pour cette campagne. Free a insisté pour que l’achat soit bien effectué chez Samsung pour garantir la dernière version du firmware, permettant l’utilisation de la bande 700MHz.

Ce choix expliquerait donc les mauvais résultats de Free ?

Non. Pour commencer les mauvais résultats sont le fait que l’itinérance est officiellement bridée mais cela n’explique pas tout. La campagne ARCEP c’est de très nombreux indicateurs : autour d’une centaine sur la data et la campagne voix/sms. Le fait que l’itinérance soit limitée à 1Mbps n’explique pas qu’une petite page web ne se charge pas en moins 10 secondes. Pire encore, l’itinérance ne limite en rien la voix et les sms, et le réseau d’itinérance est celui d’Orange… 1er au classement.

L’effet est visible sur les axes où les mesures en continus initiées en itinérance tardent à accrocher (ou ne raccrochent pas) le réseau propre malgré sa disponibilité.

Mais les lieux réalisés en mode piéton (4 000 lieux voix/data en indoor + outdoor) ont le temps nécessaire pour un retour en réseau propre, si disponible, au vu du temps passé pour le lieu (environ 30 minutes) et le déplacement entre deux lieux (environ 20 minutes).

Mais, il y a bien un problème ?

Très certainement, un problème de qualité de service chez Free. En aucun cas, dans la campagne ARCEP. Le fait que ce problème soit existant sur des smartphones des deux premiers constructeurs mondiaux est représentatif des utilisateurs Français.

La campagne ARCEP présente donc un résultat démontrable et démontré. Son objectif est de mesurer la qualité de service pour les abonnés de Free (et pas comme entendu parfois la couverture ou le réseau propre). Même si être au pied du podium est regrettable, c’est une chance pour l’opérateur d’avoir un diagnostic et une vraie piste d’amélioration.

Avec le plus faible taux de couverture 4G (45% du territoire / 80% de la pop) et une partie encore non négligeable de la 2G/3G en itinérance bridée, Free est donc pour des raisons techniques évidentes logiquement en-dessous. C’est l’inverse qui serait questionnable.

Le sujet fait parler, avec de nombreux tweets et articles à votre encontre…

On constate de nombreux amalgames maladroits entre 4GMARK PRO l’outil, sa version des stores, la campagne Arcep, le prestataire…

Le protocole est largement disponible et est très exhaustif. Il n’est pas difficile de trouver des informations, de consulter nos nombreux éclaircissements sur Twitter ou citer la réponse de Julie Moncorger dans une interview sur Zdnet.fr (ndlr : à lire ici).

On a un peu le sentiment que les utilisateurs critiques se trompent de conclusion. Plutôt que de voir qu’il y a un problème sur Free pour les possesseurs de Samsung/iPhone, l’idée défendue serait qu’une campagne avec un téléphone moins représentatif ou sur une Rom modifiée présenterait de meilleurs résultats. « Meilleurs » pour Free, mais pas de meilleure pertinence…

Pourquoi ces débats sont toujours virulents ?

C’est parfaitement logique et représentatif de ce que l’on observe au national chez l’opérateur Free. Des utilisateurs en zone dense et réseau propre sont satisfaits des bonnes performances et d’une offre intéressante. Des utilisateurs en zone d’itinérance (ou en marge) subissent des désagréments et crient parfois au scandale. Les deux ne se comprennent pas mais leurs perceptions sont sincères.

Il n’est pas anormal pour un utilisateur largement satisfait de ne pas comprendre cette conclusion nationale de l’ARCEP sur la qualité de service. La campagne couvre toutes les strates de populations et est une présentation pertinente de la performance au global en France. D’ailleurs, 4Gmark — avec l’énorme volume de crowdsourcing, ses partenariats avec les régions et départements, cumulés à ses propres drive-tests — propose aussi un échantillon très représentatif des Français. Le technophile/urbain habituel utilisateur des outils de speedtesting, bien moins.

Une conclusion ?

Aujourd’hui notre conclusion, et merci à Freenews de nous proposer d’aborder le sujet avec objectivité, c’est que Free a fort à gagner à traiter le sujet. Il n’en va pas uniquement de son classement à l’ARCEP, qui, on l’a déjà présenté dépend avant tout de sa couverture propre 3G et 4G. Il en va de sa politique de Qualité de service pour ses clients. Nous mesurons et dressons pour l’ARCEP et aussi avec nos baromètres un constat indiscutable. Free a la main sur la solution technique à apporter.

Partager

A propos de l'auteur

[Responsable de la rédaction] Sévit également sur Café Gaming et Point de vue social.

12 commentaires

  1. Mais c'est quoi cet homme censé être spécialiste du sujet et qui ne s'exprime qu'en conjectures et hypothèses ?

    C'est le festival du "probablement" "il est possible que" et autres "peut-être" !

    A part du dédouanement gratuit je n'ai rien vu dans cette interview, c'est assez lamentable.

    Si c'est pour faire de l'argumentaire plus bas niveau que ceux des tweets, on peut au minimum se passer de les critiquer...

  2. Free Mobile aurait dû être un peu + prudent, toutefois on peut faire des reproches à l'ARCEP et QoSI.

    Peut-on parler de qualité de services, sans préciser le terminal,  si celle-ci varie fortement d'un téléphone à l'autre? Pourquoi ne pas préciser que le ressenti va varier d'un terminal à l'autre.

    Dans tous les cas, cela va leur donner du travail supplémentaire... comme à ceux qui font du test de téléphones. Ce n'est pas très utile d'acheter un téléphone à 600-1000€ pour ne pas accrocher la 4G lorsqu'elle est présente.
    Pour les abonnés, il va falloir soit changer de crèmerie, soit changer de téléphone ou changer de ROM (le logiciel du téléphone), cela fonctionne mieux avec celle de Lineage qui a pris la suite de  Cyanogen.

  3. Obilolo a écrit :

    Mais c'est quoi cet homme censé être spécialiste du sujet et qui ne s'exprime qu'en conjectures et hypothèses ?

    C'est le festival du "probablement" "il est possible que" et autres "peut-être" !

    A part du dédouanement gratuit je n'ai rien vu dans cette interview, c'est assez lamentable.

    Si c'est pour faire de l'argumentaire plus bas niveau que ceux des tweets, on peut au minimum se passer de les critiquer...


    Si tu veux des devins et des gens qui ont toutes les réponses, mieux que Free, Samsung et l'Arcep réunis, tu peux aller lire les forums, c'est rempli de spécialistes autoproclamés.

  4. Merci et bravo Freenews pour cette itw, un peu de hauteur de vue et de remise en perspective ça fait du bien, surtout par rapport à ce qu'on peut lire ailleurs ...

  5. Bonjour,
    Moncorger fait réapparaitre le serpent de mer des mauvaises interconnexions entre free et orange pour l'itinérance. Si cet argument  aurait  pu avoir une réalité technique pendant les premières années, il est inacceptable actuellement vu la proportion réseau propre /itinérance.
    Les débits ont été réduits mais je vois mal Free changer le matériel d'interconnexion au fur et à mesure de la baisse du débit.
    Donc les pages qui se chargent super lentement, la faute à Free ou à Orange  qui freinerait le trafic en direction des abonnés Free mobile  ?
    Au passage, l'affirmation, Orange a le meilleur réseau etc ne veut rien dire. En nombre d'antennes, en débits en heures de pointes ? Peut il encore encaisser la propre conso de ses clients ?
    Donc les Iphones et les Samsung c'est de la  daube sur le réseau Free mobile qui fonctionne très bien en propre. Donc pas de problème de qualité de service sur le réseau Free mobile  à l'inverse de ce que dit Moncorger. Mais un problème avec l'itinérance que l'on utilise de moins en moins.
    Moncorger renvoie la balle dans le camp de free quant à trouver une solution pour ces téléphones. Effectivement, Free mobile est là , inexcusable puisque des solutions semblent exister.

  6. chermositto a écrit :

    Moncorger fait réapparaitre le serpent de mer des mauvaises interconnexions entre free et orange pour l'itinérance. Si cet argument  aurait  pu avoir une réalité technique pendant les premières années, il est inacceptable actuellement vu la proportion réseau propre /itinérance.
    Les débits ont été réduits mais je vois mal Free changer le matériel d'interconnexion au fur et à mesure de la baisse du débit.
    Donc les pages qui se chargent super lentement, la faute à Free ou à Orange  qui freinerait le trafic en direction des abonnés Free mobile  ?

    Et pourtant : il est évident que l'itinérance, actuellement limitée à 1 Mbps / 448 kbps commercialement, n'atteint même pas ces chiffres (ces débits seraient déjà suffisants pour passer la plupart des tests QoS ARCEP avec succès, si seulement ils étaient réellement atteints).

    Interco ou limitation contractuelle, dans les deux cas : la promesse des débits en iti n'est pas tenue.

  7. Est-ce que le ressenti client, puisque c'est cela qui est censé, être mesuré, ne devrait il pas l'étre avec au moins un téléphone représentant celui de  l'abonné médian pour sa capacité de connexion ?

    Concernant le débit en itinérance, s'il devrait pouvoir monter à 1Mbits, il y a bien évidemment d'autres goulots d'étranglement comme le débit max de l'antenne, réparti entre les clients Orange, les MVNO, l'itinérance des étrangers, et ceux de Free Mobile.  Y-a-t-il une limite de bande passante globale par antenne? globale sur le réseau pour Free Mobile?

  8. Free est d'un autre côté favorisé par le choix du Samsung: c'est l'un des rares téléphones qui permet d'utiliser la bande des 700MHz. Très peu d'autres smartphones permettent d'utiliser la bande des 700MHz. Cette bande est un grand atout pour Free qui aurait eu des résultats encore plus désastreux. Dans l'ensemble, on peut dire que tout s'équilibre et Free est vraiment plus mauvais.

  9. La bande 28 est utilisée en RP, là où il y a la + grande densité d'antennes. Un Alcatel aurait nettement amélioré les résultats ailleurs pour peu de différences en RP

  10. Réagir sur le forum