bor pc02 (14) 18 - berec · when we started cedexis in 2009 we were convinced about it and this is...
TRANSCRIPT
-
BoR PC02 (14) 18
From: CEDEXIS Sent: 28 April 2014 23:54To: PMSubject: Cedexis - Report on Monitoring quality of Internet access services in the context of net neutrality
We read with much interest the draft BEREC report launched in March and we are glad to see that Cedexis and the BEREC share, in many ways, the same thought about the importance of monitoring quality of Internet and how to do it.
The report explains very well the existing measurement methods that already exists and their pros and cons. Monitoring quality of Internet access services has now become a key to improve NRA’s capacity to perform regulatory assessments of potential degradation of service. Moreover, as it is clearly explained in the report, quality monitoring needs specific requirements such as accuracy, comparability, trustworthiness, openness and future-proofness. It is needed to develop a neutral entity which would be working with the Internet service providers to monitor their performance while keep being truly transparent and reliable.
When we started Cedexis in 2009 we were convinced about it and this is how we built our monitoring tool : Cedexis Radar. Radar is using a unique software-based monitoring system with a crowd-sourced approach to monitor 100s of providers, internet access services, datacentres and CDN platforms everywhere in the world. Our real-time monitoring tool uses real-users probes and is already gathering 4 billions probes a day. It allows us to offer meaningful and reliable data to monitor the global quality of Internet access services. Furthermore, our data are publicly available on our portal (portal.cedexis.com). Granularities and statistical distributions guarantees a full interpretation of results at anytime, anywhere, from any providers.
As an example of what we can provide, we are already working with “le GESTE” which gathers some of the biggest website in France such as lemonde.fr,lefigaro.fr etc. Working with them, we are editing a monthly report which aims to show ISP and websites performances experienced by real users from Europe.
You will find enclosed a document which details the full methodology of measurement of Cedexis Radar and an example of what we are doing with "le GESTE".
Please feel free to contact us if you are interested in knowing more about our products.
Best regards,
--
How is the Cloud performing in the markets you are interested in?Find out on cedexis.com
mailto:/O=BEREC OFFICE/OU=EXCHANGE ADMINISTRATIVE GROUP (FYDIBOHF23SPDLT)/CN=RECIPIENTS/CN=77BDA40EE616431998F9A0A856A7C9D6-PMmailto:[email protected]://portal.cedexis.com/http://lemonde.fr/http://lefigaro.fr/http://www.cedexis.com/reports/ -
Cedexis Service Description
Updated April 2014
-
2
Introduction to Cedexis
Cedexis was started in 2009 to provide tools that would improve website, mobile app and web-‐distribution experiences to end-‐users by efficiently enabling multi-‐Datacentre, Cloud and Content Delivery Networks (CDNs) strategies. Multiple provider strategies enables and demonstrates improved availability, optimized performance and cost benefits associated with vendor diversity.
Cedexis has combined real-‐user performance monitoring (or RUM) and data-‐driven, HTTP/DNS-‐based global load balancing, into a unified service. The Cedexis platform is unique in the sense that it employs 100s of millions of end-‐user based probes to collect real-‐time information (Cedexis Radar) and couples this with a programmable DNS/HTTP decision engine (Cedexis Openmix) that can make real-‐time use of this and other data sets.
The Openmix service allows highly flexible load-‐balancing decisions to be made dynamically, based on a wide variety of real-‐time data-‐feeds, including “public” Radar data points as well “private” data from a customer’s own architecture. Configuration scripts can support such obvious methodologies as sending the user to the fastest provider for a specific geography, or as subtle and sophisticated as factoring in any other metric a customer can collect or think of (Time of day, cost, contractual commitments, weighting servers, capacity, BTU power usage, Electricity cost etc.)
Data Centers Clouds CDNs
Automated control, costs &performance optimization across multiple platforms
Best possible web or mobile application end user experience
Visibility into real-‐time performance data through global
real user monitoring
Automated optimization of web and mobile apps through data
driven global traffic management
-
3
Cedexis Radar
Service Introduction
Cedexis Radar provides objective and standardized visibility into the real user performance of your actual visitors via their web browsers or web/mobile application clients, and associates that experience to the service performance of the cloud, data center and CDN platforms used to deliver that experience globally. Radar provides the performance data IT professionals use to assess, select and manage cloud, data center and CDN platforms through a common, objective, methodology.
Using a unique, community-‐based approach, Cedexis brings unrivalled transparency to the global performance and availability of the world's largest public infrastructures, from Cloud Computing and Storage to Content and Application Delivery Networks. From Zambia to Afghanistan, the customer will quickly find the best—and worst—performing platforms for each and every one of their visitors.
Cedexis Radar is the Internet's first cloud monitoring cooperative: Becoming a Community Member means unlimited access to our historical reporting database, including detailed segmentation by provider, country and network. Whether a customer is looking for 12 month trends, or trying to understand what happened yesterday, community-‐based measurements can help answer their questions.
Being a Radar community member also provides a rich set of tools for capturing the service levels provided by both internal and external content delivery infrastructures. Unique to Radar is the ability to utilize your website visitors to measure the experience they would receive from platforms not currently used by an enterprise, reducing risk is assessing and adopting such solutions. The same methodology enables objective evaluations of cloud platforms throughout their lifecycle of use, including on going evaluation of performance relative to SLAs.
Cedexis Radar Value For Cloud & CDN Management
Cloud & CDN Lifecycle Timing
Radar Value Radar Services
Baseline Existing Real End User Performance
A single objective solution for measuring Page Load Times by geography, networks, browser types, device types across all data center, cloud and CDNs used
Radar PLT Reports Radar “my user” Reports
Comparison & Selection Of Platforms
A common methodology for using millions of real end users, from around the globe, to measure data center, cloud and CDN availability, latency and throughput performance, allowing comparisons of platforms you do and don’t yet use
Radar Platform Reports Radar Community Alerts Radar Private Platform Measurement
SLA Performance Monitoring
In depth data and automated notifications of cloud and CDN availability and performance relative to origins or other providers, as seen by millions of end users
Radar Platform Reports Radar Platform Alerts
-
4
By adding a simple JavaScript tag to your web page or mobile applications, the customer can turn each of their visitors into a virtual ‘test agent’. Cedexis Radar triggers device-‐based measurements by downloading reference objects and comparing internal & external infrastructure, datacentres, delivery networks and cloud platforms as seen by the actual end-‐users of sites or web applications.
Radar: Key Benefits
Cedexis Radar addresses multiple web delivery challenges through its approach to monitoring and data gathering. Key benefits of participating in the Radar community are:
• Massive testing environment, with end-‐users in every network in every location (32,000+ recognized networks so far).
• Gain transparency into the performance of a current provider, as well as the alternative platforms, clouds, and delivery mechanisms.
• Global (190+ countries) view un-‐restricted by agent deployments, bandwidth or costs.
• All users are not the same: Understand
different machines, connections, & devices.
• Receive real time, or summarized Radar reports to fit your needs.
• Focus on the metrics that make a real difference to a web and mobile users (Performance, Availability & QoS).
• Received automated alerts on platform provider performance relative to SLA definitions, and to their peers.
• Increase Search Engine Rankings:
Better website performance means increased traffic and better organic search rankings.
• Real, unbiased, data not gamed or influenced -‐ Radar data is almost impossible to forge with real users doing the testing (over 1.4 Billion measurements a day).
Radar Tag: The Measurements Methodology
Cedexis Radar uses a “Real-‐User” Measurement methodology, or RUM. Content owners place a JavaScript Tag (or piece of code) into their web applications, mobile apps or webpages. By placing this tag the end-‐user will then perform tests in the back ground after an application or webpage has loaded, allowing for measurements of your existing infrastructure and providers under consideration.
The tests come in three forms:
• Community Benchmarking • Private Benchmarking • Page Load Analytics
Community Benchmarking of CDN, Cloud and Data Centers
Community measurements are sourced through a crowd sourcing model providing the customer a view of a vendor’s performance and availability at a geographic and logical level globally. The community measurements allow comparisons to be made between a vendor’s quality of experience as seen from the end-‐user and allows a “what-‐if” analysis in evaluating vendors and suppliers for content and application distribution. By using a crowd sourcing model, Cedexis customers benefit by gaining a greater level of granularity and quality of data in evaluating and monitoring vendor performance, even in locations where a customer may not have a high density of users, or indeed users at all.
The measurements themselves use a standard set of objects located across the different Cloud and CDN vendors that end-‐users will download when they execute the Radar JavaScript client, or mobile SDK logic, located on a content owner’s site or application. The following metrics are then reported back to Cedexis and presented within the Portal or API reporting interfaces:
-
5
• Availability—whether the object loads or not.
• Connect Time—how long it takes for the browser to establish a connection with the server, inclusive of the DNS resolve time, the establishment of the initial TCP handshake and HTTP session to the provider.
• Response Time—how long it takes for the server to respond to a subsequent request, once all of the noise of establishing a connection is completed. This is a relatively close approximation of TCP round-‐trip time (RTT) from the browser to the provider.
• Throughput—this is the data rate of the connection, in kilobits per second, as measured from the retrieval of a 100 KByte object.
Private Benchmarking
As part of the Radar Tag deployment, Cedexis provides the ability for the customer to create their own “benchmark” tests. This could be for Data Centres or their own CDN and Cloud contracts. As with the community benchmark measurements, the same metrics are supplied – Availability, Connect Time, Response Time and Throughput allowing the customer to effectively evaluate an existing content delivery strategy.
This private information is only available to the customer.
Example uses include:
• Their own datacenter architecture/s • Using their own test-‐object or page • Using their own contract with a vendor • Audio/Video end-‐user quality of Experience.
Private Measurements: Streaming-‐ BETA
As part of Private Measurements, Cedexis provides a functionality to not only test standard HTTP based applications, but also Audio and Video streaming applications delivered from a customer’s Cloud, CDN or Data-‐Centre infrastructure.
Cedexis currently supplies the following Radar Clients with the following measurement capabilities:
Adobe Flash Stream Type/Measurement Progressive Download RTMP Streaming Start-‐up Delay Yes Yes Bandwidth Yes Yes Playback Bitrate Yes Yes Stream Not Found Yes Yes Connection Error Yes Yes
Microsoft Silverlight Stream Type/Measurement Smooth Streaming HTTP Streaming Progressive Download Start-‐up Delay Yes Yes Yes Buffer Events per Minute Yes Yes Yes Playback Bitrate Yes No No Dropped Frames per Second Yes Yes Yes
Mobile Device/Measurement Android iPhone Start-‐up Delay Yes Yes Buffer Events per Minute Yes Yes Error Yes Yes
-
6
Radar Page Load Measurements: About YOUR pages.
Within Radar Cedexis provides the ability for the customer to see detailed information on the how the page/s that the tag is implemented on are being downloaded. Cedexis provides information that allows you to see the performance of that actual end-‐users are experiencing when interacting with your webpages. The data is provided through the Nav Timing API provided for through many of the newer version browsers.
Below is a diagram and description of each of the metrics Cedexis provides:
Measurement Description Nav Timing Calculation Total Page Load The full download of the webpage and its corresponding
components. LoadEventEnd – NavigationStart
Redirect The initial time used in redirecting to the page fetchStart – NavigationStart DNS Lookup The time required for DNS resolution to complete of the
base page URI. domainLookupEnd – domainLookupStart
Connect The time to make a TCP Connection inclusive of SSL if its used
ConnectEnd-‐ConnectStart
Send The HTTP Request and Response time of the initial base page, excluding any message body. A good indicator of backend server latency
ResponseStart -‐ RequestStart
Receive The time taken to receive the Body HTML of the base document.
ResponseEnd -‐ ResponseStart
DOM The Time to download all images, objects that are called from base HTML and load them into the browser.
DomComplete -‐ DomLoading
Load Event The time for executing any Javascript and rendering the page within the browser.
LoadEventEnd-‐LoadEventStart
Radar: Reporting
Radar members are provided access to a rich data set presented through intuitive interactive charts. The data set collected incorporates both the full public data set of billions of measurements as a context for private data collected (if subscribed to) from a customer’s Radar tag or mobile SDK deployment. Page Load time information is provided for with the customer’s own tag, providing deep insight into the actual performance experience of your website and mobile application end users. In addition to performance metrics, Radar reports provide insight into many facets of your end user audience, including their volumes, geographies, user agents, OS types and the timing of their use of your website or mobile application.
-
7
Radar: Alerts
Cedexis can provide customers with configurable alerts which may be used to alert against KPI’s and SLA’s of a public clouds, CDN platforms, or private platforms. Alerts can be configured to the Network (ASN), Country or Market level. Alerts are also provided with the context of observed performance metrics of comparable platform alternatives.
Alerts are sent via email to either individual email addresses or distribution lists. Alert thresholds are set using a menu driven interface allowing the end-‐user to set-‐up different alerts for different levels of team member. For example a manager may be only interested in the daily summary of alerts and the NOC may want immediate and the daily summary.
Sample Alert/Notification
As shown in this Radar Alert Notification, the Radar measurements of individual networks are compared to observed measurements of various peers and to a defined threshold. This allows for identification of outlier conditions while also providing a benchmark of the experience of the aggregate Radar community.
-
8
Radar: SLA Monitoring
Radar utilizes a proven and objective methodology for the monitoring of platform provider performance relative to SLAs. The wide range of performance data available through Radar allows enterprises to visualize and record performance, while providing peer-‐context to make for more informed decision making. Performance information is available on demand from the Cedexis portal, or Radar Alerts can analyze the Radar data set against thresholds you define and notify you by email.
Availability – Data center, cloud and CDN providers all provide SLAs around their availability, and Radar is continuously testing this critical metric from 100s of millions of real end user endpoints each day. Availability can be visualized in Radar charts, or availability events can be identified and notifications emailed through Radar alerts.
Latency – CDN SLAs are typically based on comparisons of latency performance between Origin servers and observed CDN performance. Use of Radar allows an enterprise to see the comparative performance from the perspective of real end users from around the globe, not just from a handful of synthetic agents.
Page Load Times – A newly emerging metric of performance validation is the real observed Page Load Times as seen by an enterprise’s real end users. Cedexis believes this is the ultimate measure of service levels, though it is not yet a default metric in provider agreements.
-
9
Radar: APIs
Radar provides APIs for both operations and data retrieval functions.
• Operations API – Add/Edit/Delete Radar accounts and the control mechanisms for running your account through an API
• Radar Data API – The Cedexis Radar data API provides aggregates of the Radar public community and private measurement data. Data is updated continuously, and batched approximately every 60 seconds for retrieval by the API. The data API is provided to allow customers to integrate Radar data into their own reports and dashboards. A single call to the API can provide Radar quartile or mean measurement averages for all countries and up 30 ASNs of interest, for each platform.
More can be found in the Web Services and API’s on the http://developers.cedexis.com
-
10
Notice:
The information in this publication is subject to change without notice.
THIS PUBLICATION IS PROVIDED “AS IS” WITHOUT WARRANTIES OF ANY KIND, EXPRESS OR IMPLIED, INCLUDING ANY WARRANTIES OF MERCHANTABILITY, FITNESS FOR A PARTICULAR PURPOSE OR NONINFRINGEMENT. CEDEXIS, INC . (“CEDEXIS”), SHALL NOT BE LIABLE FOR TECHNICAL OR EDITORIAL ERRORS OR OMISSIONS CONTAINED HEREIN, NOR FOR DIRECT, INCIDENTAL,
CONSEQUENTIAL OR ANY OTHER DAMAGES RESULTING FROM THE FURNISHING, PERFORMANCE, OR USE OF THIS PUBLICATION, EVEN IF CEDEXIS HAS BEEN ADVISED OF THE POSSIBILITY OF SUCH
DAMAGES IN ADVANCE.
This publication contains information protected by copyright. Except for internal distribution, no part of this publication may be photocopied or reproduced in any form without prior written consent from
Cedexis.
Product names mentioned herein may be trademarks and/or registered trademarks of their respective companies.
Copyright © 2014 Cedexis, Inc.
-
CEDEXIS - GESTE – Edition de mars 2014 1
Observatoire GESTE/CEDEXIS de la
Qualité de Service Internet Edition de Mars 2014
Source des données : Cedexis
Auteurs du rapport : Fabien BARON ([email protected]) Camille CHARAUDEAU ([email protected]), Julien COULON ([email protected]) Cyril DUPRAT ([email protected])
Rapport édité le 7 Avril 2014
-
CEDEXIS - GESTE – Edition de mars 2014 2
Table des matières Introduction ................................................................................................................................................................... 3
Panel ................................................................................................................................................................................ 3
Méthodologie Cedexis et Représentativité du Panel ........................................................................................... 4
Le fonctionnement du tag Cedexis .......................................................................................................................... 5
Confidentialité des données ...................................................................................................................................... 7
Mesure du temps de chargement des pages ....................................................................................................... 8
Résumé du contenu de ce rapport .......................................................................................................................... 9
Temps de chargement des pages en France métropolitaine .......................................................................... 10
Différence de performances entre internautes ............................................................................................. 10
Comparaison entre réseaux métropolitains ................................................................................................... 11
Temps de chargement des pages en DROM/COM ............................................................................................ 13
Différence de performances entre internautes ............................................................................................. 13
Temps de chargement des pages depuis des réseaux européens ou de pays francophones .............. 16
Panel des navigateurs web supportant la mesure de la performance web ................................................ 20
Performance des réseaux de diffusion de contenus (CDN) ............................................................................ 21
-
CEDEXIS - GESTE – Edition de mars 2014 3
Introduction Le présent rapport a pour objectif de fournir au GESTE, sur une base mensuelle, les éléments nécessaires à la mesure de la qualité de service internet de chacun des internautes se connectant aux services en ligne proposés par les membres du GESTE.
Panel Les données agrégées par la société Cedexis ont été collectés depuis les internautes qui exécutent la sonde Cedexis Radar embarquée sur un panel de sites et/ou applications mobiles de membres du GESTE et qui ont accepté de mettre en commun leurs mesures. Le panel pour l’édition d’Octobre du rapport du GESTE regroupe les 15 éditeurs de contenu suivants:
-
CEDEXIS - GESTE – Edition de mars 2014 4
Méthodologie Cedexis et Représentativité du Panel
Cedexis Radar a été créé afin de permettre de connaître, à tout moment, le ressenti utilisateur et, en toute transparence, les temps de chargement des sites web et mobile, ainsi que la performance et la disponibilité des principales infrastructures d’hébergement et de diffusion, du Cloud aux réseaux de distribution (CDN) en passant par les data-centres.
Le présent rapport a été construit sur la base des données de 15 éditeurs de contenus ayant accepté d’y participer. Ensemble, ces 15 éditeurs de contenu ont généré, par le biais de leur audience, plus de 6,2 milliards de mesures actives sur une période d’un mois, et ce mois après mois.
Pour bien mettre en évidence l’ensemble de cette base de mesures, Cedexis n’a pas souhaité présenter des résultats moyennés, et s’est au contraire attaché à faire ressortir la distribution statistique des mesures. Ainsi seront toujours présentés le 10ème centile, la médiane et le 95ème centile.
En statistique, les centiles d'une variable sont les valeurs-seuils de cette variable qui, lorsque l'on ordonne la population selon les valeurs de la variable, la partitionnent en 100 sous-populations de taille égale.
A titre d’exemple, si le temps de chargement des pages au 10ème centile est de 2 secondes, 10% des utilisateurs auront affiché ces pages en moins de 2 secondes, alors que 90% des utilisateurs auront affiché ces mêmes pages en plus de 2 secondes.
-
CEDEXIS - GESTE – Edition de mars 2014 5
Le fonctionnement du tag Cedexis Par l’intégration du tag Radar, Cedexis utilise le navigateur pour mesurer les temps de chargement des pages et pour télécharger un ensemble d’objets de référence afin de comparer, du point de vue de l’utilisateur final, les performances des CDN et des plateformes Cloud publiques et privées.
Radar effectue ses mesures de façon asynchrone et est intégré de manière invisible dans les pages des sites du panel du GESTE. Ce script remonte pour chaque page web affichée le temps de chargement des pages visitées tel quel perçu par l’internaute.
La consolidation et l'analyse de l'ensemble de ces mesures permettent le classement des meilleurs prestataires en fonction du comportement des internautes, pays par pays, FAI par FAI.
Ci-dessous, le tag Cedexis tel que déployé par les membres du GESTE ayant accepté de figurer dans le panel de ce rapport de performance.
(function(w, d) { var a = function() { var a = d.createElement('script'); a.type = 'text/javascript'; a.async = 'async'; a.src = '//' + ((w.location.protocol === 'https:') ? 's3.amazonaws.com/cdx-‐radar/' : 'radar.cedexis.com/') + '01-‐xxxxxx-‐radar10.min.js'; d.body.appendChild(a); }; if (w.addEventListener) { w.addEventListener('load', a, false); } else if (w.attachEvent) { w.attachEvent('onload', a); } }(window, document));
Afin de mesurer les performances des CDN et des Clouds, Radar effectue des mesures actives 2 secondes après le chargement complet de la page (event onLoad()), ceci afin d’être complètement invisible pour l’internaute et ne pas perturber sa navigation.
Radar télécharge un premier objet (de 50 octets) situé sur les plateformes de Cloud et de CDN pour mesurer le temps de connexion, puis un second objet identique une fois la connexion TCP ouverte, qui permet de mesurer le temps de réponse HTTP. Pour tester la disponibilité, Radar mesure le succès ou non du téléchargement de ce premier objet.
Radar télécharge ensuite un autre objet plus volumineux (100 ko) pour mesurer le débit sur les CDN. La méthodologie complète de Cedexis Radar peut être consultée à l’adresse suivante : cedexis.com/fr/radar/methodology.html.
-
CEDEXIS - GESTE – Edition de mars 2014 6
Figure 1: les différentes étapes des mesures de performances réalisées par le tag Cedexis Radar
-
CEDEXIS - GESTE – Edition de mars 2014 7
Confidential ité des données Les données présentes dans ce rapport sont des valeurs agrégées des différents membres du GESTE et ne sont donc aucunement identifiables à un membre en particulier.
L’ensemble des mesures de performances réalisées par Cedexis est absolument anonyme. Cedexis ne relève que le fournisseur d’accès internet de l’utilisateur et sa localisation géographique. En aucun cas des données personnelles (adresse IP du client par exemple) ne sont stockées dans le cadre de ces mesures.
-
CEDEXIS - GESTE – Edition de mars 2014 8
Mesure du temps de chargement des pages
Cedexis Radar collecte le temps de chargement complet (jusqu’à l’event onLoad()) des pages web sur lesquelles le tag est déployé.
Cedexis permet d’afficher en détails ces temps de chargement, en les décomposant par type d’événements: Load Event, DNS Lookup, HTTP Connect, HTTP Redirect, HTTP Send, HTTP Receive, HTTP DOM et HTTP Total Page Load.
Les données affichées dans ce document sont les temps de chargement des pages totaux, une fois tous les éléments chargés, y compris les modules externes et autres publicités. Le graphique ci-dessous présente les différents éléments de l’API de Navigation Timing qui sont mesurés par Radar.
-
CEDEXIS - GESTE – Edition de mars 2014 9
Résumé du contenu de ce rapport L’édition de Mars 2014 du rapport mensuel de l’Observatoire de la Qualité de Service Internet à destination des membres du GESTE regroupe environ 6,2 milliards de mesures de performances utilisateur. Du fait de l’amplitude de l’échantillon, les mesures réalisées sont statistiquement significatives. Ces mesures proviennent majoritairement de France, mais également des 29 autres pays depuis lesquels les sites des membres du GESTE sont les plus consultés.
De la même manière que dans les éditions précédentes, ce rapport met en évidence des temps de chargement élevés pour accéder aux pages des sites participant à l’Observatoire, ainsi que de fortes disparités entre les internautes les mieux servis et les moins bien servis, de l’ordre d’une trentaine de secondes.
Dans ce rapport de Mars, nous constatons une baisse du temps de chargement des pages des sites web des éditeurs du GESTE par rapport à Février. Nous retrouvons ainsi des performances très proches de ceux observés entre Novembre et Janvier, avec un temps de chargement médian au niveau national d’environ 6,4 secondes.
Fait notable de ce rapport de Mars : la France remonte de la 19e à la 16e place des pays analysés dans ce rapport en matière de temps de chargement total médian des pages, repassant devant la Roumanie et la République Tchèque. Le classement de la France ne change pas en ce qui concerne les 10% les mieux servis de chacun des pays de l’étude, dans lequel elle figure toujours à la 16e place.
Sont également abordés dans ce rapport les performances des infrastructures permettant d’acheminer le contenu aux utilisateurs finaux. Les conclusions de cette section mettent en exergue que les performances vers ces prestataires varient du simple en triple suivant les pays d’observation et placent la France en milieu de classement.
-
CEDEXIS - GESTE – Edition de mars 2014 10
Temps de chargement des pages en France métropolitaine
Période des mesures : 1 au 31 mars 2014
Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus et aux seuls réseaux d’accès français, et aux cinq fournisseurs d’accès internet ayant remonté le plus de données.
Différence de performances entre internautes Le temps de chargement médian des pages des sites membres de l’Observatoire
Geste en France est de 6,4 secondes, mesuré sur les principaux fournisseurs d’accès internet français1.
33,3 secondes séparent les utilisateurs les mieux servis des moins bien servis.
1 Les cinq principaux fournisseurs d’accès internet retenus dans cette section étant Orange, Free, SFR, Bouygues Telecom et Numéricable. Ce sont ceux qui remontent le plus de données des utilisateurs en France métropolitaine.
2,0 2,2 2,0 2,2 2,3 2,0
35,8 35,3 34,0 34,7
36,7 35,3
6,3 6,5 6,4 6,4 6,9 6,4
0,0
5,0
10,0
15,0
20,0
25,0
30,0
35,0
40,0
Octobre Novembre Décembre Janvier Février Mars
Tem
ps d
e ch
arge
men
t tot
al d
es p
ages
(en
seco
ndes
)
Différence des performances entre internautes français, tous FAI confondus
10% les plus rapides 5% les plus lents Médiane mensuelle
-
CEDEXIS - GESTE – Edition de mars 2014 11
Comparaison entre réseaux métropolitains
4,0
4,5
5,0
5,5
6,0
6,5
7,0
7,5
8,0
8,5
9,0
oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14
TEM
PS D
E CH
ARG
EMEN
T D
ES P
AGES
(SEC
ON
DES
)
Temps de chargement des pages (valeur médiane, en secondes)
Numericable (ASN 21502) Free (ASN 12322)
Bouygues Telecom (ASN 5410) Orange (ASN 3215)
SFR (ASN 15557) SFR (ASN 8228)
Nom du réseau (AS) Temps de chargement (secondes)
10% les mieux servis
Médiane 5% les moins
bien servis Différence 95e – 10e
Bouygues Telecom (AS5410) 2,3 6,6 32,5 30,4
Numericable (ASN 21502) 1,7 5,0 28,2 26,5
Free (ASN 12322) 2,1 6,1 35,4 33,3
Orange (ASN 3215) 2,4 7,1 33,1 30,8
SFR (ASN 8228) 2,7 8,2 41,1 38,4
SFR (AS15557) 2,4 7,6 39,9 37,5
-
CEDEXIS - GESTE – Edition de mars 2014 12
1,0
1,2
1,4
1,6
1,8
2,0
2,2
2,4
2,6
2,8
3,0
oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14
TEM
PS D
E CH
ARG
EMEN
T D
ES P
AGES
(SEC
ON
DES
) Temps de chargement des pages
(10% les mieux servis, en secondes)
Numericable (ASN 21502) Free (ASN 12322)
Bouygues Telecom (ASN 5410) Orange (ASN 3215)
SFR (ASN 15557) SFR (ASN 8228)
25,0
27,0
29,0
31,0
33,0
35,0
37,0
39,0
41,0
43,0
45,0
oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14 TEM
PS D
E CH
ARG
EMEN
T D
ES P
AGES
(SEC
ON
DES
)
Temps de chargement des pages (5% les moins bien servis, en secondes)
Numericable (ASN 21502) Free (ASN 12322)
Bouygues Telecom (ASN 5410) Orange (ASN 3215)
SFR (ASN 15557) SFR (ASN 8228)
-
CEDEXIS - GESTE – Edition de mars 2014 13
Temps de chargement des pages en DROM/COM Période des mesures : 1 au 31 mars 2014
Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus et aux seuls réseaux d’accès français outre-marins.
Différence de performances entre internautes Le temps de chargement médian des pages des sites membres de l’Observatoire
Geste en DROM/COM est de 12,3 secondes, tous fournisseurs d’accès internet confondus.
82 secondes séparent les utilisateurs les mieux servis des moins bien servis.
4,6 5,0 4,5 4,7 4,8 4,5
79,5
67,5 65,8 64,6
82,1 86,5
12,2 12,9 12,3 12,2 12,7 12,3
0,0
10,0
20,0
30,0
40,0
50,0
60,0
70,0
80,0
90,0
100,0
oct-13 nov-13 déc-13 janv-14 févr-14 mars-14
Tem
ps d
e ch
arge
men
t de
s pa
ges
(en
seco
ndes
)
Différence de performance entre internautes des DROM-COM
10% les mieux servis 5% les moins bien servis Médiane
-
CEDEXIS - GESTE – Edition de mars 2014 14
6,0
8,0
10,0
12,0
14,0
16,0
18,0
oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14
TEM
PS D
E CH
ARG
EMEN
T D
ES P
AGES
(SEC
ON
DES
)
Temps de chargement des pages (valeur médiane en secondes)
Saint Pierre et Miquelon Guadeloupe Martinique
La Réunion Mayotte Guyane française
Polynésie Française Nouvelle Calédonie
Nom du réseau (AS) Temps de chargement (secondes)
10% les mieux servis
Médiane 5% les moins
bien servis Différence 95e – 10e
Guadeloupe 4,5 12,2 59,0 54,5 Guyane française 5,1 13,0 53,7 48,6 La Réunion 4,9 12,1 49,6 44,7 Martinique 4,4 11,8 123,4 119,0 Mayotte 4,5 11,2 43,9 39,5 Nouvelle Calédonie 4,9 15,5 192,1 187,2 Polynésie française 5,2 14,8 138,0 132,8 Saint Pierre et Miquelon 2,8 7,5 32,6 29,8
-
CEDEXIS - GESTE – Edition de mars 2014 15
2,0
2,5
3,0
3,5
4,0
4,5
5,0
5,5
6,0
6,5
7,0
oct-13 nov-13 déc-13 jan-14 fév-14 mar-14 TEM
PS D
E CH
ARG
EMEN
T D
ES P
AGES
(SEC
ON
DES
) Temps de chargement des pages
(10% les mieux servis, en secondes)
Saint Pierre et Miquelon Guadeloupe Martinique
La Réunion Mayotte Polynésie Française
Guyane française Nouvelle Calédonie
0,0
50,0
100,0
150,0
200,0
250,0
oct-13 nov-13 déc-13 jan-14 fév-14 mar-14
TEM
PS D
E CH
ARG
EMEN
T D
ES P
AGES
(SEC
ON
DES
)
Temps de chargement des pages (5% les moins bien servis, en secondes)
Saint Pierre et Miquelon Mayotte Martinique
La Réunion Guyane française Guadeloupe
Polynésie Française Nouvelle Calédonie
-
CEDEXIS - GESTE – Edition de mars 2014 16
Temps de chargement des pages depuis des réseaux européens ou de pays francophones Période des mesures : 1 au 31 mars 2014
Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus membres de l’Observatoire Geste et aux seuls réseaux d’accès des pays limitrophes au territoire français métropolitain / des pays francophones sélectionnés.
Les valeurs de cette section comprennent les mesures provenant de l’intégralité des fournisseurs d’accès internet de chaque pays.
15,91 11,02
10,41 7,75 7,67 7,54
7,33 7,08
6,94 6,89
6,73 6,65
6,50 6,48 6,36
6,02 5,97 5,89
5,71 5,71 5,62 5,61 5,55
5,39 5,23
5,09 5,07 4,94 4,92
4,71
0,00 2,00 4,00 6,00 8,00 10,00 12,00 14,00 16,00 18,00
Algérie Tunisie Maroc
Italie Grèce Russie
Espagne Portugal Polande Lettonie Ukraine Bulgarie
République Tchèque Roumanie
France Autriche
Slovaquie Allemagne
Irlande Croatie Suède
Finlande Grande-Bretagne
Luxembourg Estonie
Danemark Norvège Belgique Pays-Bas
Suisse
Temps de chargement total des pages (en secondes)
Temps de chargement des pages en Europe (valeurs médianes)
-
CEDEXIS - GESTE – Edition de mars 2014 17
La représentation graphique ci-dessous est plus parlante pour visualiser les variations de performance d’affichage à travers les pays sélectionnés :
Temps de chargement total Légende colorée < 5,5 secondes
5,5 – 6 secondes 6 – 6,5 secondes 6,5 – 7 secondes 7 – 8 secondes
8 – 10 secondes >10 secondes
-
CEDEXIS - GESTE – Edition de mars 2014 18
4,19
3,34
3,32
2,62
2,54
2,42
2,33
2,29
2,25
2,22
2,21
2,21
2,11
1,97
1,97
1,90
1,78
1,76
1,74
1,73
1,68
1,67
1,65
1,62
1,60
1,60
1,50
1,47
1,40
1,33
0,00 0,50 1,00 1,50 2,00 2,50 3,00 3,50 4,00 4,50
Algérie
Tunisie
Maroc
Italie
Grèce
Russie
Espagne
Portugal
Pologne
Lettonie
Ukraine
Bulgarie
République Tchèque
Roumanie
France
Autriche
Slovaquie
Allemagne
Irlande
Croatie
Suède
Finlande
Grande-Bretagne
Luxembourg
Estonie
Danemark
Norvège
Belgique
Pays-Bas
Suisse
Temps de chargement total des pages (en secondes)
Temps de chargement des pages en Europe (10e centile)
-
CEDEXIS - GESTE – Edition de mars 2014 19
Temps de chargement total Légende colorée < 2 secondes
2,0 – 2,25 secondes 2,25 – 2,5 secondes 2,5 – 2,75 secondes 2,75 – 3,0 secondes 3,0 – 3,5 secondes
> 4 secondes
-
CEDEXIS - GESTE – Edition de mars 2014 20
Panel des navigateurs web supportant la mesure de la performance web Cette section vise à mettre en exergue la proportion des navigateurs internet pour chacun des principaux fournisseurs d’accès internet français.
Ces navigateurs sont ceux qui supportent l’API « Navigation Timing » et qui permettent à Cedexis de récupérer les informations de temps de chargement des pages. Ces navigateurs sont les suivants :
• Mozilla Firefox dès la version 7.0 • Google Chrome dès la version 6.0 • Internet Explorer dès la version 9.0 • Autres (Opéra dès la version 15.0, navigateurs mobiles utilisés depuis des
connexions fixes, par exemple une tablette reliée par WiFi à une box).
Période des mesures : 1 au 31 mars 2014
Note : Apple Safari est à l’heure actuelle le seul navigateur web récent à ne pas être compatible avec le standard « Navigation Timing ». Cedexis a publiquement fait une demande à Apple afin d’intégrer cette API dans le futur. Des informations détaillées sur ce sujet sont disponibles à l’adresse suivante :
http://www.cedexis.com/blog/apple-please-support-navigation-timing-api-in-safari/
38,43%
45,23%
43,33%
45,33%
46,82%
44,75%
28,97%
30,06%
27,86%
26,29%
25,25%
26,79%
8,81%
6,73%
8,21%
8,02%
7,93%
6,88%
23,78%
17,98%
20,60%
20,36%
20,00%
21,58%
0% 20% 40% 60% 80% 100%
Orange (ASN 3215)
Free (ASN 12322)
SFR (ASN 15557)
SFR (ASN 8228)
Bouygues Telecom (ASN 5410)
Numericable (ASN 21502)
Niveau d'utilisation de chaque navigateur remontant des informations de temps de chargement des pages
Google Chrome Mozilla Firefox Internet Explorer Autres
-
CEDEXIS - GESTE – Edition de mars 2014 21
Performance des réseaux de diffusion de contenus (CDN)
Période des mesures : 1 au 31 mars 2014
Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus sur une sélection de pays.
Note : La mesure représente les temps de réponse, disponibilité et débit de téléchargement de plusieurs objets référents téléchargés sur les serveurs Edge d’un CDN lors d’une navigation sur l’un des sites membres du panel.
Panel de CDN : Un panel de 20 CDN internationaux a été comparé dans chacun des pays de l’étude. Les CDN n’ayant qu’une présence nationale dans un des pays de l’étude ont été retirés, ceci afin de comparer de manière objective l’ensemble des pays sélectionnés. Les performances des CDN suivants sont ainsi mesurées :
• Akamai • Azure CDN • CacheFly • CDN.NET • CDN77 • CDNetworks • CDNify • CloudFlare • Cloudfront • Edgecast • Fastly • Fastweb • Highwinds • Level3 • Limelight • MaxCDN • OnApp • Pacnet • SwiftServe • Tata Communications
-
CEDEXIS - GESTE – Edition de mars 2014 22
153
141
139
108
92
87
78
75
72
70
69
67
66
65
64
64
63
63
57
57
57
57
56
52
49
48
47
47
43
43
0 20 40 60 80 100 120 140 160 180
Tunisia
Morocco
Algeria
Greece
Italy
Spain
Portugal
Russian Federa@on
Poland
Romania
Croa@a
Ukraine
Ireland
Bulgaria
Estonia
Finland
France
Latvia
Austria
Czech Republic
Germany
Slovakia
Norway
United Kingdom
Sweden
Denmark
Belgium
Switzerland
Luxembourg
Netherlands
Temps de réponse (ms)
Temps de réponse (en millisecondes) d'un panel de 20 CDN dans les 30 pays
de l'étude
-
CEDEXIS - GESTE – Edition de mars 2014 23
566
880
1281
1590
1949
2179
2303
2389
2459
2509
2669
2701
2771
2783
2791
2813
2852
2903
2958
3059
3098
3251
3273
3661
4049
4069
4088
4181
4719
4782
0 1000 2000 3000 4000 5000 6000
Algérie
Tunisie
Maroc
Grèce
Italie
Espagne
Croa@e
Pologne
Portugal
Russie
Roumanie
Estonie
Ukraine
Bulgarie
France
Irlande
Slovaquie
LeVonie
Finlande
République Tchèque
Autriche
Norvège
Allemagne
Grande-‐Bretagne
Suisse
Belgique
Suède
Danemark
Luxembourg
Pays-‐Bas
Débit (kbps)
Débit (en kbps) d'un panel de 20 CDN dans les 30 pays de l'étude
-
CEDEXIS - GESTE – Edition de mars 2014 24
98,21%
98,34%
98,45%
98,69%
98,91%
99,04%
99,04%
99,11%
99,20%
99,25%
99,28%
99,30%
99,30%
99,32%
99,34%
99,35%
99,36%
99,37%
99,38%
99,41%
99,42%
99,46%
99,48%
99,50%
99,51%
99,56%
99,56%
99,57%
99,58%
99,62%
97,50% 98,00% 98,50% 99,00% 99,50% 100,00%
Algérie
Tunisie
Maroc
Luxembourg
Royaumes-‐Unis
France
Suisse
Russie
Italie
Allemagne
Grande-‐Bretagne
Bulgarie
Irlande
Autriche
Pays-‐Bas
Roumanie
Belgique
LeVonie
Slovaquie
Espagne
République Tchèque
Suède
Grèce
Finlande
Portugal
Croa@e
Danemark
Estonie
Norvège
Pologne
Disponibilité (%)
Disponibilité (en %) d'un panel de 20 CDN dans les 30 pays de l'étude