Ca, c'est de la stat !

Xiti, société qui audite et conseille les sites Internet et qui fournit des baromètres et des tendances, a publié le mois dernier une étude que je trouve assez marrante : Firefox dépasse les 20% en Europe.

Pour ceux qui ne seraient pas au courant, c'est la lutte dans les browsers entre Internet Explorer de Microsoft et son challenger Firefox issu de la communauté du logiciel libre. Actuellement, Internet Explorer (qui n'avait pas concurrent sérieux) perd des parts de marché face à Firefox.

Mais voyons un peu plus cette étude en détail :

Vous voyez la petite étoile après le 20%. Elle renvoie sur une note qui indique "* Précision : La moyenne de 20,10% représente la moyenne des moyennes de chaque pays représentatif."
C'est-à-dire qu'ils ont fait la moyenne d'utilisation de Firefox dans une trentaine de pays, puis ils ont fait la moyenne des moyennes ... ce qui, statistiquement et mathématiquement parlant, ne représente strictement rien.

En prenant exactement ce style de calcul :

• 98% des habitants d'outre-mer habitent dans une île.

• 2% des habitants de métropole habitent dans une île.

• En faisant la moyenne des moyennes, 50% des français habitent dans une île.

Continuons : A quoi correspondent les résultats de l'étude ?

Des sites professionnels audités un dimanche ? Et si on leur demande une étude sur les sites pour enfants, ils vont auditer les sites à 3 heures du matin ?

Mais ce n'est pas terminé :

Des résultats statistiques avec deux chiffres après la virgule ? Tous les cours d'initiation à la statistique indiquent que chaque sondage comporte une marge d'erreur selon la taille de l'échantillon pouvant aller jusqu'à 3% (au-delà ce n'est plus un sondage, c'est du pifomètre).
Pas chez Xiti, ils connaissent les résultats à deux décimales près : ainsi, on trouve sur le Journal du Net le nombre d'internautes en France en décembre 2005 : 27,21 millions. La précision (0,01%) fournie par Xiti permet donc de chiffrer à 2721 personnes près le nombre d'utilisateurs de Firefox. Moi, je dis bravo !
Mais sachant que le nombre d'internautes varie de 400.000 à 1,3 million d'un mois sur l'autre, on se demande quand même comment ils peuvent étudier des accès à 2721 internautes près.

Encore plus fort : Vous vous rappelez que les résultats des sites professionnels ont été étudiés un dimanche. Et bien pour prouver qu'il n'y a pas de différence entre le bureau et le domicile, voici la comparaison entre l'utilisation de Firefox en semaine et le week-end.

Je me demande pourquoi ils n'ont pas pris directement les chiffres de la semaine pour étudier les sites professionnels au lieu des chiffres d'un dimanche ... Peut-être parce que les résultats plaçaient la moyenne des moyennes (arf) juste en dessous de 20% et que ça ne permettait pas de faire un gros titre !

Enfin, la dernière pour la route :

Eh oui ! La moyenne "semaine" du graphe précédent est effectuée uniquement à partir des résultats d'un seul lundi.

- Euh chef ..., comment je calcule la moyenne de la semaine ?
- Ben, tu additionnes les résultats du lundi avec rien et puis tu divises par 1

Nota : toutes les copies d'écran sont (c) 2000-2004 AT Internet - XiTi.com - Tous droits réservés

Comments

[antonomase]

Les points que vous évoquez sont fort intéressants, mais emmènent quelques réflexions :

1) Si le terme site professionnel s'applique aux sites édités par des professionnels plutôt qu'à des sites personnels, à ce moment-là, quel est l'intérêt de préciser qu'il s'agit d'un dimanche et de comparer le résultat avec la semaine ?
Les gens iraient-ils plus souvent sur les sites persos à partir de chez eux plutôt qu'à partir du boulot ? Cela reste à montrer et ce serait une étude intéressante à faire (peut-être par Xiti ?).
Je respecte votre interprétation, mais je reste persuadé que mon interprétation est plus correcte, à savoir que Xiti fait la différence entre des sites dédiés à des professionnels (utilisés donc plutôt par des professionnels dans leur cadre de travail) et des sites dédiés au grand public (consultés plutôt pendant les heures de loisirs).

2) Je ne comprends pas très bien la différence que vous faites entre comptage et sondage. Un sondage est TOUJOURS un comptage : c'est même sa définition et son principe. Je COMPTE le nombre x de personnes qui mangent du camembert sur un échantillon de y personnes et je l'étend au reste de la population.
C'est exactement ce qu'a fait Xiti : un comptage du nombre de visites (il faudrait d'ailleurs expliquer ce que cela signifie : visiteurs uniques, pages vues, nombre de hits, ...) et ils l'ont étendu à l'ensemble de la population des internautes d'un pays d'abord, de l'europe ensuite.
Votre interprétation est erronée : Oui, 21.5422364% des gens DONT ON A COMPTE LES VISITES utilisent Firefox. Mais NON, cette précision est illusoire dès qu'on étend ce résultat au nombre d'internautes d'un pays et encore plus non lorsqu'on l'étend à une nationalité.
Petite note en passant : on remarquera que si Xiti indique le nombre total de visites, on ne connaît pas la répartition par pays : le comptage sur les slovaques est-il fait sur 10 visites, 100, 1.000 ou 10 millions ? Ca serait intéressant pour connaître les taux d'erreurs. On remarquera également qu'ils n'indiquent pas le nombre de sites qui ont servi à leur étude ? 1 par pays, 10, 1000 ?
Je pense que tout cela à quand même une influence sur les décimales des résultats.

3) Je ne conteste pas le mot semaine. Je conteste le mot moyenne alors qu'il s'agit des résultats sur un seul jour, que ce soit le lundi ou le jeudi. Une moyenne, c'est une addition de plusieurs grandeurs similaires divisée par le nombre de grandeurs mesurées. L'interprétation fournie par Xiti est aussi absurde que si je déduisais l'âge moyen des visiteurs de ce blog en me basant uniquement sur l'âge d'une seule personne.

4) Je ne consteste pas les tendances qui montrent une montée de l'utilisation de Firefox vis à vis d'IE : IE n'avait pas de concurrent sérieux depuis la disparition de Netscape. Sur un marché en situation de monopole qui s'ouvre à la concurrence, il est NORMAL que l'on constate une augmentation des parts de marché des nouveaux arrivants et une baisse de celui qui détenait le monopole. Heureusement que les études de Xiti montrent depuis 18 mois, Firefox augmente ses PDM ... jusqu'au jour où il y aura stabilisation. Et puis une nouvelle version de l'un ou de l'autre fera à nouveau varier les pourcentages jusqu'à un autre équilibre ...
Je conteste juste cette présentation racoleuse et pseudo-scientifique des résultats, avec une méthologie d'étude douteuse, pas complètement décrite mais qui fournit des résultats à la précision illusoire.

[tipaul]

* le terme "site professionnel" peut être lû comme "site édité par un professionnel", par opposition à "site perso de chez wanadoo/free". Donc je ne pense pas que le fait de faire une étude le dimanche soit bien génant. Je considère www.silicon.fr ou www.tf1.fr comme des sites professionnels, mais qui doivent même avoir plus de visites le dimanche que la semaine (sauf si les gens surfent perso au boulot ;-) )
* la statistique n'est pas un sondage. Oui, sur un sondage, il y a une part d'incertitude. Puisqu'on étend à une population large les résultats d'une interrogation d'une partie mineure mais supposée représentative. Donc on ne peut pas dire 21.52% des gens vont voter pour X.
Dans le cas qui nous préoccupe, c'est un COMPTAGE, pas un SONDAGE. Donc on pourrait même dire 21.5422364% des gens utilisent Firefox. Et compter à 1 près.
Que l'on étende à la totalité du web les résultats est effectivement un peu discutable. Sans être statisticien, je pense cependant que le volume traité par xiti est important est donc statistiquement valable.
* le terme "semaine" est à comprendre comme "jour ouvrable". Le choix du lundi est discutable par contre, puisque le lundi, bcp de commerces sont fermés. (mais le vendredi ya RTT, le mercredi ya les enfants qui ont pas école...) Bref, il aurait statistiquement fallu travailler sur la semaine entière !
* Sur la moyenne des moyennes qui ne veut rien dire, on est d'accord. Même que les gens de la fondation mozilla l'ont déjà noté depuis longtemps (voir le blog de nitot ou glazman, je ne me souviens plus). En pondérant les chiffres par la population, on arrive sensiblement au même résultat (mais c'est un "hasard mathématique")

Enfin, ce qui est essentiel dans l'affaire, c'est quand même la tendance depuis 18 mois !!! Il suffit de regarder les chiffres de xiti sur la période ;-)

[zeugme]

Elle est très bonne et très méritoire puisqu'elle prouve qu'il y a au moins une personne qui lit ces études à part leurs concepteurs ^_^

[Akah]

De toute facon, ca n'empeche pas que 100% des surfeurs devraient utiliser Firefox...

ou devraient ne pas Utiliser IE ( plutôt )