Un article dans le journal Les Affaires a attiré mon attention dernièrement.
Le journaliste Olivier Schmouker annonçait que [Le phénomène Internet des Têtes à claques a pris une méchante volée. Depuis le lancement de la nouvelle version de son site à la mi-août, sa fréquentation a chuté de 38%, selon les données d’Alexa.com.]
Bref, ce n’est pas tellement la nouvelle qui a suscité mon intérêt que la pertinence des propos et la validité des sources du journaliste.
Alexa
Tout d’abord, la source utilisée par Olivier Schmouker est Alexa: une application de mesure estimative d’achalandage disponible gratuitement sur Internet. Alexa est une entreprise californienne basée à San Francisco qui appartient au groupe Amazon. Son site Web est principalement connu pour fournir des statistiques sur les sites internet du trafic web mondial.
Alexa: La Méthodologie
Avant de se fier à une source (gratuite!), il est important de comprendre la méthodologie; surtout en tant que journaliste ou en tant que décideur.
Il existe une importante controverse sur la validité des chiffres d’Alexa et sur la représentativité de sa base d’utilisateurs. Alexa comptabilise ses données sur un échantillon d’utilisateur non aléatoire qui installe volontairement sa barre d’outils sur son ordinateur. Malgré que la taille de l’échantillon soit importante, elle ne peut être représentative de la population. D’ailleurs quelle population ? Américaine, Canadienne, Québécoise ?
En avril 2008, Alexa a introduit un nouveau mode de calcul de son traffic rank. Les sources des données ont été multipliées afin de fournir une indication affinée de la popularité d’un site. Le classement d’Alexa ne se ferait donc plus uniquement sur la base des données relevées à l’aide de sa barre d’outils. La nouvelle méthodologie n’est toutefois pas encore dévoilée. Serait-elle donc plus valide ?
Les chiffres
Toujours selon la même source, Olivier Schmouker mentionne que l’achalandage de Têtes à Claques aurait chuté de 38% depuis le lancement de la nouvelle version de son site à la mi-août 2008.
Peut-être aurait-il oublié que depuis le relancement de Têtes à Claques, il est possible d’accéder le site via 2 adresses:
La portée de la première porte d’entrée aurait peut-être chutée de 38% (29% selon mes données mises à jour), toutefois la portée de la seconde porte d’entrée aurait quant à elle augmentée de 161,404%. Mais bon, il semble que ce fait ait été oublié.
Maintenant, en se basant sur les chiffres du graphique et en combinant les données des 2 sites, on peut rapidement remarquer qu’il y a plus ou moins de changements depuis le mois d’août. Très stable. Encore une fois, il semble que ce fait ait aussi été oublié.
Autre sources
Une autre source aurait pu être utilisée par le journal Les Affaires: comScore Mediametrix. Quoique cette application ne soit pas nécessairement la vérité incarnée, c’est l’outil de référence canadien utilisé par les plus grands acheteurs médias au pays. comScore est à l’Internet comme BBM est à la radio et à la télé, NadBank aux journaux et PMB aux magazines. comScore est aussi une source fréquemment utilisé par ce journal puisque ces derniers sont abonnés à comScore et en détiennent une licence média.
Résumé
Méfiez-vous de tous les chiffres qu’on vous avance. Dommage que ce journaliste n’ait pas été plus rigoureux dans ses recherches.
Sujet à part, TaC est présentement à la recherche d’un infographe.
http://www.espresso-jobs.com/2008/10/20/salambo-productions-inc-infographe/
Très pertinent ce billet. C’est toujours intéressant de discuter métho!
Merci de remettre les choses en perspective Yannick!
J’apprécie beaucoup le fait que quelqu’un se penche sur les sources sur lesquelles s’appuie un journaliste dans son article: il ne faut jamais prendre pour argent comptant ce que dit un journaliste!
Il est de notoriété publique que la méthodologie d’Alexa laisse à désirer. Son seul intérêt est d’indiquer une tendance générale concernant la popularité d’un site Web: hausse, baisse ou stabilité.
Du coup, le fait que la baisse du site Tetesaclaques.tv soit de 38% ou de 29% importe guère: nous sommes tous deux d’accord pour dire qu’il s’agit d’une baisse marquée.
Je n’ai pas tenu compte de Tac.tv pour une simple raison: c’est une nouvelle adresse, si bien qu’il est très présomptueux de dégager une tendance avec des chiffres aussi frais. Et avancer que sa progression a été de «161,404%» me paraît, à cet égard, un peu ridicule, sans vouloir vous offusquer.
Vous me conseillez d’utiliser une autre source : comScore. Le premier problème est qu’il faut payer très cher pour avoir des données de leur part (et cela n’en vaut pas la peine pour un simple article). Le second problème est que, comme vous le laissez entendre, leur méthodologie laisse aussi à désirer (demandez à Cossette Média ce qu’ils en pensent…).
Par conséquent, je pense qu’on en arrive tous les deux à la même conclusion concernant la popularité déclinante des Têtes à claques. D’où mon étonnement de la remise en question de ma «rigueur journalistique»…
Olivier Schmouker
Olivier,
Premièrement, je tiens à dire que j’apprécie que vous preniez le temps de commenter ce billet.
Quoique je comprenne que les limites éditoriales du journal vous restreignent parfois dans la longueur de vos articles, je crois qu’il aurait été important de mentionner que la méthodologie d’Alexa laisse à désirer. Cela remet les choses en perspective.
Effectivement, le seul intérêt d’Alexa est d’indiquer une tendance générale concernant la popularité d’un site Web: hausse, baisse ou stabilité. Par contre, un échantillon non représentatif reste un échantillon représentatif. Alors peut-on réellement parler de tendance ?
Que l’on parle de 29% ou de 39%, je suis tout à fait d’accord avec vous, nous n’allons pas nous battre pour une question de chiffres, surtout que nous ne nous basions pas sur les mêmes journées d’analyse.
Cependant je suis entièrement en désaccord avec vous sur une chose, vous auriez dû prendre en considération l’autre porte d’entrée de Têtes à Claques, soit Tac.tv. Je vois la chose comme un centre d’achat. On construit une nouvelle entrée, faut prendre en considération les visiteurs qui utilisent cette nouvelle porte, sinon les résultats sont faussés. Autrement, on appelle cela de la négligence.
Je suis par contre d’accord avec vous qu’une progression de «161,404%» paraît un peu ridicule. En fait, tout aussi ridicule que d’oublier de compter l’achalandage de la seconde porte d’entrée. Alors votre commentaire ne m’offusque pas du tout.
Concernant l’autre source, soit comScore, Transcontinental détient une licence annuelle si je ne me trompe. A moins que vous fassiez référence à un coût supplémentaire unitaire auquel je ne suis pas au courant pour tout article qui dévoile des chiffres privés. Est-ce le cas ? Je sais que votre journal fait référence à comScore à certaines occasions, certains articles auxquels j’ai personnellement collaboré.
En ce qui à trait à la méthodologie, je suis au courant des faiblesses de comScore, comme je suis au courant des faiblesses de PMB, BBM, NADBANK et toutes les autres bases de données média. N’empêche qu’au moins l’échantillon est contrôlé. Reste maintenant à prouver qu’il est stable et représentatif. Je partage les inquiétudes de Cossette Média sur ce point. Cependant Nielsen et comScore sont actuellement en discussion avec l’Internet Advertising Bureau (IAB) pour réglementer cette méthodologie. Un pas de plus qu’Alexa.
Je ne discute pas du fait que la popularité de TaC soit déclinante depuis son lancement. C’était prévisible, autant pour les experts média que pour son propriétaire. Je remets plutôt en question le fait que vous vous basiez sur des chiffres imprécis et aviez oublié d’additionner l’achalandage de toutes les portes d’entrée. Vous auriez donc remarqué que selon Alexa, pendant la période observée, que l’achalandage n’avait pas du tout baissé.
Alors oui, je maintiens mon point qu’il a eu manque de rigueur sur cet article et que cela causera peut-être du tord à cette entreprise. En tant que spécialiste média, cela m’interpelle.
Je dois tout de même vous avouer que j’aime bien vous lire et que vous êtes l’une des raisons pour laquelle je suis abonné au journal.
Très bon billet Yannick, merci.
Dommage en effet de voir qu’une information de la sorte puisse être avancée dans le vide…
Yannick, tu m’inspires!!!! C’est toujours un plaisir de te lire!!!!
Merci Catherine
Est-ce l’effet Manuri ?
Salambo Productions a réagi à la polémique et, finalement, bien voulu nous dévoiler quelques-unes de leurs statistiques issues de Google Analytics.
Voici le détail, pour ceux que ça peut intéresser:
http://www.lesaffaires.com/article/0/medias-et-communication/2008-10-27/484249/byebye-les-tetecirctes-etagrave-claques-.fr.html
Olivier
Merci pour ce nouveau commentaire Olivier. Toujours apprécié.
[...] Bye-bye les Têtes à claques ? (octobre 2008) [...]