Tout site public reçoit des visites de logiciels. Les moteurs de recherche l’indexent, les outils SEO l’auditent, les moniteurs de disponibilité le sondent, les entreprises d’IA le lisent et les scrapers le copient. La part qui finit dans vos statistiques dépend de la façon dont votre outil d’analytics compte une visite, et la plupart des propriétaires de sites ne l’ont jamais vérifié.

Cela compte, parce que les chiffres de trafic guident des décisions. Un article qui paraît populaire est mis à jour et promu, et un mois qui paraît fort est présenté comme tel. Si une partie du chiffre vient de machines, vous pilotez avec un nombre qui ne décrit pas vos lecteurs.

Deux façons dont les robots entrent dans vos chiffres

Les robots se répartissent en deux groupes, et ils gonflent des types d’analytics différents.

Les crawlers simples récupèrent le HTML d’une page et repartent. Les moteurs de recherche, les outils SEO, les robots d’exploration IA, les moniteurs de disponibilité et les lecteurs de flux fonctionnent surtout ainsi. Ils n’exécutent jamais de JavaScript.

Les robots qui exécutent des scripts chargent la page dans un vrai moteur de navigateur, en général Chrome headless, si bien que le JavaScript de la page s’exécute comme pour une personne. Les testeurs de vitesse de page, les outils SEO qui rendent les pages, les scrapers et certains agents IA fonctionnent ainsi, tout comme les navigateurs qui préchargent une page que personne n’a encore regardée.

Le groupe qui gonfle vos statistiques dépend de l’endroit où votre outil compte :

  • Un outil qui compte côté serveur, comme un analyseur de logs ou une extension qui enregistre chaque page construite par WordPress, voit les deux groupes. Sans bon filtre, les crawlers simples le submergent, et sur un petit site ils peuvent dépasser les humains de plusieurs fois.
  • Un outil qui compte avec un script dans le navigateur, comme Google Analytics, ne voit jamais les crawlers simples. Il voit en revanche les robots qui exécutent des scripts, et ceux que sa propre liste de robots ne reconnaît pas apparaissent comme des visiteurs.

Un outil à base de script est donc plus propre par hasard, et les robots qu’il laisse passer sont ceux qui ressemblent le plus à des personnes.

Signes que vos statistiques actuelles sont gonflées

On repère en général le trafic de robots dans un rapport d’analytics ordinaire :

  • Un pic soudain venant d’un pays que vous ne desservez pas, sans changement dans l’origine de vos lecteurs.
  • Un grand nombre de visites qui consultent une page et repartent en moins d’une seconde.
  • Une page qui reçoit une rafale de vues à intervalles réguliers, à la même heure chaque jour.
  • Un trafic surtout direct, sans référent, vers des pages que personne ne taperait.
  • Des versions de navigateur vieilles de plusieurs années, ou des tailles d’écran qu’aucun appareil réel n’a.

Aucun de ces signes ne prouve la présence de robots à lui seul, et chacun a des explications innocentes. Deux ou trois ensemble sont un indice solide.

Ce que fait le filtrage côté serveur

Vireo vérifie chaque requête de page dans WordPress, avant tout rendu, puis de nouveau quand son script de suivi signale une vue. Cela lui permet d’attraper les deux groupes.

Pour les crawlers simples, il compare le user agent à plus de 800 robots nommés, la liste de l’annuaire des robots, et traite comme robots les requêtes sans user agent. Une requête de page suffit. Le crawler n’a pas besoin d’exécuter quoi que ce soit pour être reconnu et compté.

Pour les robots qui exécutent des scripts, le user agent ment souvent : Vireo regarde donc d’autres signaux :

  • Les indicateurs que les outils d’automatisation posent sur le navigateur qu’ils pilotent, comme le flag webdriver. Ils survivent à un user agent falsifié.
  • Les en-têtes de préchargement et de prérendu, pour qu’une page que le navigateur a chargée à l’avance ne compte pas tant que personne ne la regarde.
  • Sur Cloudflare, les requêtes que Cloudflare a marquées comme bot vérifié ou menace probable.
  • Un plafond quotidien. Un même visiteur ne peut ajouter au plus que cinq vues d’une page et cinquante vues au total par jour. Au-delà, les vues sont signalées comme filtrées au lieu d’être comptées, ce qui attrape les boucles et les scrapers qui passent à travers tout le reste.

Tout ce qu’il filtre reste hors de vos totaux de pages vues et de visiteurs. Les requêtes qu’il reconnaît côté serveur sont tout de même comptées, par catégorie, pour que vous voyiez ce qui a été retiré et pourquoi. Un navigateur qui porte un indicateur d’automatisation ne signale simplement jamais de vue.

Certains trafics ne s’annoncent pas du tout. Pour cela, Vireo Analytics, Réglages, Suivi propose deux listes : Adresses IP / CIDR exclues, pour les adresses ou plages à ignorer, et Countries to treat as junk, pour les pays d’où vous recevez du trafic de spam et aucun lecteur.

Comment vérifier votre propre site

Dans Vireo, l’onglet Vue d’ensemble affiche sous les chiffres principaux une ligne : combien de requêtes ont été écartées sur la période choisie, et quelle part de tout ce que Vireo a vu cela représente. En dessous figurent les plus grandes catégories, comme robots d’exploration IA, moteurs de recherche, outils SEO et navigateurs headless.

La ligne de la Vue d'ensemble de Vireo Analytics qui indique combien de requêtes ont été écartées des chiffres et quelle part de toutes les requêtes cela représente, avec les principales catégories de robots.
Ce que le filtre anti-robots a écarté, dans l'onglet Vue d'ensemble.

Cette part est la réponse honnête à la question de la proportion de robots dans votre trafic. Elle est souvent importante, et c’est normal. Même un petit blog est exploré par tous les moteurs de recherche et tous les outils SEO du web.

Pour voir comment un visiteur donné serait traité, allez dans Réglages, Dépannage, Test du filtre anti-robots. Collez un user agent tiré des logs de votre serveur et cliquez sur Tester un User-Agent. L’outil vous dit si Vireo le compterait et dans quelle catégorie il se range.

Les robots d’exploration IA ont leur propre rapport, parce que ce qu’ils prennent mérite d’être comparé à ce que les assistants IA renvoient. Ce que les robots d’exploration IA prennent à votre site traite ce point.

Pourquoi vos chiffres baissent quand vous changez d’outil

Si vous quittez un outil qui comptait les robots, attendez-vous à ce que vos chiffres de visiteurs baissent. On dirait du trafic perdu, mais ce sont les mêmes lecteurs, robots en moins.

La comparaison qui compte est celle de deux chiffres filtrés : comparez donc les tendances plutôt que les totaux. Si vous rapatriez votre ancien historique dans Vireo, les jours importés gardent ce que l’ancien outil comptait, robots compris là où il ne filtrait pas. Quitter Google Analytics 4 sans perdre votre historique détaille ce qui vient de GA4.

Pourquoi vos logs serveur en montrent davantage

Les rapports de logs de votre hébergeur affichent plus de visites que Vireo, et c’est normal. Un log compte comme une visite chaque requête de chaque crawler, moniteur et scraper.