Ce que nos propres mesures ne disent pas : les limites que nous assumons

Nos mesures disent quand et où quelque chose a changé ; elles ne disent pas avec certitude pourquoi, ni ce que vous gagneriez à agir. C'est vrai de toutes les mesures du métier, et nous préférons l'écrire pour les nôtres avant que vous ne le découvriez.

Voici deux de nos mesures récentes, et pour chacune ce qu'elle ne permet pas de conclure. Si vous en citez une, citez-la avec son périmètre : sans lui, elle dit plus que ce que nous savons.

1. Première mesure : la France contre la Belgique après le 22 juillet

Google a lancé les Aperçus IA et le Mode IA en France le 22 juillet 2026. Sur un site que nous suivons, aucun changement du site n'a été identifié sur la période. Du 23 juillet au 21 août, les clics venus de France ont reculé de 51 % par rapport aux 30 jours précédents, du 23 juin au 22 juillet (16 970 puis 8 242), contre 7,5 % pour ceux venus de Belgique (388 puis 359). Le taux de clic belge est resté stable.

Nous en tirons une hypothèse principale, fortement étayée : les blocs de réponse IA absorbent une partie des clics en France. Pas une cause établie. Voici pourquoi.

2. Ce que ce chiffre ne dit pas

• Il vient d'un seul site. D'autres sites que nous suivons ont reculé le même jour, à des degrés très différents, et certains à peine. Ce n'est pas « tout le marché ».
• Le témoin est petit. La Belgique représente environ 13 clics par jour sur ce site. Un écart de quelques clics y change le pourcentage.
• La Search Console ne sépare pas ce que nous voudrions séparer. Google indique que les sites qui apparaissent dans les Aperçus IA et le Mode IA sont inclus dans le trafic de recherche global, dans le rapport sur les performances. Il précise aussi qu'un Aperçu IA occupe une position unique, que tous ses liens se partagent. Une partie du recul de position que nous observons est, selon notre lecture, mécanique : un bloc s'est intercalé au-dessus des liens. Mais l'outil ne nous permet pas de mesurer la part de l'absorption des clics, celle du Mode IA et celle d'un éventuel changement de ce que l'outil compte.
• Nous ne voyons qu'une part des requêtes. Sur ce site, les requêtes visibles dans la Search Console portent environ 31 % des clics de la fenêtre avant ; le reste n'est pas détaillé dans l'extraction. Toute conclusion « par requête » ne vaut que pour cette part.
• Nous n'avons pas fait une vérification qui aiderait. Comparer, côté site, les visites venues de France et de Belgique autour du 23 juillet aiderait à distinguer une vraie perte de visites d'un changement de mesure. Faute d'accès à cet outil pour ce site, elle n'est pas faite.
• Nous n'avons pas la page de résultats de juillet. Le relevé des blocs de réponse IA date du 30 octobre. Il illustre, il ne reconstitue pas juillet.

3. Une erreur que nous avons corrigée

Nous nous sommes trompés sur la description d'un échantillon. Notre première rédaction disait que nous avions retenu les requêtes ayant au moins 100 impressions « dans les deux fenêtres ». Or le seuil ne s'appliquait qu'à la fenêtre précédant le 23 juillet : parmi 1 976 requêtes remplissant ce seuil et présentes dans les deux fenêtres, 840 avaient une position stable (moins d'un point d'écart). Une seconde IA indépendante, qui recalcule les chiffres depuis les données, l'a relevé.

Nous publions ici les deux calculs : 840 requêtes à position à peu près stable, dont les clics passent de 907 à 588 (−35 %), et 678 requêtes avec le seuil strict, au moins 100 impressions dans les deux fenêtres, de 776 à 546 (−29,6 %). Le signal tient dans les deux cas, mais l'échantillon strict ne pèse qu'environ 4 % des clics de départ. Il confirme une direction, pas une ampleur.

Une réserve de plus pour qui compare des impressions : Google documente une erreur de journalisation qui a affecté les impressions, le taux de clic et la position moyenne (pas les clics) du 13 mai 2025 au 27 avril 2026. Nous lisons donc les clics pour toute comparaison qui remonte avant cette date.

4. Seconde mesure : ce que les IA reprennent

Sur un pilote d'octobre 2026 (secteur formation, 59 questions, 295 réponses de cinq IA de cinq éditeurs), notre modèle de comparaison classait les pages dans l'ordre de reprise par les IA nettement mieux que la position Google : une corrélation de 0,55 contre 0,13.

Cela ne dit pas que nous prédisons la citation. Un seul secteur, un seul pilote, et un classement de pages n'est pas une prévision : le score nous sert à choisir quelle page corriger en premier, rien de plus.

Même remarque pour la réécriture. Dans ce pilote, réécrire seulement l'introduction pour qu'elle réponde d'emblée, sans ajouter aucune information, a augmenté la reprise de la page de 10 points par rapport à la même page laissée inchangée. C'est un résultat de laboratoire. Un test sur pages réelles, avec pages témoins, est en cours ; nous en communiquerons le résultat, quel qu'il soit. Aucun gain terrain n'est établi à ce stade. Et notre contrôle a écarté plus d'une réécriture automatique sur deux parce qu'elle ajoutait une information absente de la page : c'est pourquoi aucun texte réécrit n'est publié sans relecture humaine.

5. Les mots que nous employons, et ceux que nous refusons

« Hypothèse principale fortement étayée » veut dire : plusieurs observations convergent, aucune ne démontre à elle seule. « Cause établie » est réservé à ce qui a été vérifié et reproduit. Nous ne l'avons pas écrit ici.

Nous n'écrivons jamais « vous serez cité » ni « nous doublons votre visibilité », et nous ne garantissons aucune position. Nous publions quand même des résultats incertains, parce qu'une décision se prend avec un chiffre et sa limite, jamais avec un silence.

Cette semaine, prenez un chiffre de votre propre rapport et écrivez dessous deux lignes : son périmètre (quoi, où, quand, combien de sites) et ce qu'il ne permet pas de conclure. Si vous ne trouvez pas la seconde ligne, c'est que le chiffre n'est pas encore prêt à être présenté.

Le chiffre le plus utile d'un rapport est celui qui dit où il s'arrête.