De l'exploration à la contribution
Un modèle pratique fondé sur les faits qui distingue l'accès des robots de la récupération, de la citation, du trafic référent et de la valeur apportée par une source à une réponse d'IA.
Articles et recherches
Des enseignements pratiques pour les spécialistes du SEO technique et les développeurs web
Derniers articles et travaux de recherche
Mesure de l'AEO
Recherche sur les robots
Signaux de fraîcheur et réalité de l'exploration
Premiers résultats issus de 28 jours de requêtes vérifiées de robots, révélant de nettes différences entre les formats et un âge moyen de 120 jours pour les contenus demandés.
Recherche par IA
Le guide ultime de l'optimisation technique pour la recherche par IA
Un cadre technique pour la visibilité dans la recherche par IA, couvrant l'accès des robots, le rendu, la canonisation, le découpage, les données structurées, la fraîcheur, la mesure et la gouvernance.
Conseils techniques
Directives techniques pour l'ingestion et la visibilité par l'IA
Un cadre pratique pour l'accès des robots, l'architecture lisible par machine, les données structurées, la journalisation des robots et la visibilité lors de la récupération.
Web lisible par machine
Markdown pour les agents
Ce que la proposition « Markdown for Agents » de Cloudflare révèle sur les formats peu bruités, l'accès des robots et la publication lisible par machine.
Consignes de Google
La limite d'exploration de 2 Mo de Google
Ce que la limite d'exploration de 2 Mo de Google implique pour l'indexation, le rendu, la taille des ressources et la publication lisible par machine.
Étiquette de l'IA
Quand l'IA hésite à explorer
Une interaction observée au cours de laquelle ChatGPT a d'abord refusé de lire les flux Scrubnet, illustrant la manière dont les garde-fous des agents peuvent influer sur une récupération demandée par l'utilisateur.
À propos des articles et des recherches
Cet espace réunit des articles pratiques pour les spécialistes du SEO technique et les développeurs web. Les sujets abordés comprennent le SEO technique, le développement web, de meilleures méthodes de travail, l'exploration par les IA et les moteurs de recherche, ainsi que des observations factuelles issues de l'observatoire des robots d'exploration de Scrubnet.
Pour les recherches fondées sur l'observatoire, nous documentons le périmètre et les limites afin que l'accès des robots ne soit pas confondu avec l'indexation, le classement, l'utilisation par un modèle ou la citation par une IA.
Les rapports précisent la période d'observation, les requêtes de robots incluses et les exclusions pertinentes. Lorsque ces informations sont disponibles, ils décrivent également les ressources qui pouvaient faire l'objet d'une requête. Les différences sont présentées comme des associations au sein de l'environnement Scrubnet, et non comme la preuve qu'une caractéristique d'un flux a provoqué la réponse d'un robot.