Recherche IALe bloquer vous coûte de la visibilité
Googlebot
The same crawl feeds Google Search, AI Overviews and AI Mode. Still the largest single source of AI answers.
- Jeton robots.txt
Googlebot- Opérateur
- Google ↗
- Alimente
- Google Search · AI Overviews · AI Mode · Gemini grounding
- Respecte robots.txt
- Oui, documentéDocumentation ↗
L’autoriser
User-agent: Googlebot
Allow: /Le bloquer
User-agent: Googlebot
Disallow: /Besoin du fichier complet, avec tous les crawlers et vos chemins privés ? Le générateur l’écrit. Générateur robots.txt →
User-Agent
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) Crawlable/1.0; +https://crawlable.fr/probeC’est la chaîne que nous envoyons lors du test. Le suffixe Crawlable nous identifie dans vos logs.
Vérifier votre site
Le robots.txt n’est qu’une moitié de la réponse : votre CDN peut refuser Googlebot avant même qu’il le lise. Un scan teste les deux.
Gratuit, sans compte, environ 5 secondes.