Declaration officielle
Googlebot n'interprète pas la directive crawl-delay dans les fichiers robots.txt, car les serveurs sont suffisamment dynamiques pour gérer plus de trafic sans nécessiter de pause fixée entre les requêtes. Nous ajustons automatiquement la fréquence de crawl en fonction de la réactivité du serveur. Si votre serveur montre des erreurs ou devient lent, nous réduirons notre activité de crawl.
Autres déclarations de cette vidéo 3 ▾
Declaration officielle du
(il y a 8 ans)
⚠ Une declaration plus recente existe sur ce sujet
Faut-il utiliser la directive noindex dans le fichier robots.txt ?
Voir la declaration →
🎥 De la même vidéo 3
Autres enseignements SEO extraits de cette même vidéo Google Search Central · durée 1 min · publiée le 21/12/2017
🎥 Voir la vidéo complète sur YouTube →
💬 Commentaires (0)
Soyez le premier à commenter.