Créer un fichier robots.txt
Voir tous les prompts

Créer un fichier robots.txt

Écrivez un fichier robots.txt qui bloque Googlebot d'explorer l'ensemble du site mais permet à Bingbot d'explorer l'ensemble du site, sauf pour les URL contenant la lettre "q".

Mots clés

  • Programmation
  • SEO
  • robots txt
  • Exploration Web
  • Googlebot
  • Bot Bing
  • Gestion de Site
  • Développement Web
  • Contrôle de crawl

Source