Exclure des dossiers du moteur de recherche

23.12.2018
Skip to main content
< Zurück
Du bist hier:
Drucken

Exclure des dossiers du moteur de recherche

Exclure un dossier/fichier du moteur de recherche

Créez le fichier robots.txt selon Wikipedia:

http://de.wikipedia.org/wiki/Robots_Exclusion_Standard

# robots.txt for example.com
# I'm excluding out those webcrawlers
Agent utilisateur : Sidewinder
Disallow : ///
 
Agent utilisateur : Microsoft.URL.Control
Disallow : ///
 
# Ces répertoires/fichiers ne doivent pas être recherchés
Agent utilisateur : *
Disallow : /default.html
Disallow : /Temp/ # ce contenu disparaîtra bientôt
Interdire : /Privé/famille/anniversaires.html

Avec les commandes suivantes, l’indexation de l’ensemble de la présence web est interdite à tous les moteurs de recherche.

Agent utilisateur : *
Disallow : ///

Un autre exemple : robots.txt de Wikipedia

Tags:
FireStorm
Related Post