Escludere cartelle dal motore di ricerca

23.12.2018
Skip to main content
< Zurück
Du bist hier:
Drucken

Escludere cartelle dal motore di ricerca

Escludere cartelle/file dal motore di ricerca

Creare il file robots.txt secondo Wikipedia:

http://de.wikipedia.org/wiki/Robots_Exclusion_Standard

# robots.txt for example.com
# Sto escludendo quei webcrawler. # I'm ruled out those webcrawler #
Agente utente: Sidewinder
Non consentire: //
 
Agente utente: Microsoft.URL.Control
Non consentire: //
 
# Queste directory/file non devono essere cercate
Agente utente: *
Non consentire: /default.html
Disallow: /Temp/ # questi contenuti scompariranno presto
Non consentire: /Privato / Famiglia / Famiglia / Birthdays.html

Con i seguenti comandi l’indicizzazione dell’intera presenza web è vietata a tutti i motori di ricerca.

Agente utente: *
Non consentire: //

Un altro esempio: robots.txt da Wikipedia

Tags:
FireStorm
Related Post