Googlebot è lo strumento algoritmico utilizzato da Google per indicizzare il Web. Il programma esegue la scansione di Internet per i contenuti nuovi e aggiornati, scaricando tutto ciò che trova per l'indice di Google in modo che gli utenti possono cercare rapidamente il database di Google per i siti web che soddisfano le loro query. I webmaster possono controllare come Googlebot indici loro sito web in una varietà di modi. Il modo più semplice per interagire con Googlebot è quello di implementare un file di esclusione dei robot sul tuo sito web che indica Googlebot per escludere determinati file o directory dall'indicizzazione. È inoltre possibile controllare Googlebot utilizzando Google Webmaster Tools, un servizio che permette di andare a diminuire i tassi di indice e inviare una Sitemap per l'indicizzazione più efficiente.

istruzione

Robots Exclusion File

1 Fare clic su "Start", tipo "Blocco note" nella casella di ricerca nella parte inferiore del menu, quindi premere "Invio".

2 Copiare e incollare il seguente codice a formare la base del file robots esclusione:

User-agent: *

3 Disabilitare l'indicizzazione di determinate directory o tipi di file da Googlebot e altri motori di ricerca modellando il codice dopo i seguenti esempi. Ogni comando deve essere aggiunto, uno per riga, dopo l'iniziale "User-Agent: *" Codice:

Disallow: / musica /

Disallow: /*.gif$

4 Fai clic su "File" e selezionare "Salva con nome". Salvare il file come "robots.txt" e caricarlo nella directory principale del tuo sito web. Googlebot e altri crawler dei motori di ricerca seguiranno le istruzioni fornite da questo file.

Strumenti per i Webmaster di Google

5 Passare a Google Webmaster Tools (vedi riferimenti) e accedere utilizzando le credenziali dell'account Google.

6 Fai clic su "Aggiungi un sito."

7 Fai clic su "Scarica questo file di verifica HTML" per salvare il file sul computer, di caricare il file nella directory principale del tuo sito web e fare clic su "Verifica" per confermare che sei il proprietario del sito.

8 Seleziona il tuo sito web nella sezione "Siti".

9 Selezionare "Impostazioni" dalla sezione "Configurazione" della barra laterale di sinistra.

10 Fare clic sul pulsante di opzione accanto a "velocità di scansione insieme personalizzato" e regolare il dispositivo di scorrimento in base alle proprie preferenze di scansione.

11 Selezionare "Sitemap" dalla sezione "Configurazione" della barra laterale di sinistra.

12 Fare clic sul pulsante "Invia una mappa del sito" per salvare una posizione mappa del sito con Google che Googlebot può utilizzare per rapidamente indicizzare il tuo sito web.