WWW Robot, noto anche come "web crawler" o "spider", sono quasi impossibile da evitare come webmaster. Nella maggior parte dei casi, i robot e spider setacciare il web alla ricerca di contenuti da indicizzare per i risultati dei motori di ricerca. Nel fare questo, però, hanno anche raccogliere i dati sul tuo sito web per scopi correlate al motore di ricerca non, come l'analisi demografiche o spamming. Alexa.com ha il proprio robot Web che va sotto il nome di "ia_archiver." Se si desidera impedire Alexa dalla raccolta di dati sul vostro sito web, è possibile bloccare il suo robot attraverso il file robots.txt.

istruzione

1 Aprite il vostro client FTP e accedere alla cartella principale del tuo sito web.

2 Fare clic sul file "robots.txt", e selezionare "Modifica" dalle opzioni del menu a discesa. Se non si dispone di un file "robots.txt", aprire l'editor di testo predefinito del computer (ad esempio Blocco note) e salvare il file come "robots.txt".

3 Creare una nuova riga all'interno del file robots.txt e digitare:

User-agent: ia_archiver

Disallow: /

Questa riga di codice impedisce robot di indicizzazione di Alexa dalla raccolta di informazioni sul tuo sito web.

4 Fai clic su "Salva" per finalizzare le modifiche. Se si è modificato il file robots.txt dall'interno client FTP, questi cambiamenti saranno caricati automaticamente dopo aver cliccato su "Salva". Se è stato creato manualmente un file robots.txt, individuare il file e caricarlo alla radice del tuo dominio tramite FTP.