October 5
Se si possiede un forum su Internet, si potrebbe non voler cercare bot dei motori o altri bot, di scansione del tuo forum. Se si esclude un bot dei motori di ricerca, il forum non apparirà nel motore di ricerca che utilizza tale bot. Altri bot volte strisciare forum per rottami di contenuti e forum proprietari a volte scelgono di bloccare questi bot. La maggior parte dei bot seguono un protocollo standard di sapere se o non possono strisciare un sito web. I proprietari del sito pongono questo protocollo in un file "robots.txt", che è la prima cosa che la maggior parte dei bot cercano quando raggiungono un sito.
1 Tipo "yoursiteurl.com/robots.txt" nella barra degli indirizzi del browser e premere "Invio". Se si dispone di un file lì, verrà visualizzato nel browser. Connettersi al sito tramite FTP e scaricare una copia del file "robots.txt" al computer. Aprire in un editor di testo. Se non si dispone di un file a quell'indirizzo, aprire il Blocco note, o altro editor di testo, e creare un nuovo file.
2 Tipo "User-agent: nome del bot per fermare" e premere "Invio". Per interrompere tutti i bot dal strisciando forum, digitare un asterisco al posto del nome di un particolare bot.
3 Tipo "Non consentire: / forum /" sostituzione "Forum" con l'attuale directory del tuo forum sul tuo sito. Questo dice il particolare bot non eseguire la scansione nulla in quella directory.
4 Salvare il file. Se si tratta di un nuovo file, il nome "robots.txt". Riconnettersi al tuo sito con un client FTP e caricare il file robots.txt nella directory di livello superiore sul tuo sito. Se richiesto, accettare di sovrascrivere il file robots.txt preesistente.