February 21
Quanto spesso spider di Google eseguono la scansione di un sito dipende da un sacco di diversi fattori. Ad esempio, un grande sito con contenuti regolarmente aggiornati tende a ricevere visite ragno più spesso di un piccolo sito statico. Secondo alcune stime, la scansione in profondità generale in una sola volta al mese, ma i blog e altri siti dinamici possono sperimentare Striscia molte volte al giorno, a volte pochi minuti dopo il nuovo contenuto entra nel vivo.
Il ragno di Google, noto anche come Googlebot, segue una serie di algoritmi che indicano che la frequenza con cui eseguire la scansione di un sito. Questi algoritmi sono tenuti segreti da parte di Google, anche se la società suggerisce che tipo di sito potrebbe attirare il Googlebot. Secondo Brad Hill a Dummies.com, spider di Google eseguono la scansione del Web su due livelli: profondi e freschi. Una scansione profonda può accadere solo una volta ogni 30 giorni. Quindi, nuove pagine statiche, in particolare quelli a cui non si hanno collegamenti ipertestuali in entrata, non può comparire nell'indice di Google per settimane. Tuttavia, ragni sfiorano anche il Web in un "crawl fresco", notando nuove pagine tramite link e ping.
Non è possibile indicare Googlebot quando tornare alla scansione del tuo sito. Tuttavia, si possono fare cose per incoraggiare spider di Google per tornare più o meno spesso. Ad esempio, l'aggiunta di nuovi contenuti almeno tre volte a settimana aiuta ad aumentare la frequenza di scansione di Google ragno, secondo Search Engine Journal. Questo ha il vantaggio di una possibile aiutare il vostro rank del sito nei risultati di ricerca di Google per più termini di ricerca. Allo stesso modo, in modo che non avete il contenuto del sito duplicati e dispone di un server Web affidabile per il tuo sito può contribuire a promuovere la scansione frequente.
Il file robots.txt è un semplice file tuo può lasciare sul server che indica Google le pagine che si può e non può indicizzare. Mentre questo non può direttamente aumentare la frequenza del ragno striscia, si può fare ricerca per indicizzazione più efficiente. Ad esempio, si può dire al Googlebot di ignorare una pagina particolare, come ad esempio uno con contenuti molto simili. Questo può aiutare ad evitare eventuali problemi scansione che potrebbero influenzare la regolarità delle vostre visite in loco.
Nonostante incomprensioni comuni, velocità di scansione si riferisce alla velocità di passo d'uomo Googlebot, non la frequenza. Se spider di Google scansione del tuo sito troppo veloce che potrebbe assorbire un po 'della vostra larghezza di banda. Google utilizza quindi un algoritmo per decidere quante pagine e la velocità di scansione ogni volta che colpisce il vostro sito. È possibile modificare le impostazioni in Google Webmaster Tools per aumentare o diminuire la velocità della scansione Googlebot.