Errori di scansione: cosa significano e come risolverli in fretta

Gli errori di scansione in Google Search Console indicano che Googlebot ha provato a raggiungere il tuo sito, o una pagina specifica, senza riuscire a completare l'operazione. La causa è di solito un problema temporaneo del DNS, un timeout del server o un file robots.txt non raggiungibile. Controlla prima di tutto se l'errore riguarda l'intero sito o un solo URL, perché da questo dipende la soluzione.

Prima di mettere mano a Search Console, puoi escludere il robots.txt in meno di un minuto. Il Robots.txt Tester gratuito verifica se il tuo file robots.txt si carica, restituisce una risposta 200 pulita e non blocca per errore Googlebot, ovvero esattamente ciò che fa comparire il messaggio "robots.txt non raggiungibile". Se lì il file si carica senza problemi, il guaio è quasi certamente sul server.

Qual è la vera causa dei tuoi errori di scansione

Google ha tracciato questa distinzione anni fa: errori del sito contro errori degli URL. Gli errori del sito non dipendono da una sola pagina. Sono errori di risoluzione DNS, problemi di connessione al server e problemi nel recupero del robots.txt, che fermano Googlebot prima ancora che richieda un solo URL. Gli errori degli URL si verificano dopo che Googlebot ha raggiunto il tuo server e il robots.txt, ma incontra un ostacolo su una pagina specifica, come un 404 o un errore del server.

Tipo di errore	Cosa significa	Causa tipica	Soluzione
Robots.txt non raggiungibile	Googlebot non riesce a recuperare il robots.txt	Downtime del server, firewall che blocca l'intervallo di IP di Googlebot, risposta lenta	Verifica che il file restituisca lo stato 200 e si carichi velocemente; inserisci Googlebot in whitelist se c'è di mezzo un firewall
Errore DNS	Googlebot non riesce a risolvere il tuo dominio	Configurazione DNS errata, record dei nameserver scaduti	Controlla la propagazione DNS e le impostazioni dei nameserver con il tuo hosting
Connettività del server	Googlebot si connette ma va in timeout	Server sovraccarico, rate limiting troppo aggressivo	Controlla i tempi di risposta del server e alza i limiti di frequenza per lo user agent di Googlebot
404 / soft 404	Una pagina specifica non esiste o restituisce contenuti scarsi	Pagina eliminata, link rotto, destinazione di reindirizzamento sbagliata	Ripristina la pagina, reindirizzala con un 301 o rimuovi il link morto
Errore del server (5xx)	Il server ha restituito un errore su quell'URL	Bug nel codice, timeout del database, conflitto tra plugin	Controlla i log del server per quel percorso e correggi il bug di fondo

Come risolvere gli errori di scansione in Google Search Console

Controlla prima il report robots.txt

In Search Console apri Impostazioni (Settings) e trova il report robots.txt. Mostra l'ultima volta in cui Google ha letto il file con successo e segnala eventuali errori di recupero. Un errore in questo punto conferma un errore del sito, e la soluzione si trova sul server o lato hosting, non nella sintassi del file.

Guarda le statistiche di scansione e lo stato dell'host

Sempre in Impostazioni, apri il report Statistiche di scansione (Crawl stats). Suddivide le richieste di scansione per codice di risposta e mostra lo Stato dell'host (Host status), che segnala a colpo d'occhio problemi di DNS, connettività e robots.txt. Un segnale rosso qui significa che Googlebot fatica in generale a raggiungere il tuo server, un problema più ampio di quello di una singola pagina.

Risolvi i singoli errori degli URL

Per una singola pagina con problemi, usa lo strumento Controllo URL (URL Inspection). Incolla l'URL, controlla il suo stato di indicizzazione e guarda esattamente cosa ha visto Googlebot. Dopo aver rimosso la causa (una pagina ripristinata, un reindirizzamento corretto, un bug del server risolto), usa l'opzione di richiesta dello strumento per chiedere a Google di scansionarla di nuovo. Se non sei ancora sicuro del motivo per cui Google non scansiona alcune pagine, questa guida passo passo per far scansionare il tuo sito a Google copre l'aspetto più ampio del problema legato all'indicizzazione.

Quando bastano gli strumenti di Search Console e quando no

Per una singola pagina che restituisce un 404 isolato, Search Console basta e avanza: ispeziona l'URL, correggi il link o il reindirizzamento, richiedi una nuova scansione. Gli strumenti gratuiti coprono bene questo caso.

I problemi ricorrenti che riguardano tutto il sito sono invece il punto in cui non bastano. Se il robots.txt continua a risultare non raggiungibile a intervalli regolari, o la frequenza di scansione di Googlebot continua a calare, hai davanti uno schema che interessa l'intero sito. Controlla direttamente i log del server, verifica i limiti di frequenza a livello di hosting ed esamina come la tua CDN gestisce le richieste di Googlebot. Se sembra che Google si stia ritirando del tutto dal tuo sito invece di segnalare errori, a volte la causa è una direttiva crawl-delay che Googlebot ignora in modo sfavorevole, ed è bene escluderla prima di dare la colpa al server.

Errori comuni

• Richiedere una nuova scansione prima di aver risolto qualcosa. Riproduce lo stesso errore.
• Trattare ogni 404 come urgente. Alcuni sono vecchie pagine che nessuno linka più, quindi dai la priorità a quelle con traffico o backlink.
• Bloccare per sbaglio l'IP di Googlebot con un plugin di sicurezza o una regola del firewall pensata per i bot dannosi.
• Dare per scontato che il problema sia la sintassi del robots.txt quando il server non risponde affatto alla richiesta.
• Ignorare il report Stato dell'host e guardare solo i singoli errori degli URL, nascondendo uno schema che riguarda tutto il sito.

Domande frequenti

Cosa significa "robots.txt non raggiungibile" in Search Console?

Googlebot ha provato a recuperare il tuo file robots.txt e non ci è riuscito: il server non ha risposto, è andato in timeout o ha restituito un errore invece del contenuto del file. È classificato come errore del sito perché può bloccare la scansione dell'intero dominio.

Quanto tempo ci mette Google a scansionare di nuovo dopo che ho risolto un errore?

Non c'è una tempistica fissa. Google torna a visitare le pagine in base alla priorità di scansione di ciascuna e al crawl budget complessivo del tuo sito. Richiedere l'indicizzazione tramite Controllo URL può accelerare i tempi, ma non garantisce una nuova scansione immediata.

Gli errori di scansione danneggiano il mio posizionamento?

Pochi 404 isolati di solito no. Un errore che riguarda tutto il sito, come un robots.txt non raggiungibile per un periodo prolungato, può impedire a Google di scansionare contenuti nuovi o aggiornati, e questo con il tempo incide sulla visibilità.

Qual è la differenza tra errori di scansione ed errori di indicizzazione?

Un errore di scansione significa che Googlebot non è riuscito affatto a recuperare la pagina o il file. Un errore di indicizzazione significa che Googlebot ha recuperato la pagina senza problemi ma ha scelto di non aggiungerla all'indice, spesso per via di un tag noindex, di contenuti duplicati o di un canonical che punta altrove.

Un errore di scansione può sparire e poi ripresentarsi?

Sì. Se la causa è intermittente, per esempio un server che va in timeout solo sotto carico, l'errore può sparire con una scansione andata a buon fine e ricomparire alla successiva. In questo caso controlla le prestazioni del server oltre alla pagina interessata.

Controlla oggi stesso il tuo report robots.txt

Parti dal report robots.txt e dalle Statistiche di scansione in Search Console, perché è da lì che un messaggio "robots.txt non raggiungibile" risale alla sua vera causa. Se vuoi capire più in fretta se il problema è il file prima di toccare le impostazioni del server, passa prima la pagina nel Robots.txt Tester gratuito. E se gli errori di scansione continuano a comparire in tutto il sito e non su una sola pagina, parla con il team e ottieni un report che mostra esattamente cosa sta bloccando Googlebot.

Fonti

• Crawl Errors: The Next Generation
• Issues related to website crawling and indexing