Erros de rastreamento: o que significam e como corrigi-los rápido
Por Toy Wen Da, Cofundador · Atualizado em · 6 min de leitura
Traduzido do original em inglês. Ler em inglês
Os erros de rastreamento no Google Search Console indicam que o Googlebot tentou acessar o seu site, ou uma página específica, e não conseguiu concluir o acesso. A causa costuma ser uma falha de DNS, um timeout do servidor ou um arquivo robots.txt inacessível. Primeiro, verifique se o erro afeta o site inteiro ou apenas uma URL, porque isso define a correção.
Antes de vasculhar o Search Console, você pode descartar o robots.txt em menos de um minuto. O Robots.txt Tester gratuito verifica se o seu arquivo robots.txt carrega, retorna uma resposta 200 limpa e não está bloqueando o Googlebot por acidente, que é exatamente o que dispara a mensagem "robots.txt inacessível". Se o arquivo carrega normalmente ali, o problema quase certamente está no servidor.
O que realmente causa os seus erros de rastreamento
O Google traçou essa linha anos atrás: erros de site versus erros de URL. Os erros de site não estão ligados a uma única página. São falhas de resolução de DNS, problemas de conectividade com o servidor e problemas para buscar o robots.txt, que impedem o Googlebot antes mesmo de ele solicitar uma única URL. Os erros de URL acontecem depois que o Googlebot já alcançou o seu servidor e o robots.txt, mas esbarra em um problema em uma página específica, como um 404 ou um erro de servidor.
| Tipo de erro | O que significa | Causa típica | Correção |
|---|---|---|---|
| Robots.txt inacessível | O Googlebot não consegue buscar o robots.txt | Queda do servidor, firewall bloqueando a faixa de IPs do Googlebot, resposta lenta | Confirme que o arquivo retorna o status 200 e carrega rápido; coloque o Googlebot na lista de permissões se houver um firewall envolvido |
| Erro de DNS | O Googlebot não consegue resolver o seu domínio | Configuração incorreta de DNS, registros de servidores de nomes expirados | Verifique a propagação do DNS e as configurações dos servidores de nomes com a sua hospedagem |
| Conectividade com o servidor | O Googlebot se conecta, mas atinge o tempo limite | Servidor sobrecarregado, limitação de taxa agressiva | Verifique os tempos de resposta do servidor e aumente os limites de taxa para o user agent do Googlebot |
| 404 / soft 404 | Uma página específica não existe ou retorna conteúdo irrelevante | Página excluída, link quebrado, destino de redirecionamento incorreto | Restaure a página, faça um redirecionamento 301 ou remova o link morto |
| Erro de servidor (5xx) | O servidor retornou um erro nessa URL | Bug no código, timeout do banco de dados, conflito de plugins | Verifique os logs do servidor para esse caminho e corrija o bug de origem |
Como corrigir erros de rastreamento no Google Search Console
Verifique primeiro o relatório do robots.txt
No Search Console, abra Configurações (Settings) e encontre o relatório do robots.txt. Ele mostra a última vez que o Google leu o arquivo com sucesso e sinaliza qualquer falha na busca. Uma falha ali confirma um erro de site, e a correção está no seu servidor ou na hospedagem, não na sintaxe do arquivo.
Veja as Estatísticas de rastreamento e o status do host
Ainda em Configurações, abra o relatório Estatísticas de rastreamento (Crawl stats). Ele detalha as solicitações de rastreamento por código de resposta e mostra o Status do host (Host status), que sinaliza problemas de DNS, conectividade e robots.txt de relance. Um alerta vermelho aqui significa que o Googlebot está com dificuldade para acessar o seu servidor de modo geral, um problema mais amplo do que qualquer página isolada.
Corrija erros de URL individuais
Para uma única página com problema, use a ferramenta de Inspeção de URL (URL Inspection). Cole a URL, confira o status de indexação e veja exatamente o que o Googlebot enxergou. Depois de corrigir a causa (uma página restaurada, um redirecionamento corrigido, um bug de servidor resolvido), use a opção de solicitação da ferramenta para pedir ao Google que a rastreie de novo. Se você ainda não sabe por que o Google não rastreia certas páginas, este passo a passo para fazer o Google rastrear o seu site aborda o lado mais amplo da indexação do problema.
Quando as ferramentas do Search Console bastam e quando não bastam
Para uma única página com um 404 pontual, o Search Console resolve de sobra: inspecione a URL, corrija o link ou o redirecionamento e solicite um novo rastreamento. As ferramentas gratuitas dão conta disso muito bem.
Os problemas recorrentes, que afetam o site todo, são onde elas ficam devendo. Se o robots.txt fica inacessível de tempos em tempos, ou se a taxa de rastreamento do Googlebot não para de cair, você está diante de um padrão que atinge o site inteiro. Verifique diretamente os logs do servidor, revise os limites de taxa no nível da hospedagem e audite como a sua CDN trata as solicitações do Googlebot. Se o Google parece estar se afastando do seu site por completo, em vez de apresentar erros, uma diretiva crawl-delay que o Googlebot ignora de forma prejudicial às vezes é a causa, e vale descartá-la antes de culpar o servidor.
Erros comuns
- Solicitar um novo rastreamento antes de corrigir qualquer coisa. Isso reproduz o mesmo erro.
- Tratar todo 404 como urgente. Alguns são páginas antigas para as quais ninguém mais aponta links, então priorize as que têm tráfego ou backlinks.
- Bloquear o IP do Googlebot por acidente com um plugin de segurança ou uma regra de firewall pensada para bots maliciosos.
- Presumir que a sintaxe do robots.txt é o problema quando o servidor nem está respondendo à solicitação.
- Ignorar o relatório de Status do host e olhar apenas para os erros de URL individuais, o que esconde um padrão que afeta o site todo.
Perguntas frequentes
O que significa "robots.txt inacessível" no Search Console?
O Googlebot tentou buscar o seu arquivo robots.txt e não conseguiu: o servidor não respondeu, atingiu o tempo limite ou retornou um erro em vez do conteúdo do arquivo. É classificado como um erro de site porque pode bloquear o rastreamento de todo o seu domínio.
Quanto tempo o Google leva para rastrear de novo depois que eu corrijo um erro?
Não há um prazo fixo. O Google volta com base na prioridade de rastreamento da página e no orçamento de rastreamento geral do seu site. Solicitar a indexação pela Inspeção de URL pode acelerar o processo, mas não garante um novo rastreamento imediato.
Os erros de rastreamento prejudicam o meu ranqueamento?
Alguns 404 isolados normalmente não prejudicam. Um erro que afeta o site todo, como um robots.txt inacessível por um período prolongado, pode impedir o Google de rastrear conteúdo novo ou atualizado, o que afeta a visibilidade com o tempo.
Qual é a diferença entre erros de rastreamento e erros de indexação?
Um erro de rastreamento significa que o Googlebot não conseguiu buscar a página ou o arquivo. Um erro de indexação significa que o Googlebot buscou a página normalmente, mas optou por não adicioná-la ao índice, muitas vezes por causa de uma tag noindex, de conteúdo duplicado ou de uma canonical apontando para outro lugar.
Um erro de rastreamento pode sumir e voltar?
Sim. Se a causa é intermitente, como um servidor que só atinge o tempo limite sob carga, o erro pode desaparecer em um bom rastreamento e reaparecer no seguinte. Quando isso acontece, verifique o desempenho do servidor e também a página afetada.
Verifique hoje o seu relatório do robots.txt
Comece pelo relatório do robots.txt e pelas Estatísticas de rastreamento no Search Console, já que é ali que uma mensagem de "robots.txt inacessível" revela a causa real. Se você quer saber mais rápido se o arquivo é o problema antes de mexer nas configurações do servidor, passe a página primeiro pelo Robots.txt Tester gratuito. E, se os erros de rastreamento continuam aparecendo no site todo e não em uma só página, fale com a equipe e receba um relatório que mostra exatamente o que está bloqueando o Googlebot.
Sobre o autor
O SearchBlueprint pesquisou, escreveu e avaliou este artigo com o mesmo pipeline de conteúdo que nossos clientes usam nos próprios sites. A nota que aparece na assinatura é a que nosso mecanismo de conteúdo deu a esta página antes de ela ser publicada. Nada aqui passa por revisão manual, e esse é justamente o ponto: é o resultado do produto, publicado onde qualquer pessoa pode conferir.