X-Robots-Tag: como verificar, configurar e corrigir (2026)
Por Toy Wen Da, Cofundador · Atualizado em · 7 min de leitura
Traduzido do original em inglês. Ler em inglês
Um X-Robots-Tag é um cabeçalho de resposta HTTP que informa aos mecanismos de busca se devem indexar ou seguir uma página ou arquivo. Como ele viaja na resposta do servidor, e não no HTML, funciona em PDFs, imagens e qualquer outro tipo de arquivo. Para alterá-lo, edite a configuração do servidor ou as configurações de cabeçalho do seu CMS e depois confirme o resultado verificando a resposta ao vivo.
Antes de mudar qualquer coisa, veja o que o seu site está enviando agora. O verificador de meta tags gratuito busca os cabeçalhos de resposta e as meta tags ao vivo de qualquer URL. Assim, de uma só vez, você vê se há um X-Robots-Tag, qual diretiva ele traz e se ele entra em conflito com uma meta tag robots na mesma página.
O que o X-Robots-Tag faz
A tag traz uma ou mais diretivas, separadas por vírgula, na resposta HTTP. Os mecanismos de busca as leem do mesmo jeito que leem uma meta tag robots, mas, como a instrução fica no cabeçalho, ela vale para qualquer arquivo que o servidor entregue, não só para páginas HTML.
Não dá para colocar uma meta tag dentro de um PDF ou de um JPEG. Por isso, se você precisa manter um arquivo para download ou uma imagem fora dos resultados de busca, o X-Robots-Tag é a sua única opção.
As diretivas que você mais vai usar
| Diretiva | O que faz | Caso de uso típico |
|---|---|---|
noindex |
Mantém a página ou o arquivo fora dos resultados de busca | Relatórios internos, páginas de teste (staging), PDFs duplicados |
nofollow |
Diz aos rastreadores para não seguirem os links daquela URL | Páginas com links externos que você não quer que transmitam autoridade |
noarchive |
Impede o Google de mostrar uma cópia em cache | Páginas com preços ou conteúdo sensíveis ao tempo |
nosnippet |
Bloqueia a prévia de texto ou imagem nos resultados | Conteúdo que você não quer ver citado em trechos na SERP |
unavailable_after |
Remove a página dos resultados após uma data definida | Ofertas por tempo limitado, anúncios expirados |
Como configurar no seu próprio site

Os passos dependem do seu servidor, mas o padrão é o mesmo em todo lugar: adicione o cabeçalho no nível do servidor e depois verifique na URL ao vivo.
No Apache (.htaccess)
- Abra o arquivo
.htaccessdo seu site. - Escolha o tipo de arquivo que você quer controlar, por exemplo PDFs:
<Files ~ "\.pdf$"> Header set X-Robots-Tag "noindex, nofollow" </Files> - Salve e envie o arquivo para o diretório raiz do seu servidor.
- Recarregue a URL afetada e confirme que o cabeçalho aparece na resposta.
No Nginx
- Abra a configuração do seu bloco de servidor (server block).
- Adicione uma regra de location para o tipo de arquivo, por exemplo imagens:
location ~* \.(png|jpe?g|gif)$ { add_header X-Robots-Tag "noindex"; } - Recarregue o Nginx para que a configuração entre em vigor.
No WordPress ou em um CMS gerenciado
A maioria das plataformas de CMS trata as meta tags robots pelas configurações de página de um plugin de SEO, o que é mais simples para páginas e posts comuns. Recorra ao X-Robots-Tag quando precisar bloquear PDFs, downloads ou outros arquivos que não sejam HTML e que um plugin não consegue alcançar. Se o seu CMS não oferece controle de cabeçalhos, você geralmente terá de editar a configuração do servidor pelo gerenciador de arquivos da sua hospedagem ou pedir ao seu desenvolvedor que adicione a regra.
Antes e depois de qualquer mudança, confirme que o seu arquivo robots.txt não está bloqueando a mesma URL, porque os rastreadores que não conseguem acessar uma página nunca veem a diretiva que está nela. Passe a URL por um testador de robots.txt para descartar esse problema. Se precisar refazer o arquivo do zero, um gerador de robots.txt cria um arquivo válido, sem os erros de sintaxe que causam bloqueios acidentais do site inteiro.
Robots.txt, meta robots ou X-Robots-Tag?
Essas três ferramentas parecem iguais e são confundidas o tempo todo, mas cada uma resolve um problema diferente.
| Ferramenta | Onde fica | O que controla | Melhor para |
|---|---|---|---|
| Robots.txt | Arquivo de texto na raiz | O que os rastreadores podem acessar | Bloquear o rastreamento de pastas ou seções inteiras |
| Meta tag robots | Dentro do <head> do HTML |
A indexação de uma página HTML | Controle simples, página por página, em páginas comuns |
| X-Robots-Tag | Cabeçalho de resposta HTTP | A indexação de qualquer tipo de arquivo | PDFs, imagens, grandes lotes de URLs por padrão |
O robots.txt governa o rastreamento, enquanto as outras duas governam a indexação. Uma página pode ser rastreável e mesmo assim ficar fora dos resultados com noindex. Já uma página com o rastreamento bloqueado nunca tem a sua instrução de indexação lida.
Quando as suas próprias ferramentas bastam e quando não bastam
Um verificador de cabeçalhos gratuito basta para uma única URL: você acabou de fazer uma mudança e quer confirmar que ela funcionou, ou alguém avisa que uma página está aparecendo na busca e não deveria. O verificador de meta tags gratuito resolve isso em segundos.
Ele deixa de bastar quando o problema se espalha pelo site inteiro, como uma migração de servidor que apagou as suas regras de cabeçalho, uma configuração de CDN aplicada a todos os tipos de arquivo ou uma atualização de plugin do WordPress que mudou o comportamento padrão sem avisar. Nesse caso, você precisa descobrir qual das centenas ou milhares de páginas ganhou um noindex indesejado, e uma auditoria técnica recorrente faz isso melhor do que uma checagem manual por amostragem, já que uma olhada única não pega uma regressão que acontece no mês que vem.
Erros comuns
- Definir
noindexno robots.txt e no X-Robots-Tag ao mesmo tempo. Se o robots.txt bloqueia a URL, o Google nunca lê o cabeçalho, e a diretiva de indexação fica sem uso. - Aplicar o cabeçalho a um tipo de arquivo inteiro quando só alguns arquivos precisam dele. Uma regra geral para PDFs pode desindexar sem querer documentos que você queria que fossem encontrados.
- Esquecer de verificar depois de uma migração de servidor. Novos ambientes de hospedagem costumam eliminar regras de cabeçalho personalizadas sem avisar.
- Confundir
nofollowna página comrel="nofollow"em um link. O primeiro vale para a página toda e o segundo é específico de um link. - Presumir que uma configuração de plugin cobre arquivos que não são HTML. A maioria dos plugins de SEO mexe apenas nas meta tags de páginas e posts, não em PDFs ou imagens servidos diretamente.
Perguntas frequentes
O X-Robots-Tag funciona do mesmo jeito que uma meta tag robots?
Eles aceitam as mesmas diretivas, mas o X-Robots-Tag é um cabeçalho HTTP definido no nível do servidor, enquanto a meta tag robots é uma marcação HTML dentro do <head> da página. O cabeçalho também funciona em arquivos que não são HTML, onde as meta tags não alcançam.
Posso usar o X-Robots-Tag e o robots.txt juntos?
Sim, mas só se o robots.txt ainda permitir o rastreamento da URL. Se a página estiver bloqueada (disallow) lá, os rastreadores nunca chegam até ela para ler a diretiva do X-Robots-Tag.
Como verifico se uma página tem um X-Robots-Tag?
Veja os cabeçalhos de resposta HTTP daquela URL. As ferramentas para desenvolvedores do navegador, uma extensão de navegador para inspecionar cabeçalhos ou um verificador dedicado mostram a resposta bruta, e qualquer diretiva X-Robots-Tag estará nela.
Adicionar noindex remove uma página do Google imediatamente?
Não. O Google precisa rastrear a URL novamente e processar a diretiva antes de a página sair dos resultados, o que pode levar de alguns dias a algumas semanas, dependendo da frequência com que a página é rastreada.
O que acontece se eu definir diretivas conflitantes na mesma página?
Os mecanismos de busca geralmente aplicam a diretiva mais restritiva quando há conflito, mas confiar nisso é arriscado. Limpe as regras conflitantes em vez de presumir que a mais rigorosa sempre vence.
Tenha uma visão completa dos sinais de indexação do seu site
Uma verificação pontual informa sobre uma única URL; ela não diz se a mesma configuração incorreta está se repetindo em silêncio pelo site. Se você quer um panorama completo de como as suas páginas são indexadas, rastreadas e entregues, incluindo o X-Robots-Tag, fale com a equipe e receba um relatório de exemplo feito com os dados do seu próprio site.
Fontes
Sobre o autor
O SearchBlueprint pesquisou, escreveu e avaliou este artigo com o mesmo pipeline de conteúdo que nossos clientes usam nos próprios sites. A nota que aparece na assinatura é a que nosso mecanismo de conteúdo deu a esta página antes de ela ser publicada. Nada aqui passa por revisão manual, e esse é justamente o ponto: é o resultado do produto, publicado onde qualquer pessoa pode conferir.