User agent e regras de robots.txt do Google-Agent

O Google-Agent é usado por agentes na infraestrutura do Google que navegam na web e agem a pedido de um usuário.

A pedido do usuário Pode ignorar o robots.txt Google

User agent

O Google documenta só o nome: os pedidos contêm “Google-Agent”.

Regras de robots.txt para o Google-Agent

Cole um dos blocos no robots.txt na raiz do seu domínio. A mudança pode levar até um dia para ser lida.

Bloquear o Google-Agent

Bloqueia todos os caminhos para o Google-Agent. Isso pede que O Google não busque suas páginas quando os usuários pedirem, embora O Google diga que buscas acionadas pelo usuário podem nem sempre seguir o robots.txt.

robots.txt
User-agent: Google-Agent
Disallow: /

Permitir o Google-Agent

Deixa o Google-Agent buscar todos os caminhos, diga o que disser o “User-agent: *”.

robots.txt
User-agent: Google-Agent
Allow: /

Bom saber

O Google diz que buscadores acionados pelo usuário geralmente ignoram o robots.txt, porque uma pessoa pediu a página.

Perguntas sobre o Google-Agent

O que é o Google-Agent?

O Google-Agent é usado por agentes na infraestrutura do Google que navegam na web e agem a pedido de um usuário.

Como bloqueio o Google-Agent?

Acrescente “User-agent: Google-Agent” e “Disallow: /” ao seu robots.txt. Isso pede que O Google não busque suas páginas quando os usuários pedirem, embora O Google diga que buscas acionadas pelo usuário podem nem sempre seguir o robots.txt.

O Google-Agent respeita o robots.txt?

O Google diz que, como uma pessoa inicia esses pedidos, as regras do robots.txt podem não valer para o Google-Agent.

Qual é o user agent do Google-Agent?

O Google documenta o nome “Google-Agent”, que aparece nos pedidos.

Como confirmo pedidos do Google-Agent?

Compare o IP do pedido com a lista publicada do Google (https://developers.google.com/static/search/apis/ipranges/user-triggered-fetchers-google.json). Só o user agent pode ser falsificado.

Fonte: developers.google.com, conferida em 17 de nov de 2026. Diretório de crawlers de IA

Arquivos são o começo. Respostas são o resultado.

As perguntas dos seus compradores em oito motores de IA, na sua agenda, com histórico. Grátis por 7 dias.