Crawl Budget: o que é e como otimizar para ranquear mais rápido
Você publicou um conteúdo bom, mandou para indexação e esperou. Uma semana, duas, um mês. Nada de impressão no Search Console. É nessa hora que muita gente culpa o conteúdo, quando o problema pode estar em como o Google gasta o tempo que dedica ao seu site.
Crawl budget é a quantidade de URLs que o Googlebot consegue e quer rastrear no seu site em um determinado período. Em português, dá para chamar de orçamento de rastreamento. Ele resulta de dois fatores: a capacidade do seu servidor de responder sem sofrer e o interesse do Google em ver o que você publica.
Neste guia explico o que é crawl budget na prática, quando ele realmente importa (menos vezes do que se fala), como diagnosticar e como otimizar o rastreamento do Googlebot com ações que uso em auditorias técnicas. Atualizado em 9 de novembro de 2026.
Suspeita de problema de rastreamento? Uma auditoria SEO começa justamente por cobertura, logs e arquitetura de links.
O que é crawl budget e como o Google define esse orçamento

O que é crawl budget, de forma direta: é o limite prático de requisições que o Googlebot faz ao seu domínio. O Google não rastreia tudo, o tempo todo, em todos os sites. Ele precisa decidir onde gastar recursos, e a documentação oficial, o guia do Google para gerenciar crawl budget em sites grandes, descreve esse orçamento como a combinação de capacidade e demanda de rastreamento.
Por que isso importa para o ranqueamento? Porque uma página que o Googlebot não rastreia não entra no índice, e página fora do índice não aparece nos resultados. Rastreamento e indexação são etapas separadas, e confundi-las é um dos erros mais comuns que vejo.
Capacidade de rastreamento: o quanto o Googlebot pode
A capacidade depende da saúde do servidor. Se o site responde rápido e sem erro, o Googlebot pode aumentar o ritmo. Se aparecem respostas lentas ou códigos 500, 503 e 429, ele reduz as requisições para não derrubar o servidor.
Na prática: um servidor lento limita o rastreamento antes de qualquer outro fator. Cuidar de hospedagem, cache e Core Web Vitals beneficia usuário e Googlebot ao mesmo tempo.
Demanda de rastreamento: o quanto o Google quer
A demanda reflete o interesse do Google no seu conteúdo. Páginas populares, com links apontando para elas, e conteúdos atualizados com frequência tendem a ser revisitados mais vezes. URLs antigas, sem links e sem mudança podem ficar semanas sem visita.
Aqui entra uma opinião que defendo há anos: backlinks ainda importam muito, inclusive para rastreamento. Quem investe em link building aumenta a demanda e, de brinde, a velocidade com que o Google descobre o que você publica.
O que mudou: o fim da ferramenta de limite de taxa de rastreamento
Antigamente era possível pedir, no Search Console, uma redução da velocidade de rastreamento. O Google aposentou essa ferramenta em janeiro de 2024, como explicou no anúncio oficial sobre o fim do Crawl Rate Limiter. Hoje o ajuste é automático, e em casos excepcionais a recomendação é usar os códigos de resposta do servidor.
Isso desatualiza muito conteúdo antigo na internet que ainda ensina o caminho pelas configurações do Search Console. Se você ler um tutorial que manda “ajustar a velocidade de rastreamento” por lá, desconfie da data.

Seu site precisa se preocupar com crawl budget?
Na maioria dos casos, não. A própria documentação do Google afirma que o gerenciamento de crawl budget é voltado para sites muito grandes (da ordem de um milhão de páginas ou mais com atualização semanal) ou com dezenas de milhares de páginas mudando todos os dias, além de sites com muitas URLs marcadas como “Descoberta, mas não indexada”.
Para o dono de um site de serviços com algumas dezenas de páginas, o gargalo quase sempre é outro: conteúdo fraco, falta de links ou problema de indexação. Antes de mexer em crawl budget, passe pela checklist de por que o site não aparece no Google.
| Tipo de site | Crawl budget é prioridade? | O que olhar primeiro |
|---|---|---|
| Site institucional pequeno | Raramente | Conteúdo, links e indexação |
| Blog com publicação regular | Às vezes | Tempo até a primeira impressão, links internos |
| E-commerce com filtros | Sim | Parâmetros, facetas, canonicals |
| Portal com milhões de URLs | Sim, é crítico | Logs, sitemaps segmentados, desempenho do servidor |
Há uma exceção que eu considero importante: mesmo em site pequeno, URLs geradas automaticamente (busca interna, parâmetros, calendários) podem criar milhares de caminhos inúteis. Nesse caso o problema existe, só não pelo tamanho “oficial” do site.
Como identificar problemas de crawl budget

O diagnóstico responde a uma pergunta: o Googlebot está gastando suas visitas nas páginas certas? Quatro fontes de dados dão a resposta, da mais acessível à mais precisa.
Relatório de estatísticas de rastreamento
No Google Search Console, em Configurações, abra “Estatísticas de rastreamento”. Ele mostra o total de solicitações, o tempo médio de resposta, os tipos de arquivo rastreados e os códigos de status devolvidos. Picos de erro e tempo de resposta crescente são sinais de alerta.
Relatório de indexação de páginas
Em Indexação, Páginas, observe quantas URLs estão em “Descoberta, mas não indexada no momento” e “Rastreada, mas não indexada no momento”. O primeiro status pode indicar que o Google encontrou a URL, mas ainda não a priorizou; o segundo costuma apontar para qualidade, não para orçamento.
Rastreamento próprio com Screaming Frog
Rastreie o site com o Screaming Frog e liste URLs com parâmetros, redirecionamentos em cadeia, páginas com erro 4xx e conteúdo duplicado. A soma dessas URLs é o desperdício potencial, aquilo que o Googlebot pode estar visitando sem retorno.
Análise de logs do servidor
Logs são a fonte mais fiel. Filtre as requisições do Googlebot (e confirme que são reais, porque há bots que fingem ser ele) e veja onde ele gasta as visitas. É comum descobrir que boa parte vai para parâmetros, busca interna e arquivos que ninguém queria rastreados.
Ação: antes de otimizar, anote a data de publicação e a data da primeira impressão de três posts recentes. Esse intervalo é seu indicador de base.
Como otimizar crawl budget: 9 ações práticas

Como otimizar crawl budget? Em duas frentes: reduzir o desperdício e facilitar o caminho até as páginas importantes. As nove ações abaixo cobrem o que mais encontro em auditorias, na ordem em que costumam gerar resultado.
| Ação | Impacto típico | Esforço |
|---|---|---|
| Bloquear URLs inúteis no robots.txt | Alto em sites com parâmetros | Baixo |
| Corrigir redirecionamentos em cadeia | Médio | Médio |
| Eliminar erros 404 internos e soft 404 | Médio | Médio |
| Melhorar tempo de resposta do servidor | Alto | Médio a alto |
| Fortalecer links internos | Alto | Médio |
Ação 1: bloqueie no robots.txt o que não deve ser rastreado
URLs de busca interna, parâmetros de ordenação e filtros que não agregam valor devem ser bloqueadas no robots.txt. Um exemplo de regra: Disallow: /?s=. Teste antes de publicar, porque uma regra ampla demais pode bloquear páginas importantes.
Atenção: robots.txt impede o rastreamento, mas não remove do índice uma URL já indexada. São mecanismos diferentes.
Ação 2: entenda que noindex não economiza crawl budget
Este é um erro clássico. Uma página com noindex ainda precisa ser rastreada para o Google ler a instrução. O Google deixa claro na documentação que noindex não é ferramenta para controlar crawl budget. Se o objetivo é parar de gastar rastreamento, o caminho é bloquear, remover ou consolidar.
Ação 3: consolide duplicatas com canonical e redirecionamento
URLs diferentes com o mesmo conteúdo dividem a atenção do Googlebot. Use a tag canonical quando a duplicata precisa existir e o redirecionamento 301 quando ela não precisa. Lembre que canonical é uma sugestão, não uma ordem.
Ação 4: corrija redirecionamentos em cadeia
A → B → C → D obriga o Googlebot a seguir vários saltos até chegar ao destino. Mapeie as cadeias com o Screaming Frog e aponte a origem direto para o destino final. Em migrações, essa limpeza costuma render ganho rápido.
Ação 5: trate erros 404 e soft 404
Links internos que levam a páginas inexistentes desperdiçam requisições. Páginas removidas de forma definitiva devem retornar 404 ou 410, e as “soft 404” (páginas vazias que respondem 200) devem ser corrigidas. Veja o passo a passo em como resolver o erro 404.
Ação 6: mantenha o sitemap enxuto e atualizado
O sitemap XML deve listar apenas URLs indexáveis, com a data de modificação correta. Sitemap com páginas noindex, redirecionadas ou com erro confunde a priorização. Em sites grandes, vale dividir em vários arquivos por tipo de conteúdo para monitorar a indexação de cada grupo.
Ação 7: melhore o desempenho e a resposta do servidor
Servidor lento reduz a capacidade de rastreamento. Cache, boa hospedagem, compressão e redução de processamento por requisição ajudam. O Googlebot também aceita requisições condicionais, então servir corretamente cabeçalhos como ETag e Last-Modified permite responder “não mudou” sem reenviar a página inteira.
Ação 8: use links internos para guiar o Googlebot
Páginas órfãs, sem links apontando para elas, são rastreadas menos e descobertas mais tarde. Garanta que o conteúdo estratégico receba links de páginas fortes. O guia de link interno mostra como estruturar isso sem exagero.
Ação 9: cuide do JavaScript e da renderização
Sites que dependem de JavaScript para mostrar conteúdo e links exigem mais trabalho do Google, porque a renderização vem depois do rastreamento. Links que só existem depois da execução do script podem ser descobertos mais tarde. Veja os detalhes em JavaScript SEO.
Ação final: comece pelas ações 1, 4 e 8 em qualquer site. São as de melhor relação entre esforço e resultado.
Se o seu site tem muitas URLs geradas por filtros e parâmetros, o SEO técnico é o caminho para colocar ordem no rastreamento.
Crawl budget em e-commerce e sites de grande escala

E-commerce é o cenário em que crawl budget mais pesa. Filtros por cor, tamanho, preço e disponibilidade multiplicam as combinações de URL, e o Googlebot pode gastar a maior parte das visitas em listagens quase idênticas, deixando produtos novos para depois.
Navegação facetada e parâmetros de filtro
O Google recomenda, na documentação de crawl budget, controlar a navegação facetada. Em geral, isso significa decidir quais combinações têm demanda de busca real (e merecem ser indexáveis) e bloquear ou canonicalizar o resto. Uma combinação como “tênis de corrida masculino” pode valer uma página; “tênis, ordenado por preço, página 7” não vale.
Paginação sem desperdício
O Google não usa mais rel=prev/next como sinal de indexação, então a paginação precisa se sustentar por si: links claros entre páginas, URLs únicas e conteúdo relevante em cada uma. Paginações profundas, de dezenas de páginas, merecem avaliação de utilidade real.
Variações de produto e conteúdo duplicado
Produtos com variações em URLs separadas e descrições idênticas competem entre si. Consolide em uma URL principal ou use canonical coerente. O guia de SEO para e-commerce detalha a estrutura, e o serviço de SEO para e-commerce cobre a implementação.
Crawlers de IA também consomem seu servidor
Além do Googlebot, outros robôs, incluindo crawlers de plataformas de IA, fazem requisições ao seu site. Nos logs, vale separar quem acessa o quê. Se o tema GEO é do seu interesse, leia o guia de GEO SEO antes de decidir qualquer bloqueio.
Erros comuns ao mexer em crawl budget
Quem descobre o tema costuma sair bloqueando tudo. Já vi site perder tráfego porque uma regra de robots.txt foi escrita larga demais e atingiu diretórios inteiros de conteúdo. Mexer em rastreamento tem consequência, e por isso cada mudança precisa de teste, registro e plano de volta.
Bloquear CSS e JavaScript necessários para renderizar
Se o Googlebot não acessa os arquivos que montam a página, ele pode interpretar o layout e o conteúdo de forma errada. Bloqueie parâmetros e URLs inúteis, não os recursos que a página precisa para ser exibida. Depois de qualquer ajuste, use a inspeção de URL para ver como o Google renderiza a página.
Tratar crawl budget como fator de ranqueamento
Crawl budget não é fator de ranqueamento. Ele afeta se e quando o Google vê o seu conteúdo, não a posição que o conteúdo ocupa. Uma página rastreada com frequência não sobe por isso; ela apenas tem a chance de ser avaliada e atualizada mais rápido. Para entender o que de fato pesa nas posições, veja os principais fatores de ranqueamento do Google.
Otimizar sem medir antes
Sem o intervalo de indexação anotado antes, qualquer melhora vira impressão e não dado. Registre o estado inicial, aplique uma mudança por vez e compare depois de algumas semanas. Essa disciplina separa SEO técnico de tentativa e erro.
Roteiro de 30 dias para organizar o rastreamento
Quando um cliente pergunta por onde começar, eu proponho um roteiro curto, que cabe em um mês e não exige grande equipe de desenvolvimento. Ele funciona como ponto de partida; o ritmo real depende do tamanho do site.
Semana 1: diagnóstico
Exporte os dados do Search Console (indexação e estatísticas de rastreamento), faça um rastreamento completo com o Screaming Frog e, se houver acesso, separe uma amostra de logs. Ao final, você deve ter uma lista de URLs problemáticas agrupadas por tipo: parâmetros, duplicatas, erros e redirecionamentos.
Semana 2: limpeza de maior impacto
Ataque primeiro o que mais volume tem: regras de robots.txt para URLs de busca e parâmetros, correção das cadeias de redirecionamento e eliminação de links internos quebrados. Teste cada regra em ambiente seguro e registre a data de cada alteração.
Semana 3: sinais de prioridade
Revise o sitemap, reforce os links internos para as páginas estratégicas e consolide duplicatas com canonical ou 301. Aqui também vale revisar o tempo de resposta do servidor, que muitas vezes depende de hospedagem e cache.
Semana 4: medição e ajuste
Compare os indicadores com a base da primeira semana: tempo até a primeira impressão, URLs indexadas, erros de rastreamento e tempo de resposta. O que melhorou continua; o que não mexeu entra em investigação no ciclo seguinte.
Como monitorar o crawl budget ao longo do tempo
Otimizar uma vez e esquecer não funciona. O monitoramento mensal que recomendo cabe em quatro indicadores: tempo entre publicação e primeira impressão, proporção de URLs indexadas em relação ao sitemap, evolução dos erros no relatório de rastreamento e tempo médio de resposta do servidor.
Quando o intervalo de indexação diminui e os erros caem, o Googlebot está gastando melhor o orçamento. Se algum indicador piora depois de uma mudança no site, reverta e investigue. Cada ajuste deve ter data anotada, para que causa e efeito não se percam.
Vale também uma revisão trimestral mais profunda. Rastreie o site novamente, compare com o rastreamento anterior e procure URLs novas que não deveriam existir: um plugin que passou a gerar páginas de arquivo, um parâmetro de campanha que virou link interno, uma seção nova sem links apontando para ela. Problemas de rastreamento raramente aparecem de uma vez; eles se acumulam em silêncio, a cada mudança de tema, plugin ou plataforma.
Se você usa WordPress, preste atenção especial a arquivos de tags, de autores e de datas, que podem multiplicar URLs de pouco valor. Em lojas virtuais, revise as regras de filtros a cada alteração de catálogo. E em qualquer migração ou redesign, inclua o rastreamento na lista de verificação antes da publicação, e não depois do tráfego cair.
Perguntas e respostas sobre crawl budget
O que é crawl budget?
Crawl budget é a quantidade de URLs que o Googlebot consegue e quer rastrear em um site durante um período. Ele resulta da capacidade de rastreamento, que depende da saúde e da velocidade do servidor, e da demanda de rastreamento, que depende da popularidade e da frequência de atualização das páginas. Na prática, é o orçamento de rastreamento que determina com que rapidez o Google descobre e revisita seu conteúdo. Em sites pequenos, raramente é o gargalo; em sites grandes ou com muitas URLs automáticas, pode ser decisivo.
Todo site precisa se preocupar com crawl budget?
Não. A documentação do Google indica que o tema é relevante sobretudo para sites muito grandes, com milhões de páginas, ou com dezenas de milhares de páginas atualizadas diariamente, e para sites com muitas URLs descobertas e não indexadas. Para a maioria dos sites de serviços e blogs pequenos, o foco deve estar em conteúdo, links e indexação. Mesmo assim, URLs automáticas, como busca interna e filtros, podem criar problema de crawl budget em sites menores.
Como saber se meu site tem problema de crawl budget?
Comece pelo relatório de estatísticas de rastreamento e pelo relatório de indexação de páginas do Search Console. Sinais típicos são muitas URLs em “Descoberta, mas não indexada”, tempo de resposta alto e picos de erros. Em seguida, rastreie o site com o Screaming Frog e, se possível, analise os logs do servidor para ver onde o Googlebot gasta as visitas. Se páginas importantes demoram semanas para receber a primeira impressão, vale investigar crawl budget.
Como otimizar crawl budget?
Para otimizar crawl budget, reduza o desperdício e facilite o caminho até o que importa. Bloqueie no robots.txt URLs sem valor, corrija redirecionamentos em cadeia e erros 404, consolide duplicatas com canonical ou 301, mantenha o sitemap limpo, melhore o tempo de resposta do servidor e fortaleça os links internos para as páginas estratégicas. Comece pelas ações de maior impacto e menor esforço, meça o intervalo de indexação antes e depois e ajuste conforme os dados.
Noindex economiza crawl budget?
Não. Para ler a instrução noindex, o Googlebot precisa rastrear a página, então a requisição acontece de qualquer forma. Noindex serve para impedir a indexação, não para poupar rastreamento. Se o objetivo é reduzir o gasto de orçamento, as opções são bloquear o rastreamento no robots.txt (lembrando que isso não remove URLs já indexadas), retornar 404 ou 410 para páginas removidas de vez, ou consolidar duplicatas com redirecionamento 301.
Qual a diferença entre rastreamento e indexação?
Rastreamento é quando o Googlebot visita uma URL e baixa seu conteúdo. Indexação é quando o Google processa esse conteúdo e decide guardá-lo para exibir nos resultados. Uma página pode ser rastreada e não indexada, por qualidade baixa ou duplicidade, e pode ser descoberta sem ter sido rastreada ainda. O crawl budget influencia a primeira etapa; a decisão de indexar depende de qualidade, relevância e sinais do site.
O que desperdiça mais crawl budget?
Os maiores desperdícios costumam ser URLs com parâmetros de filtro e ordenação, páginas de busca interna acessíveis ao Googlebot, conteúdo duplicado sem canonical, redirecionamentos em cadeia, erros 404 e soft 404 linkados internamente, e paginações muito profundas. Servidor lento também desperdiça, porque reduz a capacidade de rastreamento. O jeito de confirmar é analisar logs e o rastreamento próprio do site, porque o desperdício muda de site para site.
Como fazer o Google rastrear e indexar mais rápido?
Garanta que a página tenha links internos de páginas fortes, esteja no sitemap com data de modificação correta e responda rápido no servidor. Depois, use a inspeção de URL do Search Console para conferir o estado e solicitar a indexação. Publicar com regularidade e conquistar links externos também aumenta a demanda de rastreamento. Não existe garantia de prazo, e solicitar indexação repetidas vezes para a mesma URL não acelera o processo.
Posso aumentar o crawl budget manualmente?
Não existe um botão para aumentar o crawl budget. Você influencia os dois lados da equação: melhora a capacidade, com servidor rápido e estável, e aumenta a demanda, com conteúdo útil, atualizado e bem linkado, internamente e por sites externos. A ferramenta de limite de taxa de rastreamento, que permitia reduzir a velocidade do Googlebot, foi aposentada pelo Google em 2024. Em emergências de servidor, os códigos de resposta 503 e 429 sinalizam ao Googlebot para desacelerar.
Como a AgênciaSEO (Roberto Grozinski) ajuda com crawl budget?
Eu analiso o rastreamento do seu site de ponta a ponta: relatórios do Search Console, rastreamento técnico, logs quando disponíveis, arquitetura de links e estrutura de sitemaps. Como o trabalho é feito por mim, sem intermediários, o diagnóstico sai de mais de 25 anos de experiência em SEO e de mais de 1.000 palavras-chave posicionadas. Entrego prioridades claras do que corrigir primeiro e acompanho o efeito nos indicadores de indexação, sem promessas de ranking. Para conversar sobre o seu caso, use a página de contato.
Veja também
- SEO técnico: guia completo para iniciantes e avançados
- O que é sitemap e como usar para o Google indexar seu site
- Robots.txt: o que é e como configurar do jeito certo
Em auditorias técnicas, o problema de rastreamento quase nunca está onde o dono do site imagina. Antes de mexer em qualquer coisa, eu olho onde o Googlebot realmente gasta as visitas. — Roberto Grozinski, AgênciaSEO
Crawl budget sob controle, com quem executa pessoalmente
Eu mesmo audito o rastreamento do seu site, sem intermediários, com mais de 25 anos de SEO e mais de 1.000 palavras-chave posicionadas. Se suas páginas demoram a aparecer no Google, vamos descobrir o motivo.
Respostas de 5