Auditite
Voltar ao glossário
SEO técnico

Crawl budget

Entenda o que é o crawl budget, como os mecanismos de busca alocam recursos de rastreamento e como otimizar seu site para garantir que as páginas importantes sejam indexadas.

O orçamento de rastreamento (crawl budget) é o número de páginas que o bot de um mecanismo de busca vai rastrear no seu site em um determinado período. Ele é determinado por dois fatores: o limite de taxa de rastreamento (a velocidade com que um bot pode rastrear sem sobrecarregar seu servidor) e a demanda de rastreamento (o quanto o Google quer rastrear seu site, com base em popularidade e atualização). Todo site recebe uma alocação finita de recursos de rastreamento, e a forma como você administra essa alocação afeta diretamente quais páginas são descobertas e indexadas.

Por que isso importa para o SEO

O crawl budget se torna crítico para sites grandes, com milhares ou milhões de páginas. Se os bots dos buscadores gastam o tempo que têm rastreando páginas de baixo valor, como conteúdo duplicado, URLs cheias de parâmetros ou arquivos desatualizados, suas páginas mais importantes podem nem ser rastreadas ou indexadas. Em sites menores (abaixo de alguns milhares de páginas), o crawl budget raramente é uma preocupação, pois os bots geralmente conseguem cobrir todas as páginas. Já em e-commerces, portais de notícias e plataformas corporativas, um crawl budget mal gerenciado leva diretamente a lacunas de indexação e perda de tráfego orgânico.

Como otimizar o crawl budget

Comece identificando e eliminando o desperdício de rastreamento. Use os logs do servidor ou o Google Search Console para ver quais URLs o Googlebot visita com mais frequência. Bloqueie páginas sem importância com diretivas do robots.txt ou aplique tags noindex a páginas que não devem aparecer na busca. Garanta que o sitemap XML inclua apenas URLs canonical e indexáveis, para que os mecanismos de busca priorizem as páginas certas.

Melhore a arquitetura do seu site para manter as páginas importantes a até três cliques da home. Use links internos de forma estratégica para sinalizar quais páginas mais importam. Corrija ou remova links quebrados e cadeias de redirecionamento que desperdiçam recursos de rastreamento. Além disso, mantenha o tempo de resposta do servidor rápido: um servidor lento reduz o limite da sua taxa de rastreamento, porque os bots recuam para não sobrecarregar sua infraestrutura.

Erros comuns

  • Incluir páginas noindex no sitemap: isso envia sinais contraditórios aos rastreadores e desperdiça orçamento em páginas que você não quer indexar.
  • Ignorar a navegação facetada: a navegação facetada pode criar milhares de URLs baseadas em parâmetros que diluem o orçamento de rastreamento de forma significativa.
  • Manter cadeias de redirecionamento: cada salto em uma cadeia de redirecionamento 301 consome recursos de rastreamento. Consolide as cadeias em redirecionamentos únicos.
  • Não monitorar as estatísticas de rastreamento: revise regularmente o relatório Estatísticas de rastreamento do Google Search Console para identificar anomalias, como picos repentinos de páginas rastreadas, mas não indexadas.
  • Achar que o orçamento de rastreamento não importa: até sites de porte médio podem desenvolver index bloat com o tempo, se páginas de baixo valor se acumularem sem supervisão.

Um gerenciamento eficaz do crawl budget faz com que os mecanismos de busca concentrem seus recursos limitados nas páginas que geram sua visibilidade orgânica e sua receita.

Veja em ação

Saiba como o Auditite coloca o crawl budget em prática.

Explore o SEO técnico

Veja como o Auditite lida com isso

Comece agora e veja a plataforma em ação.

Começar

Receba insights toda semana

Junte-se às equipes que recebem toda semana playbooks acionáveis, benchmarks e novidades do produto.