Calculadora de crawl budget: fluxo de trabalho de SEO automatizado
Calcule e otimize a alocação do orçamento de rastreamento do seu site. Inclui fórmulas para taxa de rastreamento, identificação de desperdício e cobertura das páginas prioritárias.
Visão geral
O crawl budget é o número de páginas que um mecanismo de busca rastreará no seu site em um determinado período. Em sites grandes (mais de 10.000 páginas), o uso ineficiente do crawl budget faz com que páginas importantes sejam rastreadas com menos frequência, atrasando a indexação de novos conteúdos e atualizações. Esta calculadora ajuda a medir, analisar e otimizar o seu crawl budget.
Estimativa do crawl budget
Extraia esses valores dos logs do servidor ou do Google Search Console.
| Métrica | Valor | Origem |
|---|---|---|
| Total de requisições do Googlebot/dia (média) | Logs do servidor | |
| Total de páginas indexáveis | Rastreamento do site | |
| Total de URLs no site (incluindo não indexáveis) | Logs do servidor | |
| Tamanho médio da página (KB) | Rastreamento do site | |
| Tempo de resposta do servidor (ms em média) | Logs do servidor |
Cálculo da taxa de rastreamento
Crawl Efficiency = Indexable pages crawled / Total pages crawled × 100
Crawl Freshness = Googlebot requests per day / Total indexable pages
→ If > 1: Pages crawled more than once daily (good)
→ If < 1: Average days between crawls = 1 / Crawl Freshness
Full Crawl Cycle = Total indexable pages / Googlebot requests per day
→ Number of days for Google to crawl every indexable page once
Exemplo:
- Solicitações do Googlebot/dia: 5.000
- Páginas indexáveis: 25.000
- Ciclo completo de rastreamento: 25.000 / 5.000 = 5 dias
Identificação de desperdício de rastreamento
Identifique URLs que consomem crawl budget sem gerar valor.
| Categoria de desperdício | URLs | % do crawl budget | Ação |
|---|---|---|---|
| Páginas soft 404 | Corrigir ou remover | ||
| Cadeias de redirecionamento (3+ saltos) | Encurte para o direto | ||
| Conteúdo duplicado (sem canonical) | Adicionar canonical tags | ||
| Arquivos paginados | Adicione noindex ou use rel=next/prev | ||
| URLs de navegação facetada | Bloqueie com robots.txt ou noindex | ||
| Duplicatas baseadas em parâmetros | Configure os parâmetros de URL no GSC | ||
| Produtos expirados/sem estoque | Retornar 410 ou redirecionar | ||
| Páginas órfãs (sem links internos) | Adicione links ou remova | ||
| Páginas de tags/arquivos de baixo valor | Noindex | ||
| Desperdício total | % |
Fórmula do impacto do desperdício
Wasted Crawls/Day = Total Googlebot requests × Waste Percentage
Recovered Crawls/Day = Wasted Crawls after fixes are implemented
New Full Crawl Cycle = Indexable pages / (Googlebot requests - Wasted Crawls + Recovered Crawls)
Cobertura das páginas prioritárias
Garanta que suas páginas mais importantes sejam rastreadas com frequência.
| Grupo de páginas | Contagem | Frequência de rastreamento-alvo | Frequência atual | Lacuna |
|---|---|---|---|---|
| Página inicial + navegação principal | 5-20 | Diário | ||
| Principais páginas de produtos/serviços | 20-50 | A cada 2-3 dias | ||
| Posts de blog com muito tráfego | 50-100 | Semanal | ||
| Conteúdo novo (últimos 30 dias) | Varia | Diariamente na primeira semana | ||
| Páginas de categoria/arquivo | Varia | Semanal | ||
| Todo o restante do conteúdo | Varia | Mensal |
Ações de otimização
| Ação | Impacto no crawl budget | Esforço | Prioridade |
|---|---|---|---|
| Corrija as cadeias de redirecionamento | Alto — elimina várias requisições por cadeia | Baixo | 1 |
| Remover/aplicar noindex em páginas rasas | Alto — libera orçamento para páginas valiosas | Médio | 2 |
| Corrigir soft 404s | Médio — evita rastreamentos desperdiçados | Baixo | 3 |
| Melhore o tempo de resposta do servidor | Alto — respostas mais rápidas = mais páginas rastreadas | Alta | 4 |
| Otimizar o sitemap XML | Médio — direciona os crawlers para as páginas prioritárias | Baixo | 5 |
| Implemente canonicals corretos | Média — reduz o rastreamento duplicado | Médio | 6 |
| Bloqueie URLs com facetas no robots.txt | Alto para e-commerce — pode eliminar milhares de URLs inúteis | Baixo | 7 |
| Adicione links internos para as páginas prioritárias | Médio — sinaliza importância aos crawlers | Médio | 8 |
Checklist de análise de logs do servidor
Para usar esta calculadora com eficácia, analise os logs do seu servidor em busca de:
- Total de requisições do Googlebot por dia (filtre por user agent)
- URLs rastreadas com mais frequência
- URLs rastreadas com menor frequência
- Códigos de resposta retornados ao Googlebot (200, 301, 404, 500)
- Tempo médio de resposta às requisições do Googlebot
- Páginas rastreadas que estão com noindex ou com canonical para outro lugar
- Padrões de rastreamento por horário do dia
Monitoramento
| Métrica | Frequência de verificação | Ferramenta |
|---|---|---|
| Taxa de rastreamento do Googlebot | Semanal | Logs do servidor |
| Erros de rastreamento | Semanal | Google Search Console |
| Taxa de indexação | Mensal | operador site:, GSC |
| Frequência de rastreamento das páginas prioritárias | Mensal | Logs do servidor |
| Porcentagem de desperdício de rastreamento | Trimestral | Esta calculadora + Auditite |
O Auditite identifica automaticamente o desperdício de orçamento de rastreamento durante as auditorias técnicas, sinalizando cadeias de redirecionamento, soft 404s e conteúdo duplicado que consomem recursos do crawler sem trazer valor de SEO.
Templates relacionados
Modelo de mapeamento de redirecionamentos com o Auditite
Planeje e acompanhe redirecionamentos de URL durante migrações ou reestruturações de site. Inclui seleção do tipo de redirecionamento, detecção de cadeias e planilhas de validação.
TemplateTemplate de configuração do robots.txt com o Auditite
Configure o robots.txt corretamente com este modelo. Cobre diretivas para os principais crawlers, padrões comuns de CMS e procedimentos de teste.
ChecklistChecklist de implementação de marcação schema para SEO
Implemente dados estruturados corretamente com este checklist de schema markup. Cobre os principais tipos de schema, etapas de validação e erros comuns de implementação.
Quer o passo a passo por trás deste modelo?
Confira nossos playbooks com guias passo a passo do processo de auditoria.