Auditite
Tutti i playbook
Playbook Technical SEO Specialist

Playbook di ottimizzazione del crawl budget con Auditite

Massimizza l'efficienza di scansione dei motori di ricerca indirizzando il crawl budget verso le tue pagine più preziose e riducendo gli sprechi.

Panoramica

Il crawl budget è il numero di pagine che un motore di ricerca scansionerà sul tuo sito in un dato arco di tempo. Per i siti di grandi dimensioni (oltre 10.000 pagine), il crawl budget influisce direttamente sulla rapidità con cui i contenuti nuovi e aggiornati vengono indicizzati. Questo playbook mostra come massimizzare l'efficienza di scansione.

Passo 1: comprendi il tuo crawl budget

  1. Controlla il report Statistiche di scansione di Google Search Console per vedere il crawl rate medio giornaliero.
  2. Esamina la distribuzione delle richieste di scansione per tipo di risposta (200, 301, 404 e così via).
  3. Analizza la frequenza di crawl per gruppo di URL (usa i log del server per i dati più accurati).
  4. Confronta il totale degli URL scansionabili con la frequenza di crawl giornaliera per stimare il tempo di crawl dell'intero sito.

Fattori del crawl budget

FattoreImpatto
Velocità di risposta del serverRisposte più rapide = più pagine scansionate per sessione
Popolarità del sitoI siti più popolari ricevono crawl budget maggiori
Freschezza dei contenutiI siti aggiornati di frequente vengono scansionati più spesso
Scoperta degli URLSitemap e link interni facilitano la scoperta
Errori di scansioneTassi di errore elevati riducono il crawl budget assegnato

Passaggio 2: individua gli sprechi di crawl budget

Fonti comuni di spreco

  1. URL della navigazione a faccette. Filtri e ordinamenti creano migliaia di URL quasi duplicati.
  2. Pagine di ricerca interna. Ogni query di ricerca genera un URL unico con contenuti scarsi.
  3. Combinazioni di filtri con paginazione. La pagina 47 di un elenco prodotti filtrato ha un valore minimo.
  4. Pagine soft 404. Pagine che restituiscono 200 ma non hanno contenuti reali.
  5. URL basati su calendario e date. Pagine di archivio che generano combinazioni infinite di URL.
  6. Parametri di sessione e di tracciamento. URL con identificatori di sessione univoci.
  7. Percorsi di contenuto duplicati. Più percorsi URL verso lo stesso contenuto.

Passaggio 3: blocca gli URL di basso valore

  1. Usa il robots.txt per bloccare i pattern che non generano valore SEO (risultati di ricerca, parametri di sessione).
  2. Usa il nofollow sui link interni verso le pagine di navigazione a faccette di scarso valore.
  3. Implementa la gestione dei parametri URL per rimuovere lato server i parametri superflui.
  4. Consolida i percorsi duplicati con tag canonical e redirect 301.

Passo 4: dai priorità agli URL di maggior valore

  1. Assicurati che le pagine più importanti siano linkate dalla homepage o dalla navigazione principale (bassa profondità di scansione).
  2. Invia una sitemap XML che contenga solo le pagine a più alta priorità.
  3. Usa i link interni per creare percorsi chiari verso le pagine che vuoi far scansionare di frequente.
  4. Aggiorna regolarmente i contenuti delle pagine prioritarie: i segnali di contenuto fresco favoriscono una scansione più frequente.

Passaggio 5: migliora le prestazioni del server

  1. Ottimizza il tempo di risposta del server portandolo sotto i 500 ms per tutte le pagine.
  2. Usa una CDN per ridurre la latenza per i crawler distribuiti a livello globale.
  3. Assicurati che il tuo server riesca a gestire richieste di scansione simultanee senza limitazioni.
  4. Monitora gli errori del server: gli errori 500 durante il crawling riducono la frequenza di crawl di Googlebot.

Passaggio 6: metti ordine nello spazio degli URL

  1. Reindirizza o rimuovi le pagine che non servono a nulla (promozioni obsolete, eventi scaduti, thin content).
  2. Consolida le pagine quasi duplicate usando tag canonical o redirect 301.
  3. Rimuovi le pagine di scarso valore dalla sitemap XML.
  4. Correggi tutti gli errori di crawl segnalati in Google Search Console.

Passaggio 7: monitora l'efficienza del crawl

Monitora queste metriche ogni mese:

  • Pagine scansionate in totale al giorno
  • Percentuale di pagine scansionate di alto valore (che generano traffico o ricavi)
  • Tempo dalla pubblicazione del contenuto alla prima scansione di Googlebot
  • Tempo dalla prima scansione all'indicizzazione
  • Rapporto tra URL in sitemap e URL indicizzati
  • Tempo di risposta del server nei periodi di scansione di picco
  1. Usa l'analisi dei log del server per verificare che Googlebot dedichi tempo alle tue pagine prioritarie.
  2. Configura il monitoraggio delle scansioni di Auditite per rilevare i cambiamenti nei pattern di crawl.
  3. Dopo aver apportato le modifiche, monitora le statistiche di crawl per due-quattro settimane per misurarne l'impatto.

Smetti di copiare e incollare. Inizia ad automatizzare.

Auditite trasforma i playbook in flussi di audit attivi. Inizia per vedere come.

Ricevi gli insight ogni settimana

Unisciti ai team che ogni settimana ricevono playbook concreti, benchmark e aggiornamenti di prodotto.