Cosa significa Crawl budget
Il crawl budget è il numero di URL che un motore di ricerca è disposto a scaricare da un dominio in un certo periodo. Dipende da quanto in fretta il sito risponde e da quanto spesso i contenuti cambiano davvero. Su un sito piccolo non è un limite. Oltre le decine di migliaia di URL decide quali pagine vengono viste e quali restano fuori dall'indice per mesi.