O Que é Crawl Budget?
O orçamento de rastreamento é o quanto um robô de mecanismo de busca (geralmente o Googlebot) pode e irá ‘rastrear’ um site e suas URLs associadas para atualizar seu ranking. A forma como um orçamento de rastreamento é decidido pode ser complicada. No entanto, é principalmente determinado por dois fatores: demanda de rastreamento e limite de taxa de rastreamento.
Mais Sobre Orçamento de Rastreamento
Para entender melhor o orçamento de rastreamento, é útil saber mais sobre a demanda de rastreamento e o limite de taxa de rastreamento.
A demanda de rastreamento é bastante direta. Quanto mais popular for um site, maior será a necessidade (e demanda) para que ele seja rastreado. O Googlebot, em particular, vai querer garantir que possui registros atualizados de um site frequentemente visitado.
Para URLs menos populares, a demanda de rastreamento se concentra em manter a atualidade. O Google não deseja que conteúdo obsoleto e desatualizado obstrua as melhores classificações nas SERPs.
O limite de taxa de rastreamento é o número máximo de conexões paralelas que um Googlebot pode usar para rastrear um site e o tempo de espera necessário entre cada conexão. Os proprietários do site podem definir limites para isso, mas a capacidade do servidor também pode impactar esse número.
Um servidor web de resposta rápida terá um limite de rastreamento mais alto. Alternativamente, os Googlebots reduzirão sua taxa de rastreamento para evitar interferir na funcionalidade de um site mais fraco.