Що Таке Crawl Budget?
Бюджет сканування – це те, скільки пошуковий робот (зазвичай Googlebot) може і буде «сканувати» сайт та його асоційовані URL-адреси для оновлення рейтингу. Як визначається бюджет сканування може бути складним. Однак він в основному визначається двома факторами: потреба в скануванні та ліміт швидкості сканування.
Більше Про Crawl Budget
Для кращого розуміння бюджету сканування корисно дізнатися більше про попит на сканування та ліміт швидкості сканування.
Запит на сканування досить простий. Чим популярніший сайт, тим вища потреба (та запит) на його сканування. Googlebot, зокрема, захоче переконатися, що він має актуальні записи про часто відвідуваний сайт.
Для менш популярних URL-адрес, попит на сканування зосереджений на підтримці актуальності. Google не хоче, щоб застарілий та неактуальний контент забивав верхні позиції у SERPs.
Ліміт швидкості сканування – це максимальна кількість паралельних з’єднань, яку Googlebot може використовувати для сканування сайту, та час очікування, необхідний між кожним з’єднанням. Власники сайтів можуть встановлювати обмеження на це, але ємність сервера також може впливати на це число.
Швидкодіючий веб-сервер матиме вищий ліміт сканування. Натомість, Googlebots знизять свій рівень сканування, щоб уникнути втручання у функціональність слабших сайтів.
