[{"data":1,"prerenderedAt":-1},["ShallowReactive",2],{"glossary-crawl-budget::ru":3,"gloss-cluster-crawl-budget::ru":23,"gloss-next-crawl-budget::ru":9},{"slug":4,"category":5,"name":6,"definition":7,"meta_desc":8,"faq":9,"schema_markup":9,"related":10},"crawl-budget","growth","Краулинговый бюджет","Краулинговый бюджет — это объём обхода, который поисковый движок готов потратить на сайт: неформально сочетание того, как быстро он может забирать страницы, не нагружая сервер, и того, насколько ему сейчас нужен контент этого сайта. Это не публикуемая величина и не настройка, которую вы задаёте, а возникающее само собой ограничение, которое замечают только тогда, когда оно начинает мешать.\n\nНа большинстве сайтов оно не мешает никогда, и изрядная часть советов на эту тему применяется не по адресу. Несколько сотен страниц, меняющихся время от времени, будут обойдены полностью, и думать об этом никому не придётся. Ограничение становится настоящим на крупных сайтах, на сайтах, порождающих адреса комбинаторно, и на медленных серверах, где каждая выборка достаточно дорога, чтобы движок сам сбавил темп.\n\nКогда оно всё же мешает, причина почти всегда не объём, а расточительность. Фасетная навигация, перемножающая фильтры и сортировки в миллионы разных адресов. Идентификаторы сессий, дописанные к каждой ссылке. Календари с бесконечным запасом следующих месяцев. Мягкие 404, отдающие статус 200 для несуществующих страниц: с точки зрения краулера любой неверный адрес — настоящая страница. Длинные цепочки редиректов, тратящие несколько выборок ради одного документа.\n\nИсправления идут в том же порядке. Лучше всего вообще не порождать эти адреса; дальше — закрыть параметрическое пространство в robots.txt, чтобы краулер их не запрашивал; дальше — отдавать честные коды статуса, чтобы отсутствующая страница читалась как отсутствующая. Но важнее всего держать нужные страницы неглубоко и хорошо связанными внутренними ссылками: страница, на которую ничто не ссылается, борется за внимание с нуля.\n\nДоказательства приходят из двух мест, и ни одно из них не сторонний сервис. Собственные логи сервера показывают, какие пути запрашивались, каким агентом и что он получил, — это единственный способ увидеть расточительность напрямую. Собственная статистика обхода у каждого движка показывает агрегат, и растущее число запросов при неизменном числе полезных страниц — сигнал, что пора смотреть.","Краулинговый бюджет — сколько обхода движок тратит на сайт. Мешает он редко, а когда мешает, виноват не объём страниц, а мусорные адреса.",null,[11,14,17,20],{"slug":12,"name":13},"cdn","Сеть доставки контента (CDN)",{"slug":15,"name":16},"content-optimization","Оптимизация контента",{"slug":18,"name":19},"programmatic-seo","Программатик-SEO (Programmatic SEO)",{"slug":21,"name":22},"static-site-generator","Генератор статических сайтов (SSG)",[24,28,32,35,38,39,42,45,48,51,54,57],{"slug":25,"category":5,"name":26,"updated_at":27},"ai-crawler","ИИ-краулер","2026-09-08T21:32:37+00:00",{"slug":29,"category":5,"name":30,"updated_at":31},"attribution-model","Модель атрибуции (Attribution Model)","2026-09-08T21:32:36+00:00",{"slug":33,"category":5,"name":34,"updated_at":31},"channel-market-fit","Соответствие канала рынку (channel-market fit)",{"slug":36,"category":5,"name":37,"updated_at":31},"content-brief","Контентный бриф",{"slug":15,"category":5,"name":16,"updated_at":31},{"slug":40,"category":5,"name":41,"updated_at":31},"conversion-rate-optimization","Оптимизация конверсии (CRO)",{"slug":43,"category":5,"name":44,"updated_at":27},"entity-seo","Entity SEO (оптимизация под сущности)",{"slug":46,"category":5,"name":47,"updated_at":27},"featured-snippet","Избранный сниппет",{"slug":49,"category":5,"name":50,"updated_at":27},"generative-engine-optimization","Оптимизация под генеративные движки (GEO)",{"slug":52,"category":5,"name":53,"updated_at":31},"growth-loop","Петля роста (Growth Loop)",{"slug":55,"category":5,"name":56,"updated_at":27},"internal-linking","Внутренняя перелинковка",{"slug":58,"category":5,"name":59,"updated_at":31},"jobs-to-be-done","Работа, которую нужно выполнить (Jobs to Be Done)"]