Если авторизоваться не получается, то попробуйте восстановить пароль. Если у вас нет аккаунта на сайте, то вы можете зарегистрироваться.
Если авторизоваться не получается, то попробуйте восстановить пароль. Если у вас нет аккаунта на сайте, то вы можете зарегистрироваться.

Google обдумывают сокращение частоты краулинга и индексации страниц

21 января 2022
Сео новости

Во время недавнего подкаста Search Off The Record несколько известных представителей Google — Джон Мюллер, Мартин Сплитт и Гэри Иллис — обсудили тему краулинга страниц и того, как сделать этот процесс более эффективным, в том числе для окружающей среды.

В связи с тем, что работа Googlebot осуществляется виртуально, она незаметна и, как может показаться на первый взгляд, не имеет никакого влияния на экологию.
По словам Гэри Иллиса, это распространённое заблуждение: 

“…я хочу сказать, что все компьютерные процессы негативно влияют на окружающую среду. Возьмите, хотя бы, биткойны: майнинг-оборудование потребляет колоссальное количество электричества, и вред от этого процесса хорошо измерим.

Мир старается максимально сократить количество выбросов углекислого газа с 2007-2009 года, но это не значит, что на этом нужно остановиться. И я считаю, что даже в таком процессе, как краулинг, можно избавиться от ненужной работы и, таким образом, не только сделать его более эффективным, но и снизить его влияние на экологию”.

Как сделать краулинг более эффективным и менее энергозатратным?

Существует два типа краулинга: один нацелен на поиск нового контента, а второй — на обновление уже существующего. Гэри Иллис рассказал о том, что второй тип зачастую бывает бессмысленным:

“…одна из вещей, которую мы можем сократить — краулинг для обновления контента. То есть, как только мы находим страницу или ссылку, мы её сканируем, и спустя какое-то время возвращаемся к ней, чтобы просканировать снова. Но нужно ли делать это часто, если на многих страницах контент не обновляется годами?”

Что означает сокращение частоты краулинга для вашего сайта?

Существует мнение, что высокая частота краулинга является положительным сигналом в SEO, даже если вы не обновляете контент на своём сайте. Джон Мюллер задал Гэри Иллису вопрос об этом:

“Мне кажется, есть какой-то миф о том, что если страница чаще индексируется, то её ранжирование будет лучше. Или это, всё-таки, правда?”

Иллис подтвердил, что это заблуждение, и вместе с Джоном Мюллером пришёл к выводу о том, что в частом краулинге нет особой необходимости, так как он никак не влияет на ранжирование, особенно в случаях, если на странице не происходит никаких изменений.

Более того, представители Google поделились своими планами о том, что хотят ускорить этот процесс и сделать его более эффективным и качественным. Компания собирается обучить поисковых роботов самостоятельно распознавать страницы, которые нуждаются в повторной индексации.

В идеале, краулинг контента будет происходить чаще для тех страниц, которые постоянно изменяются. 

Forum with id 1 is not found.