Основы SEO: что такое сканируемость?

Хотите опередить своих конкурентов? Тогда базовые знания технического SEO являются обязательными. Конечно, вам также необходимо создавать отличный и актуальный контент для вашего сайта. К счастью, плагин Yoast SEO заботится (почти) обо всем на вашем сайте WordPress. Тем не менее, полезно понимать одну из самых важных концепций технического SEO: возможность сканирования.

Что опять за крипер?

Поисковая система, такая как Google, состоит из трех частей: сканера, индекса и алгоритма. Сканер переходит по ссылкам в Интернете. Он делает это 24/7! Как только сканер заходит на веб-сайт, он сохраняет HTML-версию в гигантской базе данных, называемой индексом. Этот индекс обновляется каждый раз, когда сканер заходит на ваш сайт и находит его новую или измененную версию. В зависимости от того, насколько важным Google считает ваш сайт, и количества изменений, которые вы вносите на свой сайт, сканер будет появляться чаще или реже.

Забавный факт: краулера также называют роботом, ботом или пауком! Поисковый робот Google иногда называют Googlebot.

Читать далее: Основы SEO: что делает Google »

А что такое проходимость?

Сканируемость относится к способности Google сканировать ваш сайт. К счастью, вы можете заблокировать сканеры на своем сайте. Если ваш сайт или страница на вашем сайте заблокированы, вы говорите сканеру Google: «Не заходите сюда». В результате ваш сайт или соответствующий ему сайт не будут отображаться в результатах поиска. По крайней мере, в большинстве случаев.

Так как же заблокировать поисковые роботы? Есть несколько вещей, которые могут помешать Google сканировать (или индексировать) ваш сайт:

• Если твое файл robots.txt блокирует сканер, Google не будет заходить на ваш сайт или конкретный сайт.
• Перед сканированием вашего веб-сайта сканер просматривает HTTP-заголовок вашей страницы. Этот Заголовок HTTP содержит код состояния. Если этот код состояния говорит о том, что страница не существует, Google не будет сканировать ваш веб-сайт. Вы хотите знать больше? Мы объясним все об этой подсказке HTTP-заголовка в нашем модуле. Техническое SEO-обучение!
• Если роботтметатег s на определенной странице блокирует поисковую систему от индексации этой страницы, Google просканирует эту страницу, но не добавит ее в свой индекс.

Как сканеры влияют на окружающую среду

Да, вы правильно прочитали. Краулеры имеют значительное воздействие на окружающую среду. Вот как: Краулеры могут заходить на ваш сайт несколько раз в день. Но почему? Они хотят открыть для себя новый контент или проверить, есть ли новые обновления. И каждый раз, когда они посещают наш сайт, они будут сканировать все, что похоже на URL-адрес для них. Это означает, что URL-адрес часто сканируется несколько раз в день.

В этом нет необходимости, так как маловероятно, что вы будете вносить несколько изменений в URL-адрес в определенный день. Не говоря уже о том, что почти все выходные URL-адреса CMS, которые не имеют смысла для сканеров, могут безопасно пропускать. Но вместо того, чтобы пропускать эти URL-адреса, поисковые роботы будут сканировать их снова и снова, каждый раз, когда они встречаются. Все это ненужное сканирование складывается тонн источников энергии, то есть вредно для нашей планеты.

Улучшите сканируемость вашего сайта с помощью Yoast SEO Premium

Чтобы убедиться, что вы не тратите энергию впустую, важно следить за настройками сканирования вашего сайта. К счастью, вам не нужно делать всю работу самостоятельно. Используя такие инструменты, как Yoast SEO Премиум вам будет легче!

Итак, как это работает? У нас есть функция настройки сканирования который удаляет ненужные URL-адреса, фиды и ресурсы с вашего сайта. Это позволит поисковым роботам найти ваш сайт более эффективным. Не волнуйтесь, вы все еще под контролем! Потому что эта функция также позволяет вам решить для каждого типа ресурса, действительно ли вы хотите удалить URL-адрес или нет. Если вы хотите узнать больше, мы все объясним настройки сканирования здесь.

Хотите узнать больше о возможности сканирования?

Хотя сканируемость является основной частью техническое SEO (это связано со всеми вещами, которые позволяют Google индексировать ваш сайт), это уже довольно продвинутый материал для большинства людей. Однако важно, чтобы вы понимали, что такое обходимость. Вы можете заблокировать – может быть, даже не зная! – сканеры вашего сайта, а это значит, что вы никогда не будете занимать высокие позиции в Google. Итак, если вы серьезно относитесь к SEO, сканируемость должна иметь для вас значение.

Простой способ научиться — делать технические SEO-тренинги. Эти курсы SEO научат вас обнаруживать технические проблемы SEO и решать их (с помощью нашего плагина Yoast SEO). У нас также есть тренинг, посвященный этому сканируемость и индексируемость! Полезно знать для пользователей Premium: Yoast SEO Академия уже включен в вашу подписку Premium без дополнительной платы!

Продолжай читать: Бот-трафик: что это такое и почему вас это должно волновать »