RSS-лента

Лучшие CMS интернета бесплатно для создания сайта

Май
31

Индексация страниц сайта в поисковиках Яндекс и Гугл

Индексация сайта – это процесс обхода страниц поисковыми системами, с целью добавления их в базу данных (Индекс). Но далеко не все страницы могут быть добавлены. Поисковые системы исключают страницы содержащие плагиат, спам и т.д. По этой причине веб мастеры стараются писать хороший, качественный контент, чтобы он быстро индексировался и ранжировался в поисковых системах.

Индексация сайта в яндексе

  Считается, что индексация сайта в яндексе намного жестче, чем у других поисковых систем. Он не индексирует все страницы как попало (в отличие от Google), бывает, что страницы не входят в индекс совершенно по не понятным причинам. В этом случае следует обратиться в службу поддержки Яндекса, чтобы они выяснили причину проблемы.
Но это не единственный минус. Если после запроса добавления сайта в Google, на следующий день сайт уже в выдачи, то Яндекс может добавлять новый сайт неделями (иногда доходит до месяца). Чтобы сократить срок, следует использовать методы ускорения индексации, которые будут описаны позже.

индексация сайта в яндексе и гугл

Даже на старых ресурсах индексация протекает довольно медленно, так как новые страницы участвуют в ранжировании лишь после последующего апа (Обновления поисковой выдачи).
Из-за такого большого срока появляется опасность, что ваш контент могут украсть. Чтобы этого не произошло, следует добавлять новые статьи в функцию “Оригинальные тексты”. Её можно найти в веб мастерской Яндекса.

Методы ускорения индексации сайта

  И так, что нужно сделать:

  • Обязательно добавить сайт в веб мастерскую Яндекса.
  • Добавить в веб мастерскую карту сайта.
  • Публикуйте анонсы статей в социальных сетях. Для этого можно создать отдельную группу.
  • Проставьте обратные ссылки на сайт из популярных групп сетей (их любит быстробот), чтобы сэкономить время, используйте сервис SeoPult.
  • Можно установить Яндекс Метрику (Счётчик посещаемости).
  • Было бы отлично, если бы вы купили несколько ссылок с раскрученных многотысячных аккаунтов Twitter. Яндекс уважает этот ресурс и очень часто посещает его, а на некоторых аккаунтах просто живет быстро робот.
  • Добавляйте как можно больше статей, так как поисковики начнут чаще к вам заглядывать из-за постоянного обновления контента.
  • Делайте грамотную перелинковку, и самый лучший вариант делать ее в ручную! Из-за внутренних ссылок поисковики будут заходить с одной статьи на другую, тем самым добавив не одну страницу, а сразу несколько.
  • Можно прогнать сайт через специальные программы пингаторы.

Проверка индексации сайта

После выполнения всех необходимых действий, время от времени стоит проверять сайт на количество проиндексированных страниц. Но, знайте повторная индексация сайта в яндексе занимает много времени. Это можно сделать несколькими способами.
При помощи специальных сервисов. Вот некоторые из них:

Достаточно ввести в форму название сайта, и вы получите всю желаемую информацию об индексации.

В интернете таких сервисов очень много, найти их при помощи поисковиков не составит труда.
Также можно просто ввести в форму поисковиков адрес сайта, через конструкцию вида:

(url:www.ваш сайт/ нужная страница/ | url:ваш сайт/нужная страница/)

и вручную смотреть проиндексированные страницы. Способ не удобен, но зато сразу видно какие страницы быстро вошли в индекс.

проверка индексации сайта

Можете обратить внимание, что часто пишется время, когда была проведена индексация.

Индексация сайта и Robots.txt

Robots.txt – это файл, хранящийся в корне вашего сайта, на которых заходят поисковые системы, чтобы узнать, какие страницы индексировать нужно, а какие нет.
При помощи этого файла вы можете запретить поисковым системам индексировать весь сайт или какие-либо его части. Обычно этот файл используют для того, чтобы поисковики не индексировали дубли, бесполезные страницы, или страницы с плагиатом.

Проиндексация

Если у вас на хостинге вы не обнаружили этого файла, то просто создайте текстовой документ с именем “Robots.txt”. После этого его нужно заполнить.
Вот так выглядит стандартный файл для wordpress:

User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /search/
Disallow: /xmlrpc.php
Disallow: /wp-admin/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /tag/
Disallow: /feed/
Disallow: /trackback/
Disallow: */trackback/
Disallow: */?s*
Disallow: */?p*
Disallow: */*.js*
Sitemap: http://ваш сайт/sitemap.xml
Crawl-delay: 5
Visit- time: 0200-0545
Host: ваш сайт.ru

Здесь скрыты дубли и различного рода бесполезные страницы (Лента, теги и т.д.)
Если вы хотите закрыть какую-либо папку на хостинге от индексации, то просто новой строкой введите “Disallow: /Имя папки”.
Управление индексацией довольно простое, но в тоже время важное дело. Проследите за тем, чтобы ваш сайт правильно вошёл в индекс с самого начала.

Индексация сайта в Гугл

С этой поисковой системой дело обстоит гораздо лучше, чем с Яндексом. Апы у Гугла происходят намного чаще, а если прям срочно нужно отправить страницу в индекс, можно воспользоваться веб-мастером гугла. У них там есть одна очень интересная фишка.

Получай первым обновления блога!

Введите Ваш e-mail:

Оставить комментарий


вверх