Как добиться быстрой и полной индексации сайтов

компас с надписью seo

Термин индексация сайта означает чтение его содержимого поисковыми системами с последующим ранжированием страниц сайта в частности и всего ресурса в целом. Иными словами, чтобы поисковики показывали сайт в результатах выдачи запросов, они должны узнать о его существовании, проанализировать содержимое.

Для продвижения веб-ресурса, особенно коммерческой направленности, необходимо, чтобы индексация проводилась самыми популярными поисковыми системами: Яндекс, Google, Rambler и т.д. Что дает индексация сайта в Яндексе и других поисковых системах? Ваш ресурс будет показываться в результатах запросов пользователей, что значительно повлияет на трафик, увеличит количество клиентов, а также, прибыль.

Как именно проводится индексация веб-сайта

схема индексации сайта

общая схема индекса web-ресурсов

Проводится индексирование всех ресурсов сети Интернет посредством поисковых ботов, задача которых – отслеживать любые изменения, анализировать информацию, находить новые страницы, ссылки. Как боты узнают про сайт? Существует два способа оповестить поисковые системы о своем ресурсе:

  1. Робот находит сайт самостоятельно. Как правило, это происходит в результате индексирования других ресурсов, на которых стоит ссылка на ваш сайт. Переходя по этим ссылкам, робот обнаруживает новый ресурс и индексирует сайт. Впоследствии, он уже целенаправленно заходит к вам, в целях поиска новой информации.
  2. Ручное добавление страниц веб-сайта, для чего поисковые системы создали специальные формы. Ручное добавление эффективно, когда поисковики еще не знают о молодом интернет-ресурсе. Также, многие вебмастера добавляют новые страницы ресурса в эти формы, чтобы индексация сайта и его отдельных страниц происходила быстрее.

Обратите внимание! Первый вариант более эффективен, поскольку добавленный в вебмастера Яндекса и Гугла ресурс входит в индекс максимально естественно.

Сроки индексации сайта

лупа над словом

В среднем, индексация сайта в поисковых системах проводится в течение 1-2 недель. На срок индексации влияют многие причины, такие, как частота обновления информации, недоступность сервера или ошибки на сайте. Замечено, что чем чаще обновляется контент, тем быстрее индексируются новые страницы. Очевидно, поисковые системы считают такой ресурс перспективным и достойным внимания пользователей. Поэтому не забывайте регулярно писать и добавлять новые статьи!

Как самостоятельно добавить сайт на индексацию

Чаще всего, вебмастера не хотят ждать, когда робот соизволит посетить ресурс, и ищут способы, как добавить в индекс сайт самостоятельно и быстро. И такие легальные, бесплатные и полностью безопасные способы есть.

Яндекс. Чтобы добавить ваш ресурс или его отдельные страницы в самую популярную поисковую систему Рунета, необходимо добавить его URL в специализированный сервис “Яндекс.Вебмастер” – ссылка. Процедура довольно проста: сверху вы жмете “плюсик”, затем в соответствующее поле вводите URL адрес вашего интернет ресурса.

форма добавления сайта в Яндекс.Вебмастере

Яндекс попросит подтвердить права (убедится, что это действительно ваш сайт) любым из предложенных способов, после чего сайт будет поставлен в очередь на индекс. Появление надписи «ваш сайт добавлен» означает, что он «взят на карандаш» и вскоре будет проиндексирован. Но если надпись гласит: «URL запрещен к индексации», это означает, что на ресурс наложены санкции Яндекса.

Кстати! Многие вебмастера используют Яндекс.Вебмастер для проверки не только индексации в Яндексе, но и наличия или отсутствия бана.

Google. Эта поисковая система также важна для продвижения русскоязычных сайтов, как и Яндекс. Процесс добавления ресурса происходит на этой странице. Вам необходимо нажать справа красную кнопку “Добавить ресурс”, ввести адрес веб-страницы и доказать, что вы не робот, введя капчу.

добавление сайта в гугл вебмастер

Затем, также как и в предыдущей системе, нужно подтвердить права на владение ресурсом одним из предложенных способов.

Необходимо знать! Чтобы отправить сайт на индексацию в Гугл, необходимо иметь свой аккаунт в этой системе и авторизоваться в ней.

Rambler. Эта поисковая система не играет главной роли в продвижении. Однако скидывать ее со счетов рано, поскольку трафик индексация в поисковой системе Rambler все же дает. Собственной формы для добавления ресурса Rambler не имеет. Но чтобы поисковик знал о вашем сайте, достаточно зарегистрировать его в Яндексе.

Майл. Проиндексировать сайт в поисковой системе Mail.ru полезно и выгодно, поскольку поиском и почтовым сервисом этой системы пользуются многие люди. Кстати, Майл имеет кабинет вебмастера с набором различных инструментов. Добавить сайт на индексацию можно на этой странице. Чтобы пользоваться сервисом вебмастера, необходимо иметь аккаунт в Mail.ru.

Yahoo! Одной из самых первых и наиболее популярных зарубежных поисковых систем считается Yahoo! Добавить сайт в нее можно на вот этой странице.

Как узнать, проиндексирован ли сайт

коллаж из разных предметов

То, что вы работаете над своим проектом или добавляли его адрес в «вебмастера» различных поисковых систем, вовсе не означает, что индексация сайта в поисковиках произошла. Узнать об этом можно, опять же, у самих поисковых систем.

  • Индексацию ресурса в Яндексе можно проверить на странице: https://webmaster.yandex.ru/site/indexing/urlchecker/. В форму необходимо ввести адрес ресурса, и уже через несколько мгновения вы увидите список страниц сайта, которые учитываются и ранжируются Яндексом. Или же не увидите ни одной страницы, если Яндекс игнорирует по какой-либо причине ваш ресурс (или еще банально до вашего web-сайта не добрался).
  • Индексацию в Гугле проверить можно прямо на странице поиска (google.ru). Необходимо ввести команду site:sait.ru. Где вместо sait.ru вы вводите имя вашего проекта.

Кстати! Проверка ресурса в Гугле автоматически означает проверку и на Mail.ru, поскольку эти две системы взаимосвязаны. Точно также взаимосвязаны Яндекс и Rambler.

Как ускорить индексацию в Яндексе и Google

скрин поисковой выдачи яндекса

Чтобы гарантированно проиндексировать сайт в Яндексе и Гугл, необходимо провести ряд мероприятий. Они были разработаны специалистами данных поисковых систем, чтобы раз и навсегда ответить вебмастерам на вопрос, как проиндексировать сайт.

Прежде всего, необходимо использоваться сервис Яндекс.Вебмастер и Гугл.Вебмастер, и зарегистрировать свое детище в них (об этом я уже написал выше).

Следует не пренебрегать необходимостью создания sitemap. Она ценна тем, что содержит полный список всех страниц, поэтому роботы проверяют, прежде всего ее. Создается она при помощи специального плагина, название которого укажу чуть ниже.

Robots.txt – это важнейший инструмент для продвижения. Он представляет собой текстовый файл, своеобразную инструкцию для поисковых роботов. В этом документе даются четкие инструкции, следуя которым боты будут индексировать или нет страницы, каталоги. В robots.txt можно установить параметры для всех поисковиков сразу или по отдельности. Скачать готовый файл роботса можно по этой ссылке. Только обязательно замените vas-domen.ru на адрес вашего сайта!

Специалисты Яндекса советую закрыть от индексации те страницы, которые пользователь не видит, так как они не для него.

Плохо влияет на видимость веб-ресурса в поисковиках слишком длинные URL или большое количество вложенных директорий.Некоторые файлы плохо «читаются» роботами. Так, в файлах с расширением pdf полезным может быть только контент, а графические элементы нет.

Плагины для ускорения индекса

монитор и разные девайсы

Для того, чтобы максимально ускорить индекс есть специальные полезные плагины wordpress. Про то, как проводить установку плагинов я писал в этой статье. Ниже я привожу их список (кстати большинство из них установлено и у меня):

1. RusToLat – плагин, меняющий некрасивые названия страниц (типа /?p=121) на латинские –  drtapac.biz/plagini-dlya-saita
2. All in One SEO Pack – плагин, который делает к каждой странице вашего блога поля title, description и keywords
3. WP DS Blog Map – этот плагин создает HTML карту сайта, попадая на которую робот видит сразу все страницы вашего сайта.
4. Yet Another Related Posts Plugin – этот плагин добавляет в конце каждой вашей записи  ссылки на похожие посты.
5. WordPress Popular Posts – а этот выводит в сайдбар самые читаемые записи (как у меня :))
6. WP-Polls – при помощи оного плагина вы сможете добавлять опросы на свой сайт (хорошо помогает в наращивании поведенческих факторов)
7. Google XML Sitemaps – самый душевный плагин, который создает xml карту сайта, которую можно выгрузить в вемастера яндекса и гугла.

Небольшое заключение

Как видите, для того чтобы обеспечить полный, эффективный индекс интернет-ресурса требуется не так уж и много. Но в любом случае, самое главное – наполнять свой веб-сайт полезным для пользователей, качественным контентом, обновлять его периодически. Тогда вам не придется искать ответ на вопрос, как проиндексировать сайт в поисковиках, поскольку они будут находить его самостоятельно.

А как ускоряете вхождение в индекс web-ресурсов вы? Напишите в комментариях ниже!

Поделиться этой статьей в соц. сетях

Опубликовать в Google Buzz
Опубликовать в Google Plus
Опубликовать в LiveJournal
Опубликовать в Мой Мир
Опубликовать в Одноклассники