Можно провести аналогию с картотекой, где хранится информация обо всех книгах в библиотеке. В нашем случае, картотека — это база данных «поисковой индекс», в которой поисковые роботы ищут результаты по запросу пользователя. Таким образом, индексация сайта — это способ понять, какие страницы сайта будут показаны пользователю по запросу.

Index

Проверяем индексацию сайта в поисковой системе

Введите в Google поиске запрос «site:адрес сайта».

После чего поисковик покажет все проиндексированные страницы сайта. Проверка индексации сайтов — это сравнение количества результатов с реальным количеством страниц.

Проверяем индексацию сайта

Если цифры совпадают, значит все материалы проиндексированы. Прекрасно!

Если цифры не совпадают, значит индексация сайта в Гугл проведена поисковыми роботами выборочно или есть проблемы с самими страницами, из-за чего они не попадают в индекс.

Для проверки индексации конкретной страницы используется такой же алгоритм: ввести в поисковике запрос «site:адрес страницы».

Проверяем индексирование страницы

Если индексация сайта не показала вашей страницы, значит Google не знает о ней. Этому есть несколько причин, о которых расскажем далее.

Проверяем индексацию сайта с помощью Search Console

В чем преимущество Google Search Console?

Помогает быстро провести проверку любого сайта на индексацию и найти все ошибки.
Показывает статус каждой страницы.

Как проверить?

Заходим в сервис;
Переходим в раздел «Проверка URL»;
Вписываем ссылку в поисковую строку;
Видим результат:

URL есть в индексе Google

Подаем запрос на индексирование страницы в Google Search Console

Но что делать, если страницы нет в поисковой выдаче? Как ускорить индексацию нужного сайта и возможно ли вообще это сделать?

URL нет в индексе Google

Потребуется подождать, пока поисковые роботы найдут страницу, либо подать запрос на индексирование — это ускорит процесс. Нажмите на кнопку «Запросить индексирование».

Запросить индексирование

Как подать на индексирование сразу много ссылок?

Чтоб просканировать сразу много URL:

Создайте sitemap и сделайте его доступным для Google;
Откройте Search Console;
Перейдите в раздел Sitemaps → Сканирование → файлы Sitemap;
Загрузите и отправьте файл.

Отказ в индексировании: что делать?

Почему не происходит индексация сайта в Google:

новый сайт, который еще не отсканировался Google

отсутствие sitemap — может быть выборочная индексация страниц сайта

ошибки на странице — проверяйте отчеты сервиса Гугл;

мало контента (текст и медиа-объекты)

ошибки в robots.txt — добавлена директива noindex или доступ к странице только по паролю
поисковые роботы обнаружили неуникальный контент;

дублирование страниц или повторение заголовка страницы

низкая скорость загрузки

Если проверка индексации сайта закончилась отказом, это еще не конец света. Исправьте ошибки и подайте запрос на переиндексацию.

Переиндексирование

Исправили ошибки страницы, которые показала проверка индексации сайта онлайн, или внесли изменения — нужна переиндексация.

Как подать запрос на переиндексацию страницы? Так же, как и запрос на индексирование:

Зайти в Google Search Console;
Вписать ссылку в разделе «Проверка URL»;
Нажать на «Запросить индексирование».

Закрыть от индексирования

Зачем закрывать страницу от индексирования?

чтобы удалить страницу из выдачи Google;
не дать новой странице сканироваться;
не нарушать оптимизацию, если на сайте технические работы.

Как это сделать?

в настройках сервера: запросить доступ по паролю;
добавить директиву noindex в мета-тег;
изменить заголовок HTTP-ответа на noindex;
добавить директиву Disallow в robots.txt.

Выводы

Что такое индексация сайта и чем она важна для его собственника? Если коротко — именно она гарантирует, что в поисковой выдаче по запросу пользователя появится ваш ресурс.

Два самых простых и быстрых способа проверить индексацию сайта.

Ввести в поисковой выдаче запрос «site:адрес сайта»;
Проверить URL в Google Search Console.

Долго не индексируется страница? Подайте запрос на индексацию.

Уже подавали? Тогда проверьте статус по страницам: исправьте ошибки и подайте запрос еще раз.

Затеяли технические работы на сайте? Убедитесь, что индексация сайта закрыта, чтобы оптимизация страницы не была нарушена.

Если на вашем сайте регулярно появляются новые страницы, вы делитесь ими в соцсетях и добавляете новый контент — поисковые роботы быстро найдут и отсканируют ваш сайт.

К примеру, информационному ресурсу, на котором постоянно публикуются новые объявления, подавать запрос на индексирование необязательно. Если сайт активный, то Google достаточно быстро его найдет.

Но если ваша цель — увеличить органический трафик, то запрос на индексирование ускорит процесс. Это особенно важно для коммерческих сайтов, если продавать нужно прямо сейчас.

Также читайте другие статьи в блоге Webpromo:

И подписывайтесь на наш Telegram-канал про маркетинг.