Можно провести аналогию с картотекой, где хранится информация обо всех книгах в библиотеке. В нашем случае, картотека — это база данных «поисковой индекс», в которой поисковик ищет результаты по запросу пользователя. Таким образом, индексация сайта — это способ понять, какие страницы сайта будут показаны пользователю по запросу.

Index

Проверяем индексацию сайта в поисковой системе

Введите в Google поиске запрос «site:адрес сайта».

После чего поисковик покажет все проиндексированные страницы сайта. Проверка индексации сайтов — это сравнение количества результатов с реальным количеством страниц.

Проверяем индексацию сайта

Если цифры совпадают, значит все материалы проиндексированы. Прекрасно!

Если цифры не совпадают, значит индексация сайта в Гугл проведена поисковыми роботами выборочно или есть проблемы с самими страницами, из-за чего они не попадают в индекс.

Для проверки индексации конкретной страницы используется такой же алгоритм: ввести в поисковике запрос «site:адрес страницы».

Проверяем индексирование страницы

Если ваша страница не отобразилась, значит Google не знает о ней. Этому есть несколько причин, о которых расскажем далее.

Проверяем индексацию сайта с помощью Search Console

В чем преимущество Google Search Console?

Помогает быстро провести проверку любого сайта на индексацию и найти все ошибки.
Показывает статус каждой страницы.

Как проверить?

Заходим в Search Console;
Переходим в раздел «Проверка URL»;
Вписываем ссылку в поисковую строку;
Видим результат:

URL есть в индексе Google

Подаем запрос на индексирование страницы в Google Search Console

Но что делать, если страницы нет в индексе? Как ускорить индексацию нужного сайта и возможно ли вообще это сделать?

URL нет в индексе Google

Потребуется подождать, пока поисковые роботы найдут страницу, либо подать запрос на индексирование — это ускорит процесс.

Нажмите на кнопку «Запросить индексирование».

Запросить индексирование

Как подать на индексирование сразу много ссылок?

Чтоб просканировать сразу много URL:

Создайте sitemap и сделайте его доступным для Google;
Откройте Search Console;
Перейдите в раздел Sitemaps → Сканирование → файлы Sitemap;
Загрузите и отправьте файл.

Отказ в индексировании: что делать?

Почему не происходит индексация сайта в Google:

новый сайт, который еще не отсканировался Google

отсутствие sitemap — может быть выборочная индексация страниц сайта

ошибки на странице — проверяйте отчеты Google Search Console

мало контента (текст и медиа-объекты)

ошибки в robots.txt — добавлена директива noindex или доступ к странице только по паролю
неуникальный контент

дублирование страниц или повторение заголовка страницы

низкая скорость загрузки

Если проверка индексации сайта закончилась отказом это еще не конец света. Исправьте ошибки и подайте запрос на переиндексацию.

Переиндексирование

Исправили ошибки страницы, которые показала проверка индексации сайта онлайн, или внесли изменения — нужна переиндексация.

Как подать запрос на переиндексацию страницы? Так же как и запрос на индексирование:

Зайти в Google Search Console;
Вписать ссылку в разделе «Проверка URL»;
Нажать на «Запросить индексирование».

Закрыть от индексирования

Зачем закрывать страницу от индексирования?

чтобы удалить страницу из выдачи Google;
не дать новой странице сканироваться;
не нарушать оптимизацию, если на сайте технические работы.

Как это сделать?

в настройках сервера: запросить доступ по паролю;
добавить директиву noindex в мета-тег;
изменить заголовок HTTP-ответа на noindex;
добавить директиву Disallow в robots.txt.

Выводы

Что такое индексация сайта и чем она важна для его собственника? Если коротко — именно она гарантирует, что в выдаче по запросу пользователя появится ваш ресурс.

Два самых простых и быстрых способа проверить индексацию сайта.

Ввести в поисковой выдаче запрос «site:адрес сайта»;
Проверить URL в Google Search Console.

Долго не индексируется страница? Подайте запрос на индексацию в Google Search Console.

Уже подавали? Тогда проверьте статус по страницам: исправьте ошибки и подайте запрос еще раз.

Затеяли технические работы на сайте? Закройте от индексирования, чтоб оптимизация страницы не была нарушена.

Если на вашем сайте регулярно появляются новые страницы, вы делитесь ими в соцсетях и добавляете новый контент — поисковые роботы быстро найдут и отсканируют ваш сайт.

К примеру, информационному ресурсу, на котором постоянно публикуются новые объявления, подавать запрос на индексирование не обязательно. Если сайт активный, то Google достаточно быстро его найдет.

Но если ваша цель — повысить органический трафик, то запрос на индексирование ускорит процесс. Это особенно важно для коммерческих сайтов, если продавать нужно прямо сейчас.

Также читайте другие статьи в блоге Webpromo:

И подписывайтесь на наш Telegram-канал про маркетинг.