Проверяем индексацию сайта в поисковых системах
Перед начало продвижения вашего сайта, важно проверить его индексацию в поисковых системах в Яндекс и Google. Иначе если какие то страницы не проиндексированы то после их оптимизация, трафик на сайт не вырастит. А это потерянные потенциальные клиенты.
Шаг 1. Оцениваем сколько страниц на сайте, что бы понимать сколько страниц не попало в индекс. Для этого парсим сайт с помощью ComparseR-а (платная), бесплатно можно использовать Xenu.
Краулер нашел 16 страниц. Не забываем что благодаря различным настройкам он может найти и системные страницы, которые не нужны пользователям.
Шаг 2. Теперь проверим все ли они проиндексированы, переходим в Яндекс.Вебмастер и выбираем нужный сайт. Если кто не добавил сайт в панель вспоминаем как добавить сайт в Яндекс, Гугл вебмастер.
Шаг 3. Переходим в раздел "Индексирование>Страницы в поиске>История"
Шаг 4. Смотрим и оцениваем как робот Яндекса индексировал сайт, какие страницы исключил, соответсвует ли количество страниц которые есть на сайте.
Шаг 5. Полезно посмотреть раздел "Структура сайта" там содержится информация о наибольшем количестве страниц которые находятся в какой то директории сайта. Один раз мне попалась категория в которой лежали дубли основных страниц и мешали им хорошо ранжироваться.
Шаг 5. Проверяем индексацию страниц в Google Search Console.
Шаг 6. Переходим в раздел "Индекс Google>Статус индексирования. "
Шаг 7. Так же полезно посмотреть разделы: "Заблокированные ресурсы, ошибки и статистика сканирования."
Иногда большая разница между результатами в Google и Яндекс свидетельствует о наличии проблем с сайтом.
Шаг 1. Отпрываем поисковую систему Яндекс и Гугл.
Шаг 2. Вводим оператор «site:[url вашего сайта]» он выдает информацию о приблизительном количестве проиндексированных страниц. Полезно тоже просматривать что бы оценить ваши сниппеты.
Шаг 3. Вводим оператор «url:[url вашей страницы]» и проверяем индексацию конкретной страницы.
1. Ошибка с robots.txt. Часто советуют закрывать в robots.txt всё ненужное. Особенность файла robots.txt в том, что один лишний символ может открытый для индексации сайт превратить в закрытый.
2. Ошибка с метатегом robots. Частая ошибка при несознательном изменении настроек CMS или хостинга.
3. Новый сайт. Иногда нужно просто подождать. Страницы в индекс не попадают все и сразу. Часто этот процесс растягивается на несколько месяцев.
4. Нет карты сайта (sitemap). Карта сайта поможет поисковым роботам быстрее просканировать и проиндексировать ваш сайт. Ссылку на карту нужно добавить в панель вебмастеров и прописать в robots.txt.
5. Ошибки на сайте. Панели вебмастеров регулярно оповещают владельцев сайтов об ошибках. Заметили проблему в индексации? Смотрите, какие ошибки находит робот, и исправляйте их.
6. И другие причины плохой индексации: дубли страниц; неуникальный контент; проблемы с доступностью и скоростью загрузки, на сайт наложены санкции.
Итого: После того как вы собрали всю информацию и сделали анализ ситуации, необходимо отправить на индексацию страницы которых нет в поиске или запретить индексацию не нужных вам страниц.
Домашка: Проверить насколько хорошо ваш сайт индексируется поисковыми машинами. Все вопросы бурно обсуждаем в комментариях.
Индекс или поисковый индекс - база данных, содержащая информацию о документах, собранную роботами поисковых систем. Процесс занесения поисковым роботом информации о появившемся сайте в базу данных называется индексацией сайта. После обработки полученных данных поисковые системы с помощью соответствующих алгоритмов ранжирования получают возможность выводить сайт в выдаче результатов.
Проверяем индексацию сайта в панели вебмастеров
Шаг 1. Оцениваем сколько страниц на сайте, что бы понимать сколько страниц не попало в индекс. Для этого парсим сайт с помощью ComparseR-а (платная), бесплатно можно использовать Xenu.
Краулер нашел 16 страниц. Не забываем что благодаря различным настройкам он может найти и системные страницы, которые не нужны пользователям.
Шаг 2. Теперь проверим все ли они проиндексированы, переходим в Яндекс.Вебмастер и выбираем нужный сайт. Если кто не добавил сайт в панель вспоминаем как добавить сайт в Яндекс, Гугл вебмастер.
Шаг 3. Переходим в раздел "Индексирование>Страницы в поиске>История"
Шаг 4. Смотрим и оцениваем как робот Яндекса индексировал сайт, какие страницы исключил, соответсвует ли количество страниц которые есть на сайте.
Шаг 5. Полезно посмотреть раздел "Структура сайта" там содержится информация о наибольшем количестве страниц которые находятся в какой то директории сайта. Один раз мне попалась категория в которой лежали дубли основных страниц и мешали им хорошо ранжироваться.
Шаг 5. Проверяем индексацию страниц в Google Search Console.
Шаг 6. Переходим в раздел "Индекс Google>Статус индексирования. "
Шаг 7. Так же полезно посмотреть разделы: "Заблокированные ресурсы, ошибки и статистика сканирования."
Иногда большая разница между результатами в Google и Яндекс свидетельствует о наличии проблем с сайтом.
Проверяем индексацию сайта в поисковой выдаче
Шаг 1. Отпрываем поисковую систему Яндекс и Гугл.
Шаг 2. Вводим оператор «site:[url вашего сайта]» он выдает информацию о приблизительном количестве проиндексированных страниц. Полезно тоже просматривать что бы оценить ваши сниппеты.
Шаг 3. Вводим оператор «url:[url вашей страницы]» и проверяем индексацию конкретной страницы.
Почему не индексируется сайт?
1. Ошибка с robots.txt. Часто советуют закрывать в robots.txt всё ненужное. Особенность файла robots.txt в том, что один лишний символ может открытый для индексации сайт превратить в закрытый.
2. Ошибка с метатегом robots. Частая ошибка при несознательном изменении настроек CMS или хостинга.
3. Новый сайт. Иногда нужно просто подождать. Страницы в индекс не попадают все и сразу. Часто этот процесс растягивается на несколько месяцев.
4. Нет карты сайта (sitemap). Карта сайта поможет поисковым роботам быстрее просканировать и проиндексировать ваш сайт. Ссылку на карту нужно добавить в панель вебмастеров и прописать в robots.txt.
5. Ошибки на сайте. Панели вебмастеров регулярно оповещают владельцев сайтов об ошибках. Заметили проблему в индексации? Смотрите, какие ошибки находит робот, и исправляйте их.
6. И другие причины плохой индексации: дубли страниц; неуникальный контент; проблемы с доступностью и скоростью загрузки, на сайт наложены санкции.
Итого: После того как вы собрали всю информацию и сделали анализ ситуации, необходимо отправить на индексацию страницы которых нет в поиске или запретить индексацию не нужных вам страниц.
Домашка: Проверить насколько хорошо ваш сайт индексируется поисковыми машинами. Все вопросы бурно обсуждаем в комментариях.