Как быстро проверить индексацию сайта в Google и Яндекс. Проверить оптимизацию сайта онлайн google
Как быстро проверить индексацию сайта в Google и Яндекс — Netpeak Blog
Как оперативно узнать, попала ли важная для вас страница в индекс поисковых систем? Да и вообще, сколько страниц сайта «видят» поисковики? Я описал в этом посте способы, которые чаще всего используют SEO-специалисты, и приготовил бонус для читателей.
При индексировании страницы робот поисковой системы добавляет сведения о сайте в базу данных. Дальнейший поиск происходит по проиндексированным страницам. Не стоит путать индексацию и сканирование.
Робот может просканировать весь сайт быстро. А добавлять в индекс медленно, не добавлять часть страниц или удалять страницы из индекса.
1. Проверьте индексацию в панели вебмастеров
Это базовый способ проверки для вебмастера или владельца сайта.
Google. Необходимо зайти в Search Console и на вкладке «Индекс Google» выбрать «Статус индексирования».
Yandex. Проходим авторизацию в Яндекс.Паспорт, заходим в Яндекс.Вебмастер и переходим по пути «Индексирование сайта» — «Страницы в поиске». Еще один вариант: «Индексирование сайта» — «История» — «Страницы в поиске». Здесь можно посмотреть динамику изменения количества страниц в поиске.
Чтобы использовать этот метод, у вас должен быть определенный уровень доступа в панель вебмастера. Пример хорошего индексирования сайта. Количество качественных страниц растет, и они добавляются в индекс. 
Проблемы с индексацией выглядят так:
На скриншоте — сайт, закрытый от индексации в файле robots.txt
Хотите узнать больше о поисковом продвижении? Подписывайтесь на рассылку:
Наши подписчики всегда получают больше.
2. Используйте операторы в поисковых запросах
Поисковые операторы позволяют уточнять результаты поиска. Оператор «site:» выдает информацию о приблизительном количестве проиндексированных страниц. Для проверки в строке поиска Google или Яндекс введите «site:[url вашего сайта]».
Например, сайт cubing.com.ua находится под фильтром АГС.
Используя дополнительные инструменты поиска, можно узнать данные об индексации за определенный период времени. Так, за последний час в индексе Google появились 49 страниц русскоязычной Википедии:
3. Используйте плагины и букмарклеты
Плагины и букмарклеты (небольшие javascript-программы, сохраняемые как браузерные закладки) — автоматизированный вариант проверки. В данном случае не надо открывать поисковик отдельно и вводить что-либо в поиск.
Это делают плагины и скрипты:
На скриншоте — плагин RDS bar для Google Chrome. Возможности RDS bar для Mozilla Firefox еще круче. С помощью плагина можно проверить индексацию текущей страницы и общий индекс всего сайта. Но в бесплатных вариантах капча не даст спокойно работать :)
Букмарклет «Проверка индексации». Перетащите ссылку из открытого файла на панель закладок. Дальше просто откройте нужный сайт и нажмите на эту закладку. Откроется новая вкладка с Google или Яндекс и нужными данными в выдаче.
4. Установите сервисы для проверки индексации
Это маленькие помощники SEO-специалистов. Их множество. Например, связка Netpeak Spider и Netpeak Checker.
Netpeak Spider позволяет просканировать весь сайт. Плюс в том, что вы получаете не только информацию о количестве страниц в индексе, но и список этих страниц, а также много дополнительных данных: каноникал, код ответа, название, заголовки, метаописания, мета роботс, robots.txt, редиректы, внутренние и внешние ссылки и другие. Также программа предупреждает об ошибках в этих данных.
Как только список всех URL сайта был получен, его можно загрузить в Netpeak Checker и уже проверить непосредственно на факт индексации поисковыми системами.
Почему не индексируется сайт?
1. Новый сайт. Иногда нужно просто подождать. Страницы в индекс не попадают все и сразу. Часто этот процесс растягивается на несколько месяцев.
2. Нет карты сайта (sitemap). Качественная карта сайта поможет поисковым роботам быстрее просканировать и проиндексировать ваш сайт. Ссылку на карту нужно добавить в панель вебмастеров.
3. Ошибки на сайте. Панели вебмастеров регулярно оповещают владельцев сайтов об ошибках. Заметили проблему в индексации? Смотрите, какие ошибки находит робот, и исправляйте их.
4. Ошибка с метатегом robots. Частая ошибка при несознательном изменении настроек CMS или хостинга. В коде страниц сайта появляется следующая строка:
5. Ошибка с robots.txt. Часто советуют закрывать в robots.txt всё ненужное. Особенность файла robots.txt в том, что один лишний символ может открытый для индексации сайт превратить в закрытый. Даже если вы правильно закрыли часть сайта, ненароком можно было зацепить нужные вещи, которые находятся глубже. Ваш сайт закрыт от индексации, если вы видите у себя в robots.txt эту конструкцию:
User-agent: * Disallow: /
Что еще может стать поводом для проблем с индексацией сайта?Выводы
Цель владельца сайта — все страницы, открытые для индексации, в индексе поисковой системы. Достичь этого сложно. К тому же важно следить за процессом занесения страниц в индекс: резкие изменения в положительную или отрицательную сторону — сигнал о проблеме. Мы описали четыре способа проверки индексации страниц сайта:
- В панелях вебмастеров Google и Яндекс.
- С помощью поискового оператора «site:».
- С помощью плагинов, вроде RDS bar, и буркмарклетов.
- В специальных сервисах, например, Netpeak Spider.
Часто дело не в индексации, а в подходе к оптимизации. Хотите индексироваться и ранжироваться — отвечайте на запрос пользователя лучше всех. В таком случае все описанное выше понадобится только для фиксации хорошего результата.
P.S. Бонус для тех, кто дочитал :)
Держите таблицу, с помощью которой я работаю с индексацией сайтов. Как работать с таблицей?
- Сделать копию.
- Выбрать доменную зону.
- Загрузить в столбец А список URL-адресов.
- Подождать результатов (чем больше адресов, тем дольше надо ждать).
В итоге получаем приблизительно такую картину:
Затем можно выделить столбцы B, C и скопировать данные на соседние два столбца. Так вы сохраните результаты на текущую дату для сравнения с результатами индексации через определенное время. А вот еще одна таблица для фиксации результатов выдачи по оператору «site:» для Yandex. Инструкция проста:
- Выбрать доменную зону.
- Выбрать регион.
- Ввести запрос (адрес сайта).
- Поставить «1», если хотите получить адрес и заголовок.
- Ввести количество страниц выдачи, которые вы хотите сохранить (от 1 до 100).
С помощью этой таблички я не раз находил проблемные Title или лишние страницы в индексе.
netpeak.net
Как проверить индексацию сайта в Google
Проверка индексации сайта является тем мероприятием, которое позволяет предупредить снижение уровня заработка вебмастера. Дело в том, что существует такое понятие, как «выпадение» страниц, по разным причинам приводящее к потере трафика.
Недостаточное количество контента на странице, организационные моменты при «переселении» на другой домен, спам – эти и другие причины сводят на «нет» все усилия вебмастеров. Опытный оптимизатор ни за что не допустит такой ситуации, впрочем, как и понижения рейтинга у площадки, продающей «вечные» ссылки. Проверять индексирование веб-сайта – не прихоть, а вынужденная необходимость!
Существует несколько типов поисковых запросов Google, позволяющих увидеть проиндексирована страница или нет
Проиндексированные страницы сайта
Страницы сайта, прошедшие индексацию Google, можно просмотреть, воспользовавшись оператором «site:». Следует учитывать, что индексация Google является геозависимой, поэтому может выпадать разное число страниц в индексе для google.ru и google.com.
Итак, к указанному оператору добавляем нужный url, причем, между оператором и самой ссылкой на сайт не должно быть пробелов:
site: google.ru
Кроме того, можно провести поиск по целому домену или по отдельно взятому подкаталогу:
site: google.com/ webmasters
Для избирательного поиска с целью исключения ненужных страниц нужно поставить перед оператором знак «-». Наглядно это будет выглядеть так:
site:google.ru -site: adwords. google.com
Подобный поиск выдаст результат, в котором будут содержаться все проиндексированные страницы в домене google.ru, за исключением страниц adwords. google.ru.
Страницы со ссылкой на главную сайта
Для обзора ресурсов со ссылкой на www.google.ru нужно воспользоваться следующим запросом, но имейте ввиду, что первый поиск всегда выдает больше результатов:
link:google.ru или link:www
Кроме того, целенаправленный поиск ссылок на определенные страницы выполняется по запросу:
link:google.ru/webmasters
Текущий кэш вашего сайта
Оператор «cache:» информирует об архивированной копии страницы, которая проиндексирована Google. К примеру, cache:google.ru воссоздает новейшую проиндексированную версию главной сайта, а также выдает информацию о дате создания КЭШа, что дает возможность просмотра версии страницы с обычным текстом. Это чрезвычайно удобно, т.к. становится понятно, как именно робот Googlebot может увидеть страницу.
Используя команду «метатег noarchive», можно ограничить доступ пользователей в результатах поиска к кэшированной версии любой страницы. Между тем, страница будет сканироваться и индексироваться поисковиком Google:
<meta name="robots" content="noarchive">Похожие страницы
Оператор «related:» позволяет увидеть ресурсы, подобные искомому сайту. Такой поиск применяется, как правило, для пересекающихся ресурсов.
В Google может быть использовано целый ряд показателей для выявления схожести, но качество возвращаемых сайтов никоим образом не влияет на процесс индексации страниц поисковой системой Google. Рекомендую почитать пост про дополнительный индекс гугла, там могут быть страницы которых нет в основном поиске.
great-world.ru
Проверить индексацию сайта в поисковых системах
Всем привет. После создания и настройки всего необходимого на сайте, его как правило открывают для индексации в поисковых системах. Что такое индексация и как ее ускорить можно прочитать в статье: “12 советов которые ускорят индексацию сайта поисковыми системами Яндекс и Google”. Сегодня я же хотел бы затронуть тему, о том как проверить количество страниц и какие страницы проиндексированные Яндексом и Гуглом.
Есть несколько способов которые помогут проверить индексацию сайта.
- Проверка с помощью Яндекс и Гугл. Использование операторов.
- Проверка с помощью инструментов Яндекс и Гугл (Yandex Webmaster и Google Webmaster).
- Проверка с помощью онлайн сервисов.
Каждый из способов эффективный и бесплатный.
Давайте начнем и пойдем по порядку.
Проверить индексацию сайта с помощью операторов Яндекс и Гугл
Этот способ появился давно и использовался еще когда не было онлайн сервисов, Гугл и Яндекс вебмастера. Способ довольно таки хороший и результаты показывает на все 100%.
Проверка количества страниц в индексе Яндекса
Что бы проверить количество страниц которые находятся в индексе Яндекса, необходимо использовать несколько операторов:
- Оператор “site” находит и показывает полностью все страницы, которые находятся в базе данных Яндекса.
- Оператор “host” дает информацию по проиндексированным страницам, документам с доменов и поддоменов сайта.
Давайте посмотрим на практике.
Сначала будем использовать оператор “site”, для примера я возьму наш сайт Loleknbolek.com. Заходим в поисковую систему Яндекс и в строке прописываем:
site:loleknbolek.com
результат можно посмотреть на картинке ниже.
Теперь давайте попробуем оператор “host”, для примера снова используем наш сайт Loleknbolek.com. Заходим в поисковую систему Яндекс и в строке поиска прописываем:
host: loleknbolek.com
результат можно посмотреть на картинке ниже.
Если вы заметили, то я использую проверку домена без www, так как он является главным зеркалом (что такое зеркало сайт и как сделать главное зеркало, можете посмотреть в статье: «Как удалить дубли страниц или закрыть их от индексации» ). Теперь давайте проверим домен с www используя те же операторы “site” и “host”.
Результат оператора “site”.
Результат оператора “host”
Выводы: как не крути, количество страниц в индексе 125 штук. У меня так совпало, что при всех проверках вышло 125, но у Вас может быть по другому. Почему 125 страниц показывает оператор “site: www.loleknbolek.com” спросите Вы? Да потому, что он показывает все страницы как для www так и без www. Оператор “host” показывает только страницы данного домена с www или без.
Количество страниц может быть разным, этом у меня так получилось, что их количество совпало.
Проверка количества страниц в индексе Google
Что бы проверить количество страниц в индексе Гугла необходимо использовать оператор «site«. Данный оператор показывает количество страниц домена в индексе поисковика, при чем если вы прописываете для домена с www, то он показывает страницы только для этого случая, если без www, то для другого. Если сравнить с поисковиком Яндекс, то там он показывает все страницы как с www так и без.
Заходим в поисковую систему Гугл и в строке прописываем, без www:
site:loleknbolek.com
Результат:
Как видим число страниц 126, что на 1 больше чем в Яндексе.
Теперь давайте для наглядности пропишем с www:
site:www.loleknbolek.com
Количество страницы 0, чего и следовало ожидать.
Проверка индексации сайта с помощью инструментов Яндекс и Гугл (Yandex Webmaster и Google Webmaster)
Так же можно использовать инструменты Яндекса и Google для проверки. Для этого необходимо зарегистрировать сайт в Яндекс Вебмастере и Гугл Вебмастере. Что бы это сделать необходимо перейти по ссылкам ниже и проделать все необходимые шаги.
Для проверки количество страниц заходим в инструменты Яндекс, по ссылке выше. В общей информации можно увидеть строчку “Страниц в поиске”.
Видим, что страниц в поиске 123 штуки. Нажимаем на данный пункт и нас перекинет на страницу, где можно увидеть страницы, которые находятся в индексе.
Количество страниц почти совпадает с тем, количеством которое мы проверяли с помощью операторов “site” и “host”.
Что бы проверить количество страниц с помощью Google Webmaster, необходимо перейти по ссылке которая находится выше. Далее ищем пункт “Индекс Google” — > “Статус индексирования”. На странице выбираем “Расширенные данные”.
Здесь можно увидеть все страницы, которые были проиндексированные. Если включить “Заблокировано в файле robots.txt” и “Удалено”, то так же можно увидеть все страницы, которые по тем или другим причинам исключены с индекса поисковой системы Google. Так же можно сделать выгрузку файла со всеми данными и посмотреть статистику за каждый день.
Одно мне не нравиться в Вебмастере Гугла, то что сразу не показываются все страницы, которые находятся в индексе, так как это сделано в Яндексе. Но все же данные можно выгружать.
Проверить индексацию сайта с помощью онлайн сервисов.
Если Вам не хватает данных которые можно получить с первых двух способов, то можно воспользоваться онлайн сервисами, которые дают хорошие результаты но не всегда. Бывают случаи, что результаты очень отличаются, поэтому я в большей степени доверяю операторам и инструментам поисковых систем.
Таких сервисов в интернете полно, но я попробую привести те, которые наиболее точно показывают всю картинку.
Онлайн сервисы для проверки индексации сайта:
- Сервис XSeo.
- Сервис PR-CY.
- Сервис Webmasters.
1. Сервис XSeo. С его помощью можно в один-два клика проверить количество страниц в Гугла и Яндексе. Хорош он тем, что показывает главный индекс Google и второстепенный (supplemental result). Что такое сопли (supplemant result) можете почитать в статье: “Что такое сопли Google (supplemental results). Причины и способы нахождения”. Для проверки сайта переходим по ссылке выше, вводим свой домен и нажимаем кнопку “Проверить”.
Результат:
Как видим все быстро и просто.
2. Сервис PR-CY. Данный сервис, разработка очень хорошего и полезного форума PR-CY. Параллельно с проверкой индексации можно посмотреть такие параметры как:
- ТИЦ, PR.
- нахождение сайта в каталоге Яндекса и Dmoz.
- внешние ссылки.
Здесь так же есть много интересных сервисов, которые можете попробовать. Переходим по ссылке выше, вводим свой домен и получаем результаты.
Количество страниц в Google:
Количество страниц в Yandex:
Всегда использую данный сервис для проверки различных параметров, легкий в использовании и дает отличные результаты.
3. Сервис Webmasters. Еще один сервис от хорошего SEO форума. Результаты показывает хорошие, но в отличии от PR-CY результатов очень мало. Плюсом данного сервиса является то, что за один раз можно проверить несколько доменов. Для проверки необходимо перейти по ссылке выше и ввести свой адрес.
Из своего опыта могу сказать, что лучше всего использовать для проверки индексации сайта использовать операторы Яндекс и Гугл, а так же их инструменты. Из сервисов могу выделить PR-CY, так как в своем арсенале он имеет довольно таки богатый функционал и с которым приятно и легко работать.
Всем спасибо! Задаем вопросы в комментариях, рад буду ответить.
loleknbolek.com
