Индексация сайта в яндексе проверить – Проверка индексации сайтов в Яндекс и Google

Индексация сайта в поисковых системах

СОДЕРЖАНИЕ

Что такое индексация сайта и как она происходит

Как проверить индексацию сайта

Проверить индексацию сайта в Яндекс.Вебмастере

Проверка индексации сайта в Google Search Console

Индексация сайта в Майл (Mail.ru)

Индексация сайта в Bing.com

Сервисы проверки индексации сайтов

Как ускорить индексацию сайта

Быстрая индексация сайта в Яндексе

Индексация картинок сайта

Вопросы

Как запретить индексацию сайта

Как открыть сайт для индексации

Когда последний раз проходил индексацию сайта

Как добавить сайт на индексацию

Что такое индексация сайта и как она происходит

SEO продвижение сайта невозможно без индексации сайта. Чтобы повысить поведенческие факторы, необходимо, чтобы страницы были проиндексированы. Индексация сайта — что это такое простыми словами? У каждой поисковой системы есть свой собственный поисковый робот. Он может в любой момент зайти на сайт и «погулять» по нему, передавая все отсканированные документы (весь html-код, текст, изображения, ссылки и все остальное) в базу своей поисковой системы. Этот процесс принято называть «сканированием».

Далее поисковая система анализирует полученные данные и выставляет ссылки на документы в поисковую выдачу. Именно это и подразумевается под фразой «индексация сайта».

Ну а теперь давайте искать ответы на вопросы «как ускорить индексацию?» и «как улучшить индексацию?»

Как проверить индексацию сайта в Google и Яндекс

Существует несколько способов получения ответа на вопросы «а проиндексирована ли эта страница?», «сколько страниц проиндексировано?» и т.п. Рассмотрим некоторые из самых эффективных. Но для начала маленькое уточнение – обработка поискового запроса и формирование поисковой выдачи происходит на основе проиндексированных «копий» страниц, находящихся в базе данных поисковой системы, а не на основе имеющихся на сайте страниц. Ну а теперь о трех способах проверки индексации:

1. Кабинеты поисковых систем Яндекс, Google, Mail.ru и т.д. Уж там-то со 100% вероятностью можно получить все необходимые данные.

2. В Рунете полно подходящих онлайн-сервисов. Практически все они работают одинаково: указывается адрес сайта и получаем данные и вся история индексации сайта как на ладони.

3. Ручная проверка с помощью оператора site:. Т.е. вбиваем в поисковую строку site:your-site.guru и тут же получаем и список проиндексированных страниц (в виде поисковой выдачи), и их количество.

Проверить индексацию сайта в Яндекс.Вебмастере

Заходим в https://webmaster.yandex.ru/ и логинимся. Далее переходим в «Индексирование сайта» — «Страницы в поиске» (как вариант — «Индексирование сайта» — «История» — «Страницы в поиске»). Здесь можно посмотреть статистику последних изменений в индексации и даже выявить исключенные из индекса страницы.

Проверка индексации в сайта Google Search Console

Чтобы проверить индексацию сайта в Google, нужно первым делом зайти в https://www.google.com/webmasters/tools/home, логинимся, после чего на боковой вкладке «Индекс Google» выбираем «Статус индексирования».

Индексация сайта в Майл (Mail.ru)

У поисковой системы Mail.ru тоже есть свой вэбмастерский кабинет — https://webmaster.mail.ru/. Заходим туда, логинимся и через форму go.mail.ru/addurl добавляем сайт на индексацию. Радует тот факт, что Mail.ru все-таки решила разрабатывать и продвигать свои собственные инструменты для вебмастеров.

Индексация сайта в Bing.com

Кто не в теме, поисковая система Bing была разработана корпорацией Microsoft (ей и принадлежит), чтоб заменить поиск Live Search. В России она пользуется очень малой популярностью. Однако, есть те, кто успешно получает с нее достаточно много поискового трафика. К слову, «пригласить поискового бота» можно и без регистрации – заходим на www.bing.com/toolbox/submit-site-url, вводим адрес сайта, капчу, кнопку «Отправить» и всё!

Сервисы проверки индексации сайтов

В Рунете существует достаточно большое количество сервисов по массовой проверке индексации сайтов. О некоторых из них мы и поговорим.

1) Сервис http://www.seogadget.ru/sepages

Здесь можно сразу закинуть столбиком список сайтов, которые необходимо проверить на индексацию. Причем в списке могут быть как исключительно имена доменов (например, your-site.go), так и ссылки на какие-то конкретные документы (например, your-site.go/content/domashka/) – это не имеет значения, т.к. имена доменов сервис «вычленяет» автоматически.

Данный сервис умеет проверять индексацию в Google и Яндексе. Допускается до 250 проверок в сутки.

2) Сервис http://xseo.in/indexed

Если коротко, то сервис полностью аналогичен предыдущему, за двумя исключениями:

• сервис проверяет индексацию «поштучно», т.е. за один заход можно проверить только один сайт;
• можно проверить индексацию еще и в Bing’е.

Как ускорить индексацию сайта

Вряд ли у кого-то из вас возникнет вопрос «а зачем ускорять индексацию?», т.к. ответ на него и так очевиден: чтоб как можно быстрее предпринять все необходимые меры для завоевания всех топовых позиций по продвигаемым запросам.

Самое первое, что нужно сделать – добавить сайт в Ваши вебмастер-кабинеты от Google и Яндекса. Если этого не сделать, то сайт будет индексироваться очень медленно и очень редко, оставляя вебмастера наедине со своими пестами о покорении хотя бы ТОП-10.

Далее необходимо правильно настроить robots.txt, т.к. за одно посещение поисковый робот может отсканировать лишь определенное количество страниц. И будет очень обидно, если робот начнет сканировать страницы «технического» характера (например, страница регистрации на сайте, либо страница ввода логина-пароля), которым в индексе делать нечего. Чтоб этого не происходило, в файл robots.txt заносятся данные о том, какие страницы сканировать не нужно. О том, как составляется robots.txt, сейчас рассказывать не будем, т.к. у нас уже есть подробнейшая статья на эту тему.

Следующим этапом является настройка xml-карты сайта (sitemap.xml). Она содержит в себе список всех страниц, которые должны быть проиндексированы поисковыми системами. Также можно указать приоритет индексирования, и даже интервалы. Чем чаще будет обновляться карта сайта – тем выше вероятность того, что поисковый робот примет решение заходить на сайт почаще (а нам именно это и нужно, верно?).

Скорость работы сайта также может повлиять на индексацию, т.к. чем быстрее поисковый робот получает ответ на свой запрос – тем лучше, ибо если сказать роботу «у нас обед, приходите через час» — робот просто уйдет, причем надолго.

Ошибки в коде также могут повлиять на индексацию, только негативно. Поэтому крайне важно, чтоб ошибок в коде не было совсем, т.к. вместо кода 200 (а именно такой код отдается при правильной работе) поисковый робот может получить код, например, 404, либо другой, свидетельствующий об ошибке.

В большинстве случаев, описанных выше мер достаточно, чтоб сайт индексировался достаточно быстро.

Быстрая индексация сайта в Яндексе

Есть еще пара неочевидных способов ускорить индексацию нового сайта в Яндексе. Мы уже многократно упоминали о регистрации в вебмастер-кабинетах от Яндекса, Google, Bing и Mail.

В данных кабинетах можно получать статистику о переиндексации страниц, а также получать уведомления о тех или иных ошибках, связанных с работой сайта.

А вот теперь небольшой «лайфхак». В Яндекс.Вебмастере идем в «Индексирование» — «Переобход страниц» и указываем адрес только что созданной страницы. Да, мы не спорим, это не всегда срабатывает, т.к. поисковый робот Яндекса после уведомления действует на свое усмотрение и не всегда принимает решение о посещении этой страницы, но он о ней как минимум узнает. Поэтому мы рекомендуем пользоваться данным инструментом для ускорения индексация нового сайта или его страниц.

Индексация картинок сайта

В основном получение данной информации будет полезно в том случае, если Вы продвигаете, скажем, фотохостинг.

Важно отметить, что у Google, Bing и Яндекса текст и картинки индексируются разными роботами. Быстрее всего картинки индексируются Google’ом. Яндекс индексирует картинки гораздо медленнее по сравнению с Google, но гораздо быстрее по сравнению с Bing, причем последняя медленно индексирует только рунетовские сайты. Не доверяет?

Однако, есть один универсальный совет по оптимизации изображений – прописать в коде атрибуты alt=”” и title=”” для каждого изображения, т.к. они оба очень важны.

Если навести на картинку, то может «всплыть» поясняющая текстовая подсказка, чтобы пользователю было проще понять «куда смотреть и что видеть». Текст этой самой подсказки и прописывается в атрибуте title=””

Также бывают ситуации, когда изображение по каким-то причинам не загружается (может оно удалено, может в браузере отключена загрузка картинок – неважно). В этом случае вместо фотографии должен появиться текст, описывающий, что именно изображено на картинке, которая не загрузилась. Именно этот текст и прописывается в атрибуте alt=””.

Как узнать, сколько картинок проиндексировано поисковиком?

Ответ предельно прост: идем в интересующую нас поисковую систему, в поисковой строке вбиваем оператор site:, после двоеточия без пробела прописываете имя домена, подтверждаем запрос клавишей Enter, а затем переходим на вкладку «Изображения» или «Картинки» (в зависимости от поисковой системы). Вы увидите сами картинки, а также узнаете их точное количество.

Для Яндекса это будет выглядеть вот так:

А для Google – вот так

Вопросы

Как запретить индексацию сайта

Иногда возникает необходимость установить запрет на индексацию сайта. Причин на это может быть несколько – технические работы на сайте, либо тестируется новый дизайн, и т.д.

Способов сказать поисковым системам «не надо тут ничего индексировать» несколько.

Самый первый, самый популярный и самый простой – через файл robots.txt. Достаточно просто прописать вот этот код:

User-agent: *

Disallow: /

Теперь давайте разберем, что этот код означает.

User-agent – это директива, в которой указывается имя поискового робота, для которого сформирован список правил. Если в качестве имени указана звездочка – значит список актуален для всех поисковых роботов (кроме тех, для кого составлены индивидуальные списки правил). Если же указать вместо звездочки имя поискового робота, то список правил будет действовать именно для него:

Директива Disallow: предназначена для того, чтобы сообщить поисковым роботам, какие файлы/папки сканировать не нужно. В нашем случае одиночный слеш показывает, что запрещено индексировать весь сайт целиком.

Бывают и особые случаи, когда требуется закрыть индексацию для всех поисковых систем, кроме какой-то конкретной. В этом случае у нас будет 2 списка (один из которых приведен выше на скриншоте), а второй – индивидуальный список для какого-то конкретного робота. В данном случае – робота поисковой системы Яндекс.

User-agent: *

Disallow: /

User-agent: Yandex

Allow: /

С User-agent и Disallow разобрались, теперь разберемся с директивой Allow. Она является разрешающей директивой. Говоря простым языком, приведенный выше код файла robots.txt запрещает индексацию сайта всем поисковым системам, кроме Яндекса.

Да, мы не спорим, не смотря на запреты, поисковые системы все равно могут проиндексировать сайт. Однако, это бывает настолько редко, что даже статистической погрешностью можно назвать с большой натяжкой.

Второй способ – метатег robots. Для этого необходимо в код сайта добавить следующую строку:

META NAME=”ROBOTS” CONTENT=”NOINDEX, NOFOLLOW”

ВАЖНО!!! Можно ее добавить таким образом, чтоб она прогружалась в код каждой страницы сайта без исключения, а можно добавить на какие-то отдельные страницы. Но в обоих случаях данный мета-тег должен быть размещен в области head html.

По сравнению с первым, второй способ является более сложным для массового запрета на индексацию, и более легким для точечного.

Третий способ – закрытие сайта через .htaccess

Способ тоже довольно простой – добавить в файл .htaccess следующий код:

Теперь поисковый робот не сможет без пароля получить доступ к сайту.

Это самый верный способ закрыть сайт от индексации, но появляется другая проблема – возникают сложности со сканированием сайта на наличие ошибок, т.к. не каждый парсер умеет авторизовываться.

Способ 4 представляет собой настройку заголовка ответа HTTP

Данный способ так же достаточно эффективен для точечного запрета на индексацию. Работает это следующим образом – вместе с кодом ответа сервера отдается еще и X-Robots-Tag заголовок с пометкой noindex. Получив такой «сопроводительный» ответ, поисковая система не будет индексировать данную страницу.

При необходимости можно отдавать несколько X-Robots-Tag заголовков. В данном случае их два noarchive и unavailable_after.

При необходимости можно перед директивой указывать еще и поискового робота, которому адресована директива, да и сами директивы можно писать через запятую. Например, вот так:

Ну и, конечно же, Вы уже и сами догадались, что при отсутствии имени юзер-агента команда будет выполняться всеми роботами. Т.е. директивы можно по-разному комбинировать для разных поисковых роботов.

Как открыть сайт для индексации

Ответ ранее уже прозвучал – с помощью директивы Allow (вспомните пример, когда с помощью robots.txt мы закрывали от индексации сайт для всех поисковых систем, кроме Яндекса).

Еще раз:

Allow: / разрешает индексацию сайта, а Disallow: / запрещает.

Когда последний раз проходила индексация сайта

Посмотреть и историю обхода страниц поисковыми роботами Google достаточно просто. Для начала в поисковую строку вбивается оператор site:, после двоеточия без пробелов указывается имя Вашего домена, затем кликаем в «Инструменты» и выбрать в одном из столбцов подходящий период. Если выбрать «за последние 24 часа», то можно получить либо список станиц, которые были проиндексированы за последние 24 часа, либо получить «Ничего не найдено». Это значит, что за последние 24 часа переиндексации Вашего сайта не было.

В Яндексе же сделано все еще проще – вся необходимая информация и история доступна в Яндекс.Вебмастере:

Как добавить сайт на индексацию

Данная информация будет полезна всем, кто только что создал свой первый сайт, т.е. чем быстрее проиндексируется сайт – тем быстрее Вы получите свой первый поисковый трафик.

Добавление сайта в Google

Для начала переходим по ссылке http://www.google.com/addurl/?continue=/addurl, логинимся (при необходимости), вводим URL, проходим капчу (в данном случае – ставим галочку «Я не робот» и проходим 1-2 задания с картинками), и жмем «Отправить запрос».

Затем Вам будет выдано вот такое сообщение. Оно означает «ОК, сайт принят к сведенью, скоро мы туда заглянем».

Если с сайтом все в порядке, то индексация произойдет очень быстро.

Добавление сайта в Яндекс

Первым делом заходим на https://webmaster.yandex.ru/, регистрируемся, затем переходим в «Индексирование» — «Переобход страниц» и добавляем туда имя домена Вашего сайта. Всё.

Добавление сайта в Bing

Тут все еще проще – идём сюда http://www.bing.com/toolbox/submit-site-url, вводим имя домена, капчу, и все – готово! Регистрация при этом не требуется.

ВАЖНО!!! На данный момент продвигать в Bing русскоязычные сайты бессмысленно, в отличие от англоязычных. Это связано с тем, что в России крайне мало кто знает про поисковую систему Bing.

Добавление сайта в Поиск Mail.ru

Данная процедура тоже достаточно проста – переходим в кабинет вебмастера mail.ru по ссылке http://go.mail.ru/addurl, регистрируемся/логинимся, затем указываем имя домена сайта, вводим капчу и жмем «Добавить».

Затем на экран будет выведено вот такое сообщение:

Готово!

P.S. Индексация сайта на WordPress, Wix, Joomla, Ucoz или на любой другой CMS или конструкторе — ничем не отличается. Все зависит от набора правил, которые прописаны в файле robots.txt или же в самом коде страниц. Более подробно узнать о том, как правильно настроить файл robots.txt, а также как открыть или закрыть страницы от сканирования в Яндекс и Google прочтите ЭТУ статью! Также, в статье вы найдете готовые файлы robots для правильной индексации сайтов WordPress, Joomla, Wix в Яндексе и Гугле.

stokrat.org

Как управлять индексированием сайта — Онлайн-курсы Яндекса

1. Немного теории

Владелец сайта может влиять на то, как индексируется его ресурс.

Например, вы можете запросто закрыть для поисковой системы определённые разделы своего сайта. Для этого нужно добавить соответствующие команды в файл robots.txt — он находится в корневой папке сайта. Именно к этому файлу обращаются поисковые роботы, чтобы узнать, что можно индексировать, а что нет.

Поисковые системы исходят из того, что индексировать можно всё, что не запрещено. Поэтому владельцу сайта нужно самому позаботиться о том, чтобы в поиск не попала конфиденциальная информация — например, личные данные пользователей, их переписка или счета. Такие страницы нужно запретить индексировать. Рекомендуем также закрыть страницы со служебной информацией и страницы-дубликаты.

Многие системы управления сайтами (CMS) автоматически создают файл robots.txt и команды для роботов. Яндекс.Вебмастер позволяет проверить файл robots.txt на наличие ошибок. Для этого нужно загрузить содержимое файла в инструмент «Анализатор robots.txt». Для этого можно просто скопировать данные файла и вставить их в форму. Или загрузить файл robots.txt через интерфейс сервиса.

Сервис проверит файл и покажет, есть ли в нём ошибки.

Теперь поговорим о том, как создать правило для робота. Каждое правило состоит из двух элементов: это обращение к роботу и команда.

Если вы хотите обратиться сразу ко всем роботам, используйте элемент «User-agent:*». Для обращения только к роботу Яндекса нужно выбрать элемент «User-agent: Yandex».

Вы можете дать роботу команду «Allow:» (разрешить индексирование) или «Disallow:» (запретить индексирование). После команды нужно указать адрес, для которого должна применяться команда.

Например, так будет выглядеть правило, запрещающее всем поисковым роботам индексировать раздел siteforyandex.ru/admin:

User-agent: *
Disallow: /admin

Анализатор помогает найти ошибки в файле robots.txt, проверить, все ли команды прописаны верно и понятны роботу, и узнать, разрешена ли к индексированию конкретная страница.

Файл robots.txt позволяет закрыть для индексирования весь контент страницы. Если вы хотите закрыть только какую-то часть контента, используйте мета-тег noindex. Этот тег не даёт индексировать заключенный в него текст, но не мешает поисковой системе переходить по ссылкам внутри текста.

Совет

Чтобы узнать, какие разделы сайта и в каком объёме уже проиндексированы, воспользуйтесь инструментом «Структура сайта» в Яндекс.Вебмастере, он находится в разделе «Индексирование».

yandex.ru

Проверить индексацию сайта в поисковых системах Google, Yandex

После создания и настройки всего необходимого на сайте, его как правило открывают для индексации в поисковых системах. Что такое индексация и как ее ускорить можно прочитать в статье: “12 советов которые ускорят индексацию сайта поисковыми системами Яндекс и Google”. Сегодня я же хотел бы затронуть тему, о том как проверить количество страниц и какие страницы проиндексированные Яндексом и Гуглом.

Есть несколько способов которые помогут проверить индексацию сайта.

1. Проверка с помощью Яндекс и Гугл. Использование операторов.
2. Проверка с помощью инструментов Яндекс и Гугл (Yandex Webmaster и Google Webmaster).
3. Проверка с помощью онлайн сервисов.

Каждый из способов эффективный и бесплатный.

К содержанию ↑

Проверить индексацию сайта с помощью операторов Google, Yandex

Этот способ появился давно и использовался еще когда не было онлайн сервисов, Гугл и Яндекс вебмастера. Способ довольно таки хороший и результаты показывает на все 100%.

Проверка количества страниц в индексе Яндекса

Что бы проверить количество страниц которые находятся в индексе Яндекса, необходимо использовать несколько операторов:

• Оператор “site” находит и показывает полностью все страницы, которые находятся в базе данных Яндекса.
• Оператор “host” дает информацию по проиндексированным страницам, документам с доменов и поддоменов сайта.

Давайте посмотрим на практике.

Сначала будем использовать оператор “site”, для примера я возьму наш сайт Loleknbolek.com. Заходим в поисковую систему Яндекс и в строке прописываем:

site:loleknbolek.com

результат можно посмотреть на картинке ниже.

Яндекс, оператор site

Теперь давайте попробуем оператор “host”, для примера снова используем наш сайт Loleknbolek.com. Заходим в поисковую систему Яндекс и в строке поиска прописываем:

host: loleknbolek.com

результат можно посмотреть на картинке ниже.

Yandex, оператор host

Если вы заметили, то я использую проверку домена без www, так как он является главным зеркалом (что такое зеркало сайт и как сделать главное зеркало, можете посмотреть в статье: «Как удалить дубли страниц или закрыть их от индексации» ). Теперь давайте проверим домен с www используя те же операторы “site” и “host”.

Результат оператора “site”.

Yandex, оператор site для www

Результат оператора “host”

Yandex, оператор host для www

Выводы: как не крути, количество страниц в индексе 125 штук. У меня так совпало, что при всех проверках вышло 125, но у Вас может быть по другому. Почему 125 страниц показывает оператор “site: www.loleknbolek.com” спросите Вы? Да потому, что он показывает все страницы как для www так и без www. Оператор “host” показывает только страницы данного домена с www или без.

Количество страниц может быть разным, этом у меня так получилось, что их количество совпало.

Проверка количества страниц в индексе Google

Что бы проверить количество страниц в индексе Гугла необходимо использовать оператор «site«. Данный оператор показывает количество страниц домена в индексе поисковика, при чем если вы прописываете для домена с www, то он показывает страницы только для этого случая, если без www, то для другого. Если сравнить с поисковиком Яндекс, то там он показывает все страницы как с www так и без.

Заходим в поисковую систему Гугл и в строке прописываем, без www:

site:loleknbolek.com

Результат:

Google, оператор site

Как видим число страниц 126, что на 1 больше чем в Яндексе.

Теперь давайте для наглядности пропишем с www:

site:www.loleknbolek.com

Количество страницы 0, чего и следовало ожидать.

Google, оператор site для wwwК содержанию ↑

Проверка индексации сайта с помощью инструментов Yandex Webmaster и Google Webmaster

Так же можно использовать инструменты Яндекса и Google для проверки. Для этого необходимо зарегистрировать сайт в Яндекс Вебмастере и Гугл Вебмастере. Что бы это сделать необходимо перейти по ссылкам ниже и проделать все необходимые шаги.

Для проверки количество страниц заходим в инструменты Яндекс, по ссылке выше. В общей информации можно увидеть строчку “Страниц в поиске”.

Yandex Webmaster — количество страниц

Видим, что страниц в поиске 123 штуки. Нажимаем на данный пункт и нас перекинет на страницу, где можно увидеть страницы, которые находятся в индексе.

Yandex Webmaster страницы в индексе

Количество страниц почти совпадает с тем, количеством которое мы проверяли с помощью операторов “site” и “host”.

Что бы проверить количество страниц с помощью Google Webmaster, необходимо перейти по ссылке которая находится выше. Далее ищем пункт “Индекс Google” — > “Статус индексирования”. На странице выбираем “Расширенные данные”.

Google Webmaster — статус индексирования

Здесь можно увидеть все страницы, которые были проиндексированные. Если включить “Заблокировано в файле robots.txt” и “Удалено”, то так же можно увидеть все страницы, которые по тем или другим причинам исключены с индекса поисковой системы Google. Так же можно сделать выгрузку файла со всеми данными и посмотреть статистику за каждый день.

Одно мне не нравиться в Вебмастере Гугла, то что сразу не показываются все страницы, которые находятся в индексе, так как это сделано в Яндексе. Но все же данные можно выгружать.

К содержанию ↑

Проверить индексацию сайта с помощью онлайн сервисов

Если Вам не хватает данных которые можно получить с первых двух способов, то можно воспользоваться онлайн сервисами, которые дают хорошие результаты но не всегда. Бывают случаи, что результаты очень отличаются, поэтому я в большей степени доверяю операторам и инструментам поисковых систем.

Таких сервисов в интернете полно, но я попробую привести те, которые наиболее точно показывают всю картинку.

Онлайн сервисы для проверки индексации сайта:

1. Сервис XSeo.
2. Сервис PR-CY.
3. Сервис Webmasters.

1. Сервис XSeo. С его помощью можно в один-два клика проверить количество страниц в Гугла и Яндексе. Хорош он тем, что показывает главный индекс Google и второстепенный (supplemental result). Что такое сопли (supplemant result) можете почитать в статье: “Что такое сопли Google (supplemental results). Причины и способы нахождения”. Для проверки сайта переходим по ссылке выше, вводим свой домен и нажимаем кнопку “Проверить”.

Результат:

Проверить индексацию сайта xseo

Как видим все быстро и просто.

2. Сервис PR-CY. Данный сервис, разработка очень хорошего и полезного форума PR-CY. Параллельно с проверкой индексации можно посмотреть такие параметры как:

• ТИЦ, PR.
• нахождение сайта в каталоге Яндекса и Dmoz.
• внешние ссылки.

Здесь так же есть много интересных сервисов, которые можете попробовать. Переходим по ссылке выше, вводим свой домен и получаем результаты.

Количество страниц в Google:

PR-CY количество страниц в Google

Количество страниц в Yandex:

PR-CY количество страниц в Yandex

Всегда использую данный сервис для проверки различных параметров, легкий в использовании и дает отличные результаты.

3. Сервис Webmasters. Еще один сервис от хорошего SEO форума. Результаты показывает хорошие, но в отличии от PR-CY результатов очень мало. Плюсом данного сервиса является то, что за один раз можно проверить несколько доменов. Для проверки необходимо перейти по ссылке выше и ввести свой адрес.

Webmasters количество страниц

Из своего опыта могу сказать, что лучше всего использовать для проверки индексации сайта использовать операторы Яндекс и Гугл, а так же их инструменты. Из сервисов могу выделить PR-CY, так как в своем арсенале он имеет довольно таки богатый функционал и с которым приятно и легко работать.

loleknbolek.com

Как проверить индексацию сайта Яндексом?

Приветствую, друзья! Десятки бизнесменов, начинающие веб-мастера и оптимизаторы у меня постоянно интересуются, как проверить индексацию сайта и что это такое. Думаю, настало время подробно обо всём рассказать.

Что такое индексация и с чем её едят

Предположим, что у вас есть свой сервис и на нём хочется получать хорошую прибыль. Вы добьетесь этого, если на него придут тысячи людей, приманивающих возможных рекламодателей.

Человека перебрасывает к вам из поисковой системы, когда он указывает конкретный вопрос. Специальные роботы оперативно изучают его в базе данных и выдают подходящие результаты. Чтобы такое случилось, должна произойти индексация сайта.

Помимо роста посещаемости, влияние происходит и на другие показатели. Ежедневно открываются новые ресурсы, значительно увеличивающие вам конкуренцию. Сюда выкладывают контент, моментально теряющий уникальность. Причина — людей уже тошнит в тысячный раз просматривать переписанный старый материал.

Если забыть проиндексировать сайт или несколько его страниц, то на него как пчелы на мед слетятся мошенники. Ушлые веб-мастера копируют открытую информацию и индексируют её. По мнению специализированных сервисов, всё честно, они не замечают обмана. Жулик сидит с лицом Горлума из «Властелина Колец» и потирает ручонки, приговаривая: «Моя прелесть!».

Но воровством контента дело не заканчивается. Поисковики найдут у вас украденную статью и вынесут вердикт – она не уникальна! Как поступают с подобным контентом? Накладывают штрафные санкции или вовсе банят.

Как проверить индексацию сайта

Чтобы проверить индексацию сайта, посмотрите, есть ли он в общей базе. Обязательно изучите общее число страниц портала. Обозначенные сведения доступны в панели администратора. Помимо того, учитывайте и конечную численность страниц с записями.

Почему-то ничего не видно? Тогда заходите на https://www.xml-sitemaps.com/. Но приготовьтесь к неприятному недостатку – бесплатно получится поработать, если имеется от 500 рабочих страниц.

Проверить индексацию сайта можно так:

• зарегистрироваться на ресурсах веб-мастеров в Гугл или Mail.ru. Среди них особенно популярны http://pr-cy.ru/ и https://seolib.ru/. После прохождения верификации вы увидите всё, что вам нужно.
• Напишите название сайта или компании в поисковой строке, внимательно просмотрите все ссылки на первых страницах. Если URL собственного «ребёнка» присутствует, то поставленные задачи выполнены.
• Поставьте ссылку портала в розыскной строке. Выдача покажет количество рабочих страниц.

Как проверить индексацию сайта в Яндексе

Проверить индексацию сайта в Яндексе можно двумя способами:

• Вручную. Правда, из-за этого результаты получатся приблизительными. Введите в поисковой строчке запрос по типу url:адрес-вашего-портала*. Не забудьте про звездочку в конце, это важно.
• При помощи вебмастера. Чтобы проверить индексацию сайта в Яндексе этим методом, примените инструмент https://webmaster.yandex.ru/. Если раньше вы к нему не подключались, то сейчас настало такое время. После проверки у вас на руках окажутся полезные данные, среди которых в наличии будет и индексация.

Новости о результатах у предоставленных способов серьезно отличаются. Поэтому рекомендуется пользоваться Вебмастером от Яндекса.

Тестируем Google

Забугорный поисковик в России любят не так сильно, как кажущийся уже родным Yandex. Однако для веб-мастера Google – это кладезь полезной статистики. Страницы держатся в двух выдачах:

главной – здесь оказываются только качественные площадки, участвующие в дальнейшем ранжировании;
дополнительной – тут сохраняются технические раздели и копии главных страниц.
Введя запрос site:ваш_сайт, вы получите эффективность в обеих выдачах. Кроме того, воспользуйтесь вебмастером https://www.google.com/webmasters/#?modal_active=none.

Что делают с полученной статистикой

Идеально, если численность страниц сайта совпадает с количеством полностью проработанных. Но такое случается редко. Чаще всего события развиваются по двум сценариям:

• численность проиндексированных элементов меньше. Из-за этого уходит трафик, всё остальное пользователь попросту не видит.
• Число проиндексированных страниц больше, чем их есть на самом деле. Только рано бить в барабаны и прыгать до потолка от радости. Роботы читают повторяющийся материал, и продвижение идёт хуже.

Возникают такие проблемы? Незамедлительно действуйте! В противном случае вложенные усилия пойдут коту под хвост.

Большие деньги вы получите только в розовых мечтах. Придётся проверять всё, что у вас есть. Это утомительно, но по-другому никак.

Исправляем по отдельности

Проверить индексацию сайта по отдельным страницам нужно, чтобы ваш контент на 100% был виден.

Делается это через ввод ссылки поисковой странички в Гугл или Яндекс. Кроме того, используйте RDS Bar. Этот плагин показывает основные сведения о портале.

Заключение

Я верю, что вы поняли важность индексирования страниц сайта. Настроите всё правильно – будете зарабатывать. Если всё рассказанное мной пригодилось, то делитесь полученными знаниями в социальных сетях. И добро пожаловать в комментарии!

in4wp.ru

Проверить индексацию сайта в поисковых системах

Приветствую читателей блога. Вы уже задумались над вопросом как проверить индексацию сайта в поисковых системах? Этот вопрос волнует всех вебмастеров с момента опубликования первой статьи на сайте. Автор пишет статьи не для себя, а для потенциальных читателей. Так что же такое индексация сайта.

Индексация сайта — это обход роботами поисковых систем страниц сайта, и внесение их в свою огромную базу. Далее страницы появляются в поиске по результатам запроса на определенной позиции. Не стоит путать сканирование страницы и индексирование. Страница сначала сканируется роботами и через определенное время вносится в базу.

И чем быстрее произойдет индексация страницы, тем быстрее она окажется в результатах поиска. Самое главное — авторство статьи присвоят именно вам, пока её не своровали мошенники. В рунете основными поисковиками являются Yandex и Google, и именно в них рассмотрим способы проверить индексацию сайта в поисковых системах.

Как проверить индексацию сайта в Яндексе

Поисковые системы предоставляют вебмастерам инструменты для улучшения работы со своим сайтом. Для пользования этими инструментами надо зарегистрировать сайт в поисковиках. У Яндекса это Яндекс Вебмастер. Перейдите в раздел Индексирование ⇒ Страницы в поиске и увидите страницы, которые проиндексированы с датой индексации.

Можно проверить определенную страницу сайта. В разделе Индексирование ⇒ Проверить статус URL, вбейте в поле адрес жмите Проверить. Придется подождать несколько минут и сервис выдаст ответ.

Страница сканирована, не в поиске.

Страница сканирована и находится в поиске.

Проверить индексацию сайта в Гугле

В инструментах вебмастера Гугл можно посмотреть общее количество проиндексированных страниц. Проверить индексацию сайта в Гугле можно с помощью оператора site:вашсайт.

В результатах увидите проиндексированные страницы вашего ресурса.

Проверить индексацию сайта онлайн специальными сервисами

Проверить индексацию сайта в поисковиках можно не только в кабинетах вебмастеров. Уже давно созданы специальные платформы с широким функционалом. Одна из таких Серпхант. Выполнить проверку можно на странице https://serphunt.ru/indexing/ . Периодически пользуюсь данным сервисом. Преимуществом является одновременная проверка сразу до 50 URL, отсутствие регистрации и оплаты. Чтобы выполнить проверку нужно внести список проверяемых страниц и нажать Проверить. Всё просто!

Помимо проверки индексации здесь же можно проверить позиции сайта по ключевым запросам, посещаемость, данные о внутренних и внешних ссылках.

Самый легкий способ проверить индексацию сайта в поисковых системах

Мне кажется одним из самых легких способов проверить индексацию сайта в поисковых системах — это скопировать часть контента и вставить в поисковую строку. Если страница проиндексирована, то она окажется на первом месте выдачи, по крайней мере в первой пятерке. Очень быстрый способ который действительно работает. Проверяю так в — всё совпадает.

Скорость индексации сайта

Скорость индексации в поисковиках существенно отличается. Например, Google индексирует новую страницу данного блога в течение нескольких часов, а Яндекс — от пяти до восьми дней. У некоторых по-другому.

На скорость индексации влияет траст и возраст веб-сайта. Трастовые ресурсы индексируются в течение нескольких минут.

Как ускорить индексацию сайта

Молодым блогам, сайтам надо помочь в ускорении индексации. Вот несколько способов:

• Частое обновление контента. Пишите как можно чаще, желательно с одинаковым промежутком времени, чтобы приучить роботов.
• Создайте карту сайта и добавьте в панель инструментов для вебмастера.
• После публикации отправьте запрос на индексацию (там же в панели).
• Правильная внутренняя перелинковка.
• Делать анонсы на форумах, социальных сетях (роботы «живут» там и быстрее перейдут по ссылке).
• Перед публикацией отправьте текст в Оригинальные тексты Яндекс. Не увеличивает скорость индексации, но таким образом защитите контент от воровства.

Вот в принципе и всё. Вам решать как проверить индексацию сайта в поисковых системах, но делать это нужно, чтобы предпринять шаги для ускорения.

Удачи Вам!

С уважением, Павел Коновалов

konovalovpavel.ru

Проверить индексацию сайта в Яндекс Вебмастер

С помощью сервиса Яндекс Вебмастер можно быстро проверить индексацию сайта и отдельных страниц, проверить файлы sitemap и robots, микроразметку, настроить главное зеркало ресурса, задать географическую привязку, а также список запросов, по которым продвигается сайт, и отслеживать его позиции в поисковых выдаче и много что ещё.

Для того чтобы добавить сайт на Яндекс Вебмастер необходимо подтвердить на него права. Итак, переходим на сервис webmaster.yandex.ru, жмём «Добавить сайт» и выбираем способ проверки прав: самый простой — это поместить текстовой файл в корень сайта и нажать «Проверить»:

Всё это занимает пару минут. На следующем шаге мы попадаем в основную панель Яндекс Вебмастер, где можно проверить индексацию сайта. Собственно, уже видны общие сведения об индексации страниц, а слева располагается меню с основными инструментами сервиса, об основных подразделах которых и пойдёт речь дальше:

Инструменты панели вебмастера

В первом разделе «Индексирование сайта» представлены детализированные сведения обо всём ресурсе. Инструменты панели позволят получить списки проиндексированных страниц с адресом и титлом, и исключённых из индекса. Это удобно использовать для анализа и доработки страниц, находящихся вне индекса.

Вообще, будет правильным использовать таблицу Excel для ведения статистики по сайту: адрес страницы, титл, количество знаков в титле, дата создания, ссылки на другие страницы (перелинковка), индекс в Яндексе и Гугле и другое. Наблюдение: на данном сайте представлены описания и инструкции по работе с сервисами Яндекса и Гугла, последний индексирует всё: и своё и чужое. У Яндекса в индексе только «свои» страницы, ему «палец в рот не клади».

Продолжаем. Ещё в разделе можно получить сведения о внешних ссылках на сайт или отдельные страницы, о работоспособности ресурса — ответах сервера. Доступно сравнение показателей по периодам — какое-то время сохраняется предыдущая статистика.

Инструментами раздела «Настройка индексирования» можно проверить файл Robots.txt и файлы Sitemap. А также настроить главное зеркало сайта без www или с ним, что не позволит «дробить» внешнюю ссылочную массу между двумя доменами:

В следующем разделе панели можно получить список поисковых запросов, когда ресурс находился в Топ-50 выдачи Яндекса. Это интересный инструмент, в нём можно уточнить регионы выдачи, например: Украина, Беларусь, Казахстан, Москва — всего до 25. А также задать свои запросы, которые вам желательно отслеживать, и получать статистику по ним.

А точнее, по следующим параметрам: позиция сайта, число его показов в выдаче, количество кликов и CTR — отношение кликов к показам. Показатель CTR сайта в выдаче очень важен, он влияет на ранжирование сайта. Для его увеличения необходимы привлекательный сниппет и грамотно составленный Title.

Приведу другой полезный сервис для получения подробных сведений по поисковым запросам, посетителям и источникам трафика — Яндекс Метрика, где можно получать подробную статистику посещаемости сайта.

В следующем разделе можно указать географическую привязку сайта и добавить данные вашей организации, которая будет фигурировать в поиске по Яндекс Картам.

Далее следует важный пункт панели — «Содержимое сайта». Его инструмент «Оригинальные тексты» позволяет заранее добавить в сервис содержимое неопубликованной страницы. Этот механизм Яндекс Вебмастера способен защитить уникальный контент от воровства. К примеру, с данного сайта webmastersam.ru тексты «заимствовать» не стоит.

Улучшаем представление и вид сайта в поисковой выдаче

Тут же, кроме того, целесообразно разместить ресурсы по автомобильной тематике, недвижимости, банковским услугам, а также словари, рефераты и другие (список постоянно пополняется) в соответствующих сервисах Яндекса. Что существенно улучшит их представление в поисковой выдаче, за счёт расширенных и более привлекательных сниппетов.

Расширенный сниппет может содержать, к примеру, сведения о товаре, его доставке и цене — актуально для интернет-магазинов. Представление такого сайта в поисковой выдаче будет смотреться более выигрышно, что вызовет повышенный интерес у пользователей и будет провоцировать их выбрать именно его (повышение CTR сайта в выдаче).

В последнем разделе «Сайт в результатах поиска» корректируются «быстрые ссылки», которые дополнительно располагаются между заголовком и сниппетом. Это ссылки на наиболее важные страницы ресурса, их можно поменять и исключить ненужные. Этот инструмент предназначен для страниц из выдачи Яндекса, входящих в Топ-20.

Здесь же можно изменить регистр в написании домена сайта (адреса) и улучшить его вид в поисковой выдаче. Для данного случая целесообразно поступить таким образом:

Что даёт проверка индексации сайта в Яндексе и чем полезен сервис? Его инструменты позволят выявить и устранить технические ошибки и наличие вирусов, отслеживать статистику по ключевым запросам, улучшить ранжирование ресурса и его представление в поисковой выдаче, привлекая именно целевых посетителей, — все эти меры благоприятно скажутся на развитии ресурса и его продвижении.

webmastersam.ru

Как проверить индексацию сайта в поисковых системах

Если вы хотите узнать, как можно онлайн проверить индексацию сайта в поисковых системах, то следующий материал вам очень пригодится. Способов существует много, но мы раскроем те, что используются вебмастерами чаще всего.

 

Проверка индексации страниц сайта через поиск

Термином «индексация сайта» обозначают добавление ресурса или его материалов в базу данных поисковой системы. То есть, если страницы сайта проиндексированы, то при введении поискового запроса они окажутся в общей выдаче. Это именно то, чего добиваются вебмастера – чтобы материалы Интернет-ресурсов как можно быстрее оказались проиндексированы.

 

Чтобы быть уверенными в том, добавлен ли сайт в поисковую базу, выполняется проверка индексации сайта в Яндексе, Гугле и других поисковых системах. Эту проверку можно выполнять как ручным способом, так и автоматически.

Рассмотрим, как проверить проиндексирован ли сайт, используя при этом поисковый запрос. Здесь возможно несколько вариантов:

1. Введение url конкретной страницы в поисковый запрос. Этот способ подойдет для тех страниц, которые проиндексированы не быстроботом Яндекса. В противном случае, страница может и не отобразиться, поэтому данный метод проверки малоэффективный.
2. Введение части текста в поисковый запрос. Метод действует только тогда, когда текст уникальный. Для этого необходимо выделить часть текста (10-20 слов) и ввести их в поиск. Однако, материал будет достаточно поздно отображаться в выдаче. Этот способ также не очень эффективный и хлопотный.
3. Использование расширенного поиска. Чтобы узнать, проиндексирован ли сайт в Яндексе, нужно ввести необходимый запрос в этом поисковике и выполнить поиск, после чего под строкой появится ссылка «Расширенный поиск». Что касается Гугла, то с ним немного дольше придется повозиться. После введения запроса с правой стороны появится знак шестеренки – «Настройки». Нужно нажать этот значок и в меню выбрать пункт «Расширенный поиск». Помимо Яндекса и Гугла другие ПС также располагают расширенным поиском. Итак, дальше нужно ввести фразу и домен, на котором нужно произвести поиск. В выдаче обычно самой первой должна появиться нужная статья. Это работает при условии, что материал уникальный. Можно пойти более быстрым путем и сразу вбить в расширенный поиск url страницы. Данный способ эффективный, но требует временных затрат. Следует учесть, что не всегда нужный адрес находится на первой позиции в поисковой выдаче. Иногда необходимо просмотреть всю первую страницу в выдаче, то есть, топ-10.

Помимо использования поискового запроса, есть и другие способы проверки индексации сайта – более простые, быстрые и результативные.

 

Проверка индексации с помощью операторов URL и SITE

Пожалуй, этот способ является самым лучшим. Можно в адресную строку браузера или поиск ввести запрос и при необходимости нажимать F5, чтобы следить, как обновляется информация. В одном окне также можно ввести несколько запросов подряд, обновлять страницу или нажимать Назад/Вперед и отслеживать изменения.

Как узнать проиндексирован ли сайт в Яндекс? Для этого необходимо воспользоваться оператором URL. Данный сервис также используется для Bing и Рамблера.

Для проверки индексации в Google используется оператор SITE. Используется код site:site.ru, где site.ru – это адрес сайта, на котором расположена необходимая страница.

Также в адресную строку Яндекса можно ввести http://yandex.ru/yandsearch?serverurl= и далее адрес той страницы, которая вас интересует.

UPD: На данный момент рекомендуется использовать запрос типа https://yandex.ru/search/?text=url%3Awww.host.ru%2F*

Отметим, что этот способ подобен использованию расширенного поиска с тем лишь отличием, что в данном случае метод более автоматизирован и нет необходимости еще куда-то заходить. Следует знать о том, что иногда могут возникать некоторые неточности в поисковых системах, если в поиск вводится зеркало сайта. Но это, в принципе, теоретически.

Теперь нужно уточнить кое-какие вопросы относительно быстробота. В Яндексе он есть. Его задача заключается в том, чтобы как можно быстрее проиндексировать страницы. Он посещает сайты, отмечает новый контент и уходит. Через какое-то время за ним приходит основной поисковый бот, который и выполняет анализ, классифицирует и расставляет по своим местам материалы. Бывает, что быстробот проиндексирует, а Яндекс потом выбрасывает контент из индекса.

В поисковой выдаче возле каждой ссылки указывается время проведения индексации. Редко возможны случаи, когда какие бы способы проверки индексации сайта не применялись, а найти его не удается, но через какое-то время статья появляется в индексе и указано время ее индексации, скажем 18 часов назад.

Быстробота еще нужно привлечь. Он поначалу просто так не появится на сайте. Если он еще не посещает страницы ресурса, то индексация может затягиваться и недели на три.

 

 

Проверка индексации страниц сайта в Яндексе через AddURL

Еще один способ, позволяющий узнать, попал ли в индекс определенная страница сайта, можно воспользоваться инструментом AddURL. Например, проверим, проиндексировался ли сайт в Яндекс. Для этого в аддурилке данной системы поиска вводим интересующий нас адрес страницы. После этого все станет ясно. Если страница уже находится в индексе, то будет выведена надпись «Указанный URL уже проиндексирован». Ну, а если ссылка еще не появилась в индексе, то напишет приблизительно следующее: «Адрес такой-то успешно добавлен. Его индексация и добавление в поиск будут осуществлены по мере обхода робота». Все это правдиво лишь в том случае, если вы не установили запрет для индексации вашего сайта.

С помощью этого метода также можно понять, если вдруг есть запрет на индексацию robots.txt. В аддурилке обязательно будет написано, если ссылка является зеркалом или она запрещена. Но это работает только в поисковике Яндекс.

 

Данный метод – достаточно неплох, однако, придется тратить время на неоднократное введение капчи.

 

Используем панель Вебмастера

Каждая поисковая система имеет свою панель инструментов, специально предназначенную для вебмастеров. С помощью этой панели можно увидеть общее количество проиндексированных страниц. Рассмотрим на примере самых популярных ПС (Яндекс и Google), как выполнять такую проверку.

Чтобы использовать панель инструментов Яндекс в данном контексте, нужно завести аккаунт (если его еще нет), зайти в панель и добавить в нее свой сайт. Там будет показано общее количество страниц, которые уже проиндексированы.

Для использования панели инструментов Google также нужно обзавестись аккаунтом, чтобы иметь возможность зайти в панель. В нее нужно добавить свой сайт и зайти на вкладку «Состояние / Статус индексирования». Здесь также будет показано количество проиндексированных страниц.

Нередко можно заметить, что панель Вебмастера Google может показать значительно большее количество проиндексированных страниц, чем панель инструментов Яндекс. Представим, что на сайте 70 уникальных страниц, которые проиндексировались. И, скажем, Яндекс насчитал приблизительно такое количество ссылок, а Гугл, например, 210. Получается, что Яндекс показал правильное число, а Гугл в 3 раза больше. Так в чем же дело? А дело в дублях страниц, генерируемых движком WordPress. Такие дубли поисковикам не по душе. Использование robots.txt позволяет игнорировать индексацию дублей страниц поисковыми системами. И если на Яндекс это действует, то с Гуглом в этом плане могут возникать проблемы, так как он может действовать по своему усмотрению.

Есть также специальный сервис Pr-cy.ru, позволяющий получить вебмастерам различные данные по сайтам – в том числе, число страниц, проиндексированных в Гугле и Яндексе. Чтобы узнать эту информацию, нужно посмотреть на две нижние колонки соответствующих поисковых систем.

 

 

Что помогает ускорить индексацию сайта

Чтобы страницы быстрее индексировались, нужно придерживаться главных правил:

• Регулярное размещение уникальных и оптимизированных статей. Поисковый робот возьмет себе за привычку регулярно посещать тот сайт, на котором с определенной периодичностью размещается качественный, полезный и интересный контент.
• Анонсирование о размещении нового контента или полезных обновлениях на сайте через социальные сети. После того, как появилась статья, можно самостоятельно сообщить об этом в социальную сеть с помощью кнопки retweet. Поисковый бот отметит это и зайдет на сайт через социальную сеть значительно быстрее.
• Поисковому роботу гораздо проще найти конкретную страницу с помощью ссылки, имеющейся на вашем сайте. То есть, не стоит забывать о важности внутренней перелинковки.
• Добавив xml-карту в панель вебмастера, мы даем возможность поисковому боту пройти по ней. Также ее нужно добавить в robots.txt. Полезна и карта сайта (карта для человека), по которой бот отыщет все страницы сайта.

 

В материале мы рассмотрели основные способы, позволяющие проверить, попали ли страницы сайта в индекс различных поисковых систем. Некоторые из них более эффективные, а какие-то – менее, но каждый из них имеет право на существование и использование.

masterproseo.ru