Работа с панелями вебмастеров Яндекса, Google, Yahoo, Bing (sitemap, robot.txt, индекс, запросы) – Часть 1 – Создание и добавление карты сайта, регистрация и работа в панели вебмастеров Яндекса
Не следует путать регистрацию в панели вебмастеров поисковых систем с добавлением сайта, в так называемую, аддурилку (подробно прочитать об этом можно в посте о добавлении сайта в поисковые системы и каталоги) . Во втором случае мы просто информируем поисковики о существовании нашего сайта, чтобы они проиндексировали его содержимое.
Зарегистрировавшись же в панели вебмастеров и добавив в нее наши сайты, мы сможем следить за ходом индексации вашего сайта и, если потребуется, то корректировать и направлять поисковую машину. Громко сказано, конечно, но тем не менее, добавив в панель вебмастеров карту нашего сайта, мы тем самым упростим и, наверное, ускорим работу поисковика по полноценной индексации нашего сайта.
Как создаются карты сайта в формате XML для проeктов на Joomla, блогов на WordPress и форумов на SMF, я подробно рассказывал в статьях:
- Создание карты сайта на Joomla с помощью компонента Xmap для улучшения индексации сайта
- Создание карты сайта для блога на WordPress с помощью плагинов Google XML Sitemaps и Sitemap Generator
- Как установить пакет модификации для SMF (на примере мода карты сайта — Sitemap)
В этих постах я уточнял, где можно посмотреть и скопировать при необходимости ссылку на создаваемую карту сайта в формате XML, которая нам понадобиться в дальнейшем для скармливания поисковикам. Вот, собственно, и пришло время вспомнить это, т.к. здесь мы уже как раз будем добавлять ссылки на карты сайтов в панель вебмастеров.
Универсальный способ создания карты любого сайта
Существует также альтернативный способ создания карты сайта, практически для любого проекта и на любом движке без использования разнообразных расширений, плагинов и модов. Это способ также подойдет для сайтов, сделанных полностью только на HTML.
Ресурс называется . Там можно совершенно бесплатно создать карту сайта размером до 2000 страниц (более 2000 страниц - 5 WMZ) , затратив на это несколько минут. Ресурс поддерживает работу с robot.txt, т.е. странички, запрещенные для индексации в файле robot.txt, в создаваемую карту сайта не попадут. Сайт умеет также генерить, наряду с XML версией карты, версию в формате HTML (для моего блога получилась такая ). После создания карты сайта вам могут также предоставить информации о битых и внешних ссылках вашего сайта.
Для создания карты сайта нужно вставить в область "Форма для создания карты сайта", расположенную на главной странице ресурса, адрес своего сайта, затем выбрать периодичность обновления страниц на сайте, поставить галочки, если хотите получить дополнительную информацию о вашем сайте и нажать на кнопку "Старт". Через несколько минут вы увидите результирующее окно:

Здесь вы можете скачать файл Sitemap.xml и закинуть его в корень вашего сайта, а затем скормить ссылку на него поисковикам. Есть, кстати, аналогичный англоязычный сервис , который позволит вам бесплатно создать карту сайту размером не более 500 страниц. Точно также, после окончания генерации, переносите карту в корне своего сайта в формате xml.
Какие возможности предоставляют панель инструментов для вебмастеров Яндекса и инструменты для веб-мастеров Google
Если вы создали свой файл robot.txt (Улучшаем индексацию сайта поисковиками — Robots.txt для Joomla, SMF, WordPress), то в панели вебмастеров можно будет проверить работоспособность заданных вами правил поведения для поисковиков. Запретили вы, допустим, индексацию некоторых страниц своего сайта в файле robot.txt. После этого заходим в панель вебмастеров, и в области для проверки работоспособности файла robot.txt вводим ссылку на запрещенную к индексации страницу сайта. Если в результате мы получим ответ, что индексация данной страницы запрещена файлом robot.txt, то значит, мы большие молодцы и все правильно наколдовали в robot.txt. А если мы получим ответ, что запрета на индексацию этой страницы поисковик не видит, то значит, что мы вовсе и не молодцы, и нужно продолжать корпеть над дальнейшей настройкой robot.txt.
В панели вебмастеров можно также наглядно посмотреть сколько страниц вашего сайта уже проиндексировано, сколько ошибок при этом было обнаружено, посмотреть эти ошибки, посмотреть по каким ключевым запросам на ваш сайт чаще всего переходили из данного поисковика посетители, удалить при необходимости лишние страницы из индекса и т.п.
Но прежде чем мы получим доступ ко всему этому великолепию, нам нужно будет не только зарегистрироваться в панели вебмастеров, но и подтвердить свое право, на добавляемые в панель сайты. Иными словами доказать, что мы можем управлять своим сайтом. Для этого вам предлагается на выбор: либо разместить в корне вашего сайта пустой текстовый файла с заданным названием и расширением, либо добавить в код главной страницы сайта приведенный там мета-тег . Если вы выполните одно из этих условий, то поисковик будет считать, что вы действительно являетесь владельцем сайта и предоставит вам доступ к рычагам управления ходом индексации вашего сайта. Теперь рассмотрим все выше сказанное более подробно…
Регистрация и работа в панели вебмастеров Яндекса
Начнем, пожалуй, с яндекса, как самого популярного поисковика в рунете. Панель вебмастеров Яндекса проживает по адресу . Первоначально вы попадаете на страницу, где можно добавить свой сайт в поисковик - аддурилку. Используя верхнее меню страницы, вы также можете попасть в раздел удаления лишних URL из индекса, проверить сколько страниц вашего сайта уже проиндексировано яндексом, а также почитать FAQ.

Доступ во все вышеперечисленные разделы можно получить не регистрируясь на Яндексе, но в раздел "Мои сайты" можно зайти только после регистрации на Яндексе. Если у вас имеется почтовый ящик на Яндексе, то вы можете ввести в форму входа те же самые логин и пароль что вы задавали при регистрации почтового ящика (эти логин и пароль являются общими для доступа практически ко всем сервисам Яндекса). Если же ящика на Яндексе у вас нет, то никто не мешает вам его завести.
Добавление сайта в панель вебмастеров Яндекса и подтверждение своих прав на управление этим сайтом
Итак, мы вошли в раздел "Мои сайты" под своим логином и паролем. Теперь нужно добавить адрес нашего сайта в соответствующее окно:

После этого появится окно с ссылкой, предлагающей подтвердить ваши права на управление сайтом. Перейдя по этой ссылке вы должны будете выбрать способ подтверждения: "Текстовый файл в корневом каталоге" или "Мета-тег на главной странице".

В зависимости от того где стоит галочка, под самой формой будут описываться ваши дальнейшие действия. Либо вы создаете файл в корне сайта с названием, допустим:
yandex_6ca3a6e76e86ef75.txt
Либо вы должны будете добавить в заголовок главной страницы своего сайта мета-тег, например:
<meta name='yandex-verification' content='6ca3a6e76e86ef75' />
И только после того как вы проделали одну из этих процедур, следует нажать на кнопку "Проверить". Если вы сделали все правильно, то увидите следующую надпись:

Если же вам говорят, что проверку на подтверждение прав управления вы не прошли, то следует еще раз проверить правильность выполняемых действий, и если все в порядке, то возможно, что придется подождать несколько часов, а затем опять вернуться на страницу проверки и нажать на кнопку "Проверка" (у меня такая ситуация возникала).
Работа с панелью вебмастеров Яндекса - добавление карты вашего сайта (Sitemap), просмотр общей информации, сообщений об ошибках и о количестве проиндексированных Яндексом страниц вашего сайта
Теперь разберемся с тем что нам предоставляет панель вебмастеров. В разделе "Общая информация" можно узнать, когда робот яндекса последний раз заходил на сайт, число загруженных страниц страниц с сайта (загруженных не значит проиндексированных) и посмотреть ваш текущий ТИЦ (Тематический индекс цитирования Яндекса). В разделе "Структура сайта" приведена информация о разделах вашего сайта и показано, сколько загружено страниц сайта из каждого раздела.
В разделе «Ошибки» отображается информация о проблемах, возникших при загрузке страниц сайта роботом Яндекса, из-за которых страницы сайта не попали в поисковый индекс. Ошибки могут быть разной степени серьезности: ошибка, замечание, информация. Можно посмотреть как общую сводку, так и ошибки по разделам, при этом если в колонке "Количество" нажать на цифры, то можно увидеть все ошибки в виде ссылок на страницы. Таким образом, каждую отдельную ошибку можно отследить для последующего ее устранения.
В разделе "Файлы Sitemap" можно загрузить файлы вашей карты сайта в формате XML - это позволит роботу яндекса быстрее, лучше и качественнее проиндексировать ваш сайт. Откуда можно взять ссылку на карту сайта в формате XML я, думаю, вам стало ясно из первой части этой статьи. Вставлять ссылку на карту сайта следует в эту форму:

Под этой формой вы можете увидеть уже добавленные файлы карт сайта с указанием количества страниц и ошибок. В разделе "Индекс" в подразделе "Страницы в индексе" можно увидеть список страниц, попавших в поисковый индекс (иными словами, вы увидите сколько страниц с вашего сайта участвует в поиске яндекса). В подразделе "Внешние ссылки" вы увидите список сайтов, ссылающихся на ту страницу вашего сайта, адрес которой указан в форме "Ссылки на":

По умолчанию там прописана звездочка -это означает, что вы видите список внешних ссылок, ведущих на все страницы вашего сайта. То же самое относится и к подразделу "Внутренние ссылки", где вы можете посмотреть какие именно страницы вашего же сайта ссылаются на страницу, заданную в форме "Ссылки на" страницу.
Разговор о возможностях панели вебмастеров яндекса, а так же о регистрации и работе в панелях вебмастеров Google, Yahoo и Bing, будет продолжен в ближайших постах рубрики SEO — поисковое продвижение.
Вы так же можете ознакомиться с другими статьями на тему продвижения сайта:
- Продвижение сайта в поисковых системах (SEO)
- Панели вебмастеров Яндекса, Google, Yahoo, Bing
- Счетчики посещаемости LiveInternet, Mail.ru, Google Analytics, HotLog, SpyLog, Rambler, Я.Метрика
- Twitter и FriendFeed
- E-mail рассылки Subscribe, Content.Mail и MailList
- Постинг в сервисы социальных закладок для продвижения своего сайта, привлечения дополнительных посетителей и ускорения индексации сайта поисковиками
- Показатели продвижения вашего сайта — Google PageRank (PR), тематический индекс цитирования Яндекса (ТИЦ) и Alexa Rank
- Все про RSS (фид, feed)
- Улучшаем индексацию сайта поисковиками с помощью настройки файла robots.txt и мета-тега Robots
- GoGetLinks — самая выгодная биржа рекламных обзоров
- Получение множества бесплатных обратных ссылок (бэклинков) с трастовых сайтов
На сегодня все. Если вы не хотите пропустить появление новых материалов на этом сайте, то можете подписаться на рассылку новостной ленты через форму, расположенную чуть ниже, или же выбрать удобный для вас способ подписки на странице Подписка. Если у вас остались нерешенные вопросы из области вебмастеринга, то вы можете поискать на них ответы, посетив страницу Вопросы и ответы.
Удачи вам! До скорых встреч на страницах блога KtoNaNovenkogo.ru
Постовые:
Рецензии на новые книги. Что читать? Новые рецензии, новые книги, популярные и модные книги-бестселлеры.
Беременность и роды в вопросах и ответах, планирование беременности.
Куда пойти учиться? Среднее специальное или высшее образование, выбираем форму обучения, бюджетная или коммерческая основа.















Сайт очень качественный. Надо бы Вам награду вручить за него или просто орден почета.
:-[
*LOL* Да это точно! Похвала автору!
благодаря этой статье начал понемногу заниматься раскруткой своего сайта. автору спасибо
Пожалуйста, заходите почаще, может быть еще что-нибудь интересное для себя найдете.
Отличный сайт и материалы очень познавательные
Отличный материал, побольше бы таких статей.
Очень нужный материал!!!! СПАСИБО!!! Автору РЕСПЕКТ И УВАЖУХА!!! =)
Дмитрий, скажите, почему ваш сайт выпал из индекса яндекса?
xtra: я так предполагаю, что это временно и, возможно, связано с принятием этого блога в Яндекс.Директ. А там посмотрим, вроде не за что было Яндексу на меня гневаться, хотя были случаи вылета и у белых и пушистых сайтов – тот же Терехов. =)
Присоединяюсь ко всем хвалящим этот сайт. Орден, респект и уважуха. Все понятно. только объясните что значит фраза “закинуть его в корень вашего сайта, а затем скормить ссылку на него поисковикам”. В корень то я его закинула, а как скормить?
Елена: через форму добавления файла sitemap в панелях для вебмастеров Яндекса и Гугла. Добавляем файл карты сайта Sitemap в панель инструментов Google
Про панель яндекса как раз на этой странице написано, чуть ниже середины.
Спасибо. Получил с Вашего сайта нужной информации больше, чем перелопатив книги Колисниченко, Берри Нортона и все joomla-ru-сайты вместе взятые.
Юрий: Спасибо за отзыв, польщен.
Хочу присоединиться к похвалам автору блога и выразить свою признательность за его работу! Ничего более полезного в жизни не встречал. Желаю всяческого процветания!
Спасибо! как всегда отличная статья! помогают!
Не получилось подтвердить права на сайт в Яндексе – возможно из-за того, что домен дополнительный. Подскажите, что в этом случае можно сделать. Сайт на джумле.