Панель инструментов для вебмастера от поисковых систем Яндекс, Google, Yahoo и другие сервисы, помогающие вебмастеру в продвижении и развитии сайта.

Здравствуйте, уважаемые посетители моего скромного проекта для начинающих web-разработчиков и web-мастеров ZametkiNaPolyah.ru. Это очередная статья из рубрики Заметки для вебмастера, и в этой статье я бы хотел поговорить с Вами о процессе регистрации буквально во всех сервисах поискового гиганта Google. Но основной темой данной статьи будет описание возможностей панели для вебмастеров от Google, а уже поверьте информацию, которую она предоставляет можно и даже нужно использовать в полной мере. Ну во-первых это анализ поисковой выдачи от Google именно для нашего ресурса, во-вторых в панели инструментов от Google мы можем вносить изменения в индексацию своего проекта, вплоть до того, что сможем сделать невидимым свой ресурс для роботов Гугла. Google Webmaster Tools наряду с Вебмастером Яндекса это два основных инструмента веб-мастера всего русско говорящего интернета и как не крути пользоваться уметь надо двумя. И пользоваться надо так, что бы одно не мешало другому. Очень важно отслеживать состояние Вашего проекта для обоих поисковых систем, следить за индексацией Ваших ресурсов и вносить своевременные изменения.

Регистрация в сервисах Google. Добавление Вашего сайта в Google Webmaster Tools.

Как я уже говорил, регистрация во всех сервисах Google происходит один раз то есть создается один аккаунт, за которым закреплены все возможности этого интернет-гиганта. Что же давайте приступим к регистрации. Что бы получить доступ к Google WebMaster Tools  нам необходимо всего-то навсего создать аккаунт на почте Google.

Давайте этим прямо сейчас и займемся, переходим на главную страницу Google.ru, и в верхнем меню видим пункт «Еще», нажимаем на «еще» и у нас выпадает меню, внизу которого есть пункт «Все сервисы» вот он-то нам и нужен. Мы видим огромный список из двух колонок, но нас в данный момент интересует правая колонка и третья ссылка сверху в этой колонке, рисунок конверта и надпись Gmail. Переходим по этой ссылке и видим справа вверху красную кнопку «Создайте аккаунт» смело нажимаем и заполняем появившуюся форму. А теперь давайте посмотри, до чего мы сможем дотянутся зарегистрировав почтовый ящик у Гугла, ну во-первых самый лучший в мире почтовый ящик, ну это моё скромное мнение.

Список сервисов, которые мы получим после регистрации почтового ящика Google очень огромен, какие-то сервисы будут для Вас менее полезны, какие-то более полезны, в этой публикации я не буду их перечислять так как тема данной статьи это возможности панели инструментов Google WebMaster Tools.

Войти в свой аккаунт Вы сможете с главной страницы Гугла, в правом верхнем углу есть кнопочка с надписью «Войти». Всего-то надо ввести логин и пароль, придуманные Вами при регистрации. Что бы перейти в панель инструментов Google WebMaster Tools, на главной странице Гугла в строку запроса так и напишите «Google WebMaster Tools». Верхняя ссылка поисковой выдаче и будет панель инструментов вебмастера от Гугл. Ну или поможете на прямую попасть в панель инструментов, просто щелкнув по этой ссылке. Если Вы уже зарегистрированы в сервисах Google, то Вам останется только ввести пароль в форму.

После входа в панель инструментов, у Вас мгновенно появится возможность добавить свой сайт в панель инструментов Google WebMaster Tools:

Жмите на ссылку, «Добавьте сайт, что бы начать работу». После того как Вы это сделаете, появляется форма, в которую надо будет ввести URL Вашего сайта:

Обратите внимание, если Ваш основной сайт пишется без www — то и URL своего сайта для регистрации в Google WebMaster Tools указывайте без www.

После того как Вы добавили свой сайт в панель инструментов Google, Вам предложат подтвердить свои права на данный ресурс и предложат несколько вариантов для подтверждение прав на сайт.

Как доказать право собственности на сайт в панели вебмастеров Google WebMaster Tools

И так, нам предложили несколько вариантов подтверждения прав собственности на свой сайт. Этих вариантов всего четыре. Один из них рекомендован поисковой системой Google, но мы рассмотрим все способы, начиная с рекомендованного.

1. Рекомендованный способ подтверждения прав на сайт в панели инструментов Гугл вебмастер тулс

Первым мы конечно рассмотрим рекомендованный способ подтверждения прав на сайт. Он заключается в следующем: Нам предлагают скачать HTML-документ, который нам надо будет разместить в корневой папке нашего сайта. Перед тем как размещать, какие-то скрипты, документы и прочие файлы, я например всегда смотрю их содержание, через бесплатный редактор с синтаксической подсветкой Notepad++, ну а для загрузки файлов на свой сайт я использую бесплатно скачанный FTP клиент FileZilla, который к тому же легко и просто настроить.

После того, как мы загрузили проверочный файл на сервер, нам останется только перейти по ссылке и нажать на кнопку подтвердить, естественно это всё надо делать в панели Google WebMaster Tools. Так выглядит рекомендованный способ подтверждения прав на сайт.

2. Второй способ подтверждения прав на сайт. Добавление метатэга на главную страницу сайта

Альтернативой первому и рекомендованному способу подтверждения прав на сайт в панели вебмастеров от Google, является добавление метатега на главную страницу Вашего сайта. Для этого вам надо будет перейти по ссылке «Альтернативные способы» и поставить радиопреключатель в положение «Добавьте метатэг в код главной страницы своего сайта», после чего Вам сгенерируется метатэг, который надо будет разместить на главной страницы своего сайта внутри элемента HEAD, естественно главную страницу сначала надо будет открыть на редактирования или скачать себе на компьютер, например при помощи FTP менеджера FileZilla, а после открыть на редактирование, например бесплатным редактором Notepad++ и обратно отправить на свой сайт. После чего надо будет нажать «Подтвердить» в панели инструментов Google WebMaster Tools. Приведу пример, куда следует вставлять полученный метатэг.

[html]
<html>
<head>
<meta name="google-site-verification" content="sluchaino-sgenerirovannay-posledovatelnost" />
<title> Заголовок Вашего сайта</title>
</head>
<body>
Контент сайта
</body>
</html>
[/html]

Метатэг лучше вставлять по ближе к открывающему тэгу <head>.

3.  Третий способ подтверждения прав на сайт. Подтверждаем права на сайт при помощи аккаунта Google Analytics.

Что бы подтвердить данным способ права на свой сайт, Вам необходимо будет зарегистрировать свой аккаунт в статистическом сервисе Google — Google Analytics. Затем получить код счетчика в сервисе Гугл аналитикс и установить код счетчика от Гугл к себе на сайт. Внутрь элемента HEAD, но уже перед закрывающим тэгом </head>. Что бы скачать файл Вы всегда сможете воспользоваться клиентом FileZilla, а отредактировать и вставить код счетчика можно при помощи HTML и PHP редактора Notepad++. После чего Вам опять же останется только подтвердить свои действия в панели Google WebMaster Tools.

4. Четвертый способ подтверждения прав на сайт. Подтверждаем права на сайт путём добавления записи DNS конфигурации домена.

Сразу скажу, что лично я ни разу не подтверждал права на сайт путем добавления записи DNS, но упомянуть о этом способе стоит. Когда Вы поставите переключатель на этот способ, Вы сможете выбрать регистратора доменного имени или провайдера предоставляющего Вам место(хостинг). После чего Вам будет предоставлена TXT-запись, которую нужно внести в конфигурацию DNS именно для Вашего сайта.

Этот способ подходит только для тех, кто имеет доступ к системе регистратора доменов или провайдера хостинга, где можно добавить новую запись DNS. При данном способе подтверждения прав на сайт есть несколько нюансов, первое - изменение DNS конфигурации может занять некоторое время и если роботу Гугла не удается найти TXT-запись сразу, он будет периодически выполнять повторный поиск пока конфигурации DNS не обновятся.

После того как запись будет обнаружена, Вам останется только подтвердить своё желание, в панели вебмастеров Гугл. Обратите внимание, что запись из DNS удалять не надо даже после подтверждения, в противном случае подтверждение прав на сайт Гугл отменит.

После того как Вы подтвердили права на сайт Гуглу, то есть выполнили один из четырех способов и нажали «Подтвердить» в панели инструментов Google WebMaster Tools и успешно прошли подтверждение прав на сайт. Вас перебросит на страницу «Центр веб-мастеров...» с уведомлением о успешном подтверждение:

После чего жмем «Продолжить». Если ваш сайт попал в бан-лист Google или вы сами не хотите чтобы он участвовал в поиске Google (запретили его индексирование через файл robots.txt), то вы увидите надпись, говорящую о том, что ресурс не включен в индекс. Так же на главной странице панели инструментов Google WebMaster Tools Вам будет доступна первая десятка наиболее популярных поисковых запросов в Google, которые приводили к показу вашего сайта, отсортированы по частоте перехода с них на ваш ресурс.

Для того что-бы посмотреть более подробную статистику по выдаче поисковой системы Google для Вашего сайта, а так же посмотреть сколько переходов было осуществлено из поисковой выдаче Google, нажмите «Дополнительно» под топ 10, популярных поисковых запросов Google для Вашего сайта.

Справа от популярных запросов Google Вы сможете увидеть подробный отчет о ошибках сканирования поисковой системы Google, если у Вы недавно купили себе доменное имя и выложили сайт на хостинг — то скорее всего никаких отчетов Вы не увидите, но Google предоставляет Вам справку о каждом пункте, достаточно перейти по ссылке «Почему?» и Вы получите справку о том как избежать ошибок и справку о ключевых словах Google.

Так же Вы сможете посмотреть детальные отчеты о ошибках сканирования Google (например, «Заблокирован файлом robots.txt»), а так же детальный отчет о ключевых словах Вашего сайта. Естественно поисковой системы Google. Кстати возможность просмотра статистики ошибок в панели инструментов Google WebMaster Tools можно использовать для поиска битых ссылок.

Внизу панели инструментов Google Вебмастер под заголовком «Файлы Sitemap», можно увидеть сколько и какие именно карты сайта были отданы панели инструментов Google. Чуть левее, идет заголовок «Ссылки на ваш сайт», это есть статистика тех страниц в интернете, которые нашел Google и которые ссылаются на ваш сайт. Для просмотра полного списка ссылающихся страниц нужно нажать на ссылку «Дополнительно», внизу списка.

Панель инструментов Google WebMaster Tools — как добавить карту сайта Sitemap XML в Google Webmaster Tools.

 Начнем мы пожалуй знакомство с панелью инструментов Google вебмастер тулс с добавления карты сайта(Sitemap XML). Но для начала, посмотрите на левую часть окна браузера, там Вы увидите все иинструменты, которые доступны в панели Google WebMaster Tools.

Карту сайта в Гугл Вы сможете добавить двумя способами. С главной странице нажать на ссылку «Отправить файл Sitemap» или из меню слева сделать два клика «Конфигурация сайта», а затем «Файл Sitemap» и в появившемся окне, Вы сможете добавить путь к карте сайта Вашего форума, блога или интернет-магазина, ну или что там у Вас.

О том как создать карты сайта в формате XML для сайтов под управлением таких CMS как Joomla!, Drupal блогов на WordPress и форумов, а так же о том, как создать карту сайта для любого Вашего с помощью онлайн генераторов, я планирую подробно рассказать в дальнейшем.

И так, для того что-бы отправить Google XML файл, то есть карту сайта Вашего ресурса(Sitemap), Вам надо будет нажать на кнопку в правом верхнем углу «Добавление/проверка файла Sitemap»:

а в открывшемся окне прописать путь до вашего файла карты сайта, а затем нажать кнопку «Отправить файл Sitemap» в этом окне или проверить файл Sitemap. Если Ваша карта обновлена и Вы хотите удостовериться, что Google уже подгрузил её.

Так же на странице Sitemap панели инструментов Гугл Вебмастер Тулс так Вы сможете удалить лишние(старые или ненужные) файл карты сайта, если такие имеются. В приведенной таблице вы так же можете видеть сколько ссылок на страницы вашего сайта имеется в загруженном вами XML файле Sitemap и сколько из них проиндексировано поисковой системой Google.

Панель инструментов Google WebMaster Tools — robots.txt или как удалить страницу из индекса Google

Еще одним важным пунктом панели вебмастеров Google является Google WebMaster Tools «Доступ для сканера„:

В этом окне первое, что вам необходимо сделать это проверить на работоспособность файл robots.txt, благо нужная вкладка  “Blocked' URL's (robots.txt)» уже открыта(так же ждите публикацию, в которой я постараюсь подробно описать, что это за файл robots.txt и для чего он нужен, а так же как правильно составить robots.txt)

Если Вы пролистаете вниз открытую страницу панели для вебмастеров Google, то в первом окне увидите содержание Вашего файла robots.txt (который Вы можете прям тут же подправить и посмотреть, что получится), а во втором окне Вы сможете указать URL-адреса и роботов User Agent для проверки поисковой системы Google.

Чуть ниже Вы сможете выбрать робота-сканера Google, которого Вы хотите проверить на видимость страниц Вашего сайта. После того как Вы сделаете нужные настройки нажимайте на кнопку проверить. После чего Google WebMaster Tools выдаст результат проверки, обратите внимание, что результаты выдаются отдельно для каждого робота.

Если этот результат не совпадает с тем, что Вы хотели получить, то придется продолжить править файл robots.txt и проверять результат правки на этой странице до тех пор, пока у вас все не заработает так как Вам необходимо.

Во второй вкладки панели инструментов Google Вебмастер «Create robots.txt» у Вас есть возможность воспользоваться сервисом Google, для создания нового файла robots.txt. Тут всё просто, как дважды два равно четыре. Вот алгоритм действий по созданию robots.txt в панели вебмастеров Google WebMaster Tools:

1. Выбираем тип доступа для сканеров Google, тут варианта два, первый — полный доступ ко всем файлам для робота и второй — закрыть все файлы для Google робота(на следующем этапе можно указывать ограничения)
2. Указание дополнительных ограничений, из левого списка выбираем нужное действие(разрешить/запретить) из правого списка выбираем Google бота которому хотим задать эту инструкцию. А в поле для ввода пишем путь к файлу или папке, к которой мы хотим разрешить или запретить доступ для того или иного сканера Google. После всех этих процедур нам остается нажать кнопку «Добавить» и новое правило будет внесено в код файла robots.txt, который Вы можете наблюдать в окне ниже.
3. После того как Вы задали все правила и записали их в файл robots.txt, Вам останется только скачать его к себе на компьютер, а после загрузить на сервер хостинг-провайдера. Обратите внимание, что файл robots.txt должен хранится в каталоге верхнего уровня(в корневой папке сайта)

После чего, в первой вкладке Вы сможете посмотреть как видит сайт Google, с новым файлом robots.txt

В третьей вкладки Google Webmaster tools «Удалить URL-адреса» Вы сможете создать запрос на удаление из индекса Google какого-либо отдельного URL-адреса (это можете быть веб-страница, HTML-страницы, картинка, динамическая страница и т.д. ),так же это может быть целый каталог или весь сайт, ну если Вы хотите обновить кэш Google например.

Удалить страницу из индекса Google — просто, как забрать леденец у ребенка, в панели вебмастеров Google WebMaster Tools нажимайте на кнопку «Создать новый запрос на удаление» вводите URL адрес, который хотите удалить из индекса, но не забывайте про регистр букв, эта штука к нему чувствительна.

Панель инструментов Google WebMaster Tools — быстрые ссылки, 301 redirect и выбор главного зеркала сайта

Следующим пунктом раздела «Конфигурации сайта» панели инструментов Google WebMaster Tools является «Ссылки сайта», обычно здесь Вы не ничего не увидите, и настроить соответственно в этом меню ничего нельзя. Все дело в том, что быстрые ссылки сайт Google создает автоматически и то если посчитает данное действие необходимым.

Если же  структура Вашего сайта не позволит алгоритмам Google выявлять релевантные поисковому запросу быстрые ссылки сайта, они не отображаются.В дальнейшем, как пишут инженеры Google алгоритм создания быстрых ссылок сайта будет совершенствоваться и возможно, что когда-нибудь вебмастера сами смогут настраивать быстрые ссылки сайта.

Но так же на сайте поисковой системы Google Вы сможете найти, рекомендации, которые уже сегодня позволяют повысить качество ссылок вашего сайта. Например, текст внутренних ссылок и их описание в атрибуте alt должен быть информативным, кратким и уникальным.

А если Вам вдруг показалось, что ссылки сайта отображаются неправильно или они вовсе не подходящие, их рейтинг можно понизить. Понижение рейтинга URL, используемого в качестве ссылки сайта, означает, что данный URL не подходит для какой-либо страницы вашего сайта. Google не может гарантировать, что после понижения рейтинга эти URL больше не будут использоваться в качестве ссылок сайта. Но понижение рейтинга, как утверждают инженеры Google, является весомым фактором, который будет учитываться при генерировании ссылок сайта.

Следующим пунктом панели вебмастеров Google идет «Изменение адреса» Вашего сайта, ну тут все очевидно, если Вы изменили доменное имя сайта-то в этом пункте Вы сможете это указать поисковой системе Google. Так же Вы сможете прочитать подробную инструкцию о переносе Вашего сайта на другой домен, в которой Вам посоветуют сделать 301 redirect с Вашего старого домена на новый. Но перед этим Вам необходимо будет зарегистрировать новый домен в Google WebMaster Tools, а потом следуйте за белым кроликом, ну то есть выполняйте рекомендации от Google.

Следующий инструмент Google WebMaster — «Настройки». Здесь у Вас есть возможность задать точное географическое положение для Вашего сайта, если он ориентирован на посетителей из конкретного региона. Под надписью «Основной домен» вы сможете выбрать основной домен с www или без www, который вы хотели бы использовать для индексации страниц своего сайта и его же система Google будет показывать в результатах поиска. Но более правильным способом установить основной домен, используя redirect 301 на уровне хостинга.

Тогда настройках Google WebMaster Tools можно будет оставить значение по умолчанию — «Не устанавливать основной домен». Если Вы все же решите выбрать основной домен используя Google WebMaster Tools, то для начала придется подтвердить права собственности на зеркало Вашего сайта, о как.

Так же на странице «Настройки» Вы можете задать скорость сканирования сайта, ну то есть не скорость, а частоту сканирования, Вашего сайта, но делать это Google не рекомендует, ну что же, жираф большой — ему видней.

И так в разделе «Конфигурации сайта» панели вебмастеров Google осталось два пункта, «Управление пользователями» и «Параметры URL». В пункте управления пользователями, у Вас есть возможность добавить нового пользователя, который будет иметь доступ к панели инструментов Google.

А вот параметры URL, очень даже полезная штука. Но использовать ее надо во-первых с умом, а во-вторых если Вы в точности знаете как те или иные параметры влияют на работу Вашего сайта. Все дело в том, что у Вас на сайте может появиться дублирующиеся страницы, которые могут существенно снизить частоту появления страниц сайта в поисковой выдаче Google. Все подробности Вы сможете узнать из справки на странице «Параметры URL» панели инструментов Google WeMaster Tools.

«Показатели „+1“» тесно связаны с социальной сетью «Круги Google»(не уверен в название) и возможно очередной +1 позволит странице Вашего ресурса подняться в поисковой выдаче Google. Ну и дальше Вы сможете посмотреть результаты различных сканирований Google, а так же сможете привязать каждую статью к профилю в социальной сети Google.

Надеюсь, что был хоть чем-то полезен и до скорых встреч на страницах блога для начинающих вебразработчиков и вебмастеров ZametkiNaPolyah.ru

Возможно, вам будет интересно:

• Что такое SEO, определение SEO. Черное SEO. Белое SEO
• Заметки о Drupal
• Как создать сайт используя Drupal. Установка Drupal на локальный сервер. Локализация Drupal. Как русифицировать Drupal при помощи .po файл. Перевод Друпала при помощи архива
• Логическое форматирование HTML-документов. Непосредственное форматирование HTML документов. HTML тэги, часть 3
• HTML атрибуты, для чего используются HTML атрибуты, какие бывают HTML атрибуты, синтаксис и назначение атрибутов в HTML
• HTML теги, часть 1. Тэг PRE авторское форматирование, тэг BR перенос строк. Пробельные символы
• Блочные и строчные элементы. Теги HTML заголовков H1-H6
• Структура HTML документа. Тэги html, head, body и title
• Что такое теги, какие теги бывают и где их искать
• Счетчики посещений
• Google Analytics — регистрация, установка и получение кода счетчика посещаемости. Работа со статистикой
• Что такое RSS лента и поток. Программы для чтения RSS лент — RSS reader. Иконки и кнопки RSS для сайта. Как устроен формат RSS.
• Заметки о XML и XLST
• Разметка XML документа. XML атрибуты. Корень XML документа. Декларации в XML. Комментарии в XML. Синтаксис XML документа
• Расширяемый язык разметки XML. Синтаксис XML. Структура XML документа. Применение XML
• Конфликты в XML. Пространство имен в XML. Способы именования пространства имен в XML. Как использовать HTML теги в XML документах
• Заметки по JavaScript
• Алгоритмический язык программирования JavaScript. Методы вывода данных в JavaScript alert (), confirm и document.write (). Вставка JavaScript в HTML страницы
• Все о реляционных базах данных и системе управления базами данных MySQL. MySQL сервер
• Система управления базами данных. Реляционные базы данных. Где скачать MySQL сервер, как настроить и установить