Выпали страницы из индекса? Индексация Google. Реальный пример.

Согласитесь, лучший способ научиться чему-либо – это самостоятельно решить, возникшую проблему, и это касается не только SEO. Сегодня я хочу рассказать о том, как на личном опыте, в очередной раз убедилась, что очень важно ВСЕСТОРОННЕ заниматься продвижением наших ресурсов. Надеюсь, что данный пост будет полезен и позволит Вам избежать тех ошибок(упущений), которые допустили мы.

Индексация Google. Реальный пример.

[php]include (TEMPLATEPATH . ‘/middle_article_ads.php’);[/php]
Другими словами, важно не только регулярно обновлять сайт/блог новым и интересным содержанием, но и постоянно мониторить статистику, позиции в поисковиках и количество страниц в индексе. Ну, а теперь давайте перейдем к реальному примеру.

У нашего портала “Разноблог” в основном и дополнительном индексах Google находится порядка 1500 страниц. Все бы ничего, но в последнее время посещаемость портала начала постепенно падать. Я наблюдала за этим “падением”, прибывая в абсолютном спокойствии, наивно полагая, что все это связано с летними отпусками.

Однако, вскоре кривая падения приобрела угрожающий вид. Выглядело это, примерно так:

Кривая падения посещаемости.

Я решила не паниковать и разобраться в чем проблема, да и есть ли проблема вообще. Первым, что я сделала – это самая примитивная проверка индексации Google: “site:raznoblog.com”, так как именно оттуда к нам течет основной трафик.

И вот тут-то, все стало на свои места. Оказалось, что вместо положенных 1400-1500 страниц в индексе Google осталось 723! Пессимизация? Эту версию я отмела сразу, так как, при пессимизации, как правило, из индекса вылетают все страницы сразу(но не факт).

Следующим моим шагом было обращение к очень нужному нам SEO-шникам сервису – Google Webmaster Tools. Поковырявшись немного я увидела множественные ошибки вида:

Невозможно получить доступ к ресурсу.

Другими словами, по какой-то причине доступ к нашему порталу для Google был запрещен. И он(Google) незамедлительно ответил на такую наглость очень действенным способом, приговаривая: “Если я Вам не нужен, то нафиг Вы мне нужны” 😉

При принудительном обращении робота Google к нашему сайту, моя попытка, вновь потерпела фиаско.

Здесь, окончательно все стало на свои места. Надо стучать к своим хостерам для получения объяснений, что я и незамедлительно сделала. На мой вопрос проверить или IP робота Google случайно не забанен, я получила ответ, который очень меня “порадовал”: “А Вы скажите сначала, что за IP у Google ” 8)

Но дело не в этом. Оказалось, что, действительно, Google попал в черный список фаервола хостинга, по неизведанным причинам. Кстати, если кто-то сталкивался с похожей проблемой бана IP Google, то будет очень интересно узнать истинную причину этого.

После удаления санкций с IP робота Google, ситуация постепенно начала налаживаться. Разумеется, что возврат всех страниц в индекс Google – дело не сиюминутное и возьмет какое-то время:

Индексация Google.

К чему это я все? Да к тому, что многие(в том числе и я, до сегодняшнего дня) напрасно пренебрегают мониторингом своего сайта. Согласитесь, даже, если Вы будете писать по 10 полноценных постов в день, Вам это не сильно поможет, если Вы столкнетесь со схожей проблемой.

А если у Вас коммерческий сайт, где каждый посетитель – потенциальный покупатель? Думаю, комментарии излишни.

Именно поэтому, я настоятельно рекомендую Вам уделять 3-5 минут в день(согласитесь, это совсем не много для того, чтобы избежать печальных последствий) для основных статистических проверок.

Если же Вы все же столкнулись с данной проблемой выпадения из индекса страниц своего сайта/блога, то вот, что Вам необходимо сделать(на примере Google):

1) Простая проверка количества страниц: site:yoursite.ru (Вы ВСЕГДА(!!!) должны знать, сколько страниц у Вас в индексе Google, Yandex… Если у Вас много сайтов, то не поленитесь записать эту крайне важную информацию).

2) Используйте сервис Google Webmaster Tools для диагностики проблемы. В 90% этого достаточно, чтобы найти источник проблемы. Не пренебрегайте этим сервисом!

3) Если Вы считаете, что проблема устранена, но результатов некоторое время это не приносит, попробуйте попросить переиндексировать Ваш ресурс с подробным объяснением причин.

Данное пример касается Google, но все указанные методы релевантны для любого другого поисковика.

Таким образом, если Вы хотите, чтобы Ваш сайт/блог успешно процветал, то постоянного обновления ресурса интересным и полезным контентом будет маловато. Вам необходимо постоянно держать “руку на пульсе”, не забывая о большом количестве подводных камней, подстерегающих нас, в самых непредсказуемых местах.