SEO ФАК. Вопросы и ответы. Часть 3.
Несмотря на то, что сегодня воскресение и время рубрики опросов, позволю себе сегодня немного по-факать SEO(в хорошем смысле этого слова 
).
Сегодня мы вернемся к теме самых интересных и полезных вопросов на тему продвижения и раскрутки Ваших блогов и сайтов, а также к вопросам, связанным с поисковой оптимизацией.
Первые части можно найти здесь:
1) SEO ФАК(FAQ). Часть 2.
2) SEO ФАК. Часть 1.
1) Вопрос: Как временно убрать проиндексированные станицы из индекса Google ?
Ответ: Иногда требуется избавиться от уже проиндексированных страниц, находящихся в Индексе Google. Это может случиться, например, если материал статьи устарел.
Также, данная технология используется, если Вам необходимо обновить информацию на указанной странице, а ждать, пока Google бот зайдет в следующий раз на эту страницу не хочется или не можется 
(кстати, существуют более щадящие методы как обновить устаревшие посты).
Если Вы решили убрать проиндексированные станицы из индекса Google, то все, что Вам необходимо сделать это:
Зайти сюда http://services.google.com/urlconsole/controller и следовать инструкциям.
При помощи этого инструмента Ваша страница будет “вырвана” из поиска на 180 дней.
Но, если Вы хотите удалить страницу из индекса полностью, то Вам необходимо, чтобы страница возвращала код ошибки 404. Добиться этого можно без труда
при помощи файла robots.txt или используя robots meta-tag Вашей страницы (автор: r a z n o b l o g . c o m)
2) Вопрос: Что такое SEM и SEA? Какая разница между SEM и SEO?
Ответ:
SEM - это Search Engine Marketing.
SEA - это Search Engine Algorithm.
А наше пресловутое SEO(Search Engine Optimization) - это часть SEM.
SEO это способность приблизить содержание сайта(блога) к алгоритмам поисковой оптимизации(SEA), что, соответственно, поднимает наш сайт выше в СЕРПЕ.
Что касается SEM, то это огромный “пирог”, который делится на такие куски, как:
1) SEO(Search Engine Optimization).
2) PPC(Pay per click).
3) PFI(Pay For Inclusion).
4) Линкострение(Link Building).
5) SEA(Search Engine Algorithm).
А также ROI,SSEL(Sponsored Search engine listing), SSE(shopping search engines) и еще множество подпунктов.
3) Вопрос: Список самых распространенных Поисковых пауков.
Полный список поисковых роботов.
Ответ:
| A | |
| Имя поискового паука | Поисковик |
|---|---|
| Acoon Robot v1.01 (www.acoon.de) | Acoon |
| AltaVista Intranet V1.0 AltaVista Search Intranet PX V1.0 webmaster@messebasel.ch | Messe Basel |
| AltaVista Intranet V1.0 bluewindow.ch webmaster@bluewin.ch | sear.ch |
| AltaVista Intranet V1.0 pta.at webmaster@pta.at | search.at |
| AltaVista Intranet V1.0 Re-Index webmaster@bluewin.ch | sear.ch |
| AltaVista Intranet V2.0 pta.at webmaster@pta.at | search.at |
| AltaVista Intranet V2.0 Sear.ch ccc@bluewin.ch | sear.ch |
| AltaVista Intranet V2.0 www.altavista.de search-support@altavista.de | AltaVista Deutschland |
| AnzwersCrawl/2.0 (anzwerscrawl@anzwers.com.au; http://faq.anzwers.com.au/anzwerscrawl.com) | Anzwers |
| Aport | Aport.ru |
| Arachnoidea (arachnoidea@euroseek.com) | EuroSeek |
| ArchitextSpider | Excite |
| F | |
| Имя поискового паука | Поисковик |
| fido/1.0 Harvest/1.4.pl2 | PlanetSearch |
| G | |
| Имя поискового паука | Поисковик |
| GAIS Robot/1.0B2 | seednet |
| Googlebot/1.0 (googlebot@googlebot.com http://googlebot.com/) | |
| Gulliver/1.2 | Northern Light |
| I | |
| Имя поискового паука | Поисковик |
| Infoseek Sidewinder/0.9 | Infoseek |
| K | |
| Имя поискового паука | Поисковик |
| KIT_Fireball/2.0 | Fireball |
| L | |
| Имя поискового паука | Поисковик |
| lwp-trivial/1.27 | Search 4 Free |
| Lycos_Spider_(T-Rex)/3.0 | Lycos |
| M | |
| Имя поискового паука | Поисковик |
| Mail.Ru/1.0 | Mail.Ru |
| Mozilla/2.0 (compatible; EZResult — Internet Search Engine) | EZResult |
| Mozilla/2.0 (compatible; T-H-U-N-D-E-R-S-T-O-N-E) | Thunderstone |
| Mozilla/3.0 (compatible; MuscatFerret/1.4.1; olly@muscat.co.uk) | EuroFerret |
| Mozilla/3.0 (compatible; MuscatFerret/1.5.2; olly@muscat.co.uk) | EuroFerret |
| Mozilla/3.0 (compatible; MuscatFerret/1.5.3; olly@muscat.co.uk) | EuroFerret |
| Mozilla/3.01 (Win95; I) | Infoseek |
| Mozilla/4.04 [de] (Win95; I ;Kolibri gncwebbot) | Kolibri Online |
| Mozilla/4.04 [de] (Win95; I ;Nav; Kolibri gncwebbot) | Kolibri Online |
| Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp) | yahoo.com |
| S | |
| Имя поискового паука | Поисковик |
| StackRambler | Rambler |
| Scooter/1.0 | AltaVista |
| Scooter/1.0 scooter@pa.dec.com | AltaVista |
| Scooter/1.1 (custom) | AltaVista |
| Scooter/2.0 G.R.A.B. X2.0 | AltaVista |
| Scooter/2.0 G.R.A.B. V1.1.0 | AltaVista |
| search.at V1.2 | search.at |
| sexsearcher | Sexsearcher |
| Slurp/2.0 (slurp@inktomi.com; http://www.inktomi.com/slurp.com) | Hotbot |
| Slurp | MSN.com |
| Slurp.so/1.0 (slurp@inktomi.com; http://www.inktomi.com/slurp.com) | Hotbot |
| SwissSearch V1.2 | SwissSearch |
| T | |
| Имя поискового паука | Поисковик |
| The Informant | The Informant |
| U | |
| Имя поискового паука | Поисковик |
| Ultraseek | Infoseek |
| W | |
| Имя поискового паука | Поисковик |
| WebCrawler/3.0 Robot libwww/5.0a | WebCrawler |
| WebCrawler-AddURL/2.0 | WebCrawler |
| WiseWire | WiseWire |
| WiseWire-Alpha-1.0 | WiseWire |
| WiseWire-Alpha-Spider | WiseWire |
| WiseWire-Alpha12-Spider971219a | WiseWire |
| WiseWire-Alpha12-Spider(971223a) | WiseWire |
| WiseWire-HotSpider-1.0 | WiseWire |
| WiseWire-Spider | WiseWire |
| WiseWire-Spider-1.0 | WiseWire |
| WiseWire-Spider2 | WiseWire |
| WiseWire-Widow-1.0 | WiseWire |
| WiseWire-Widow-1.0r | WiseWire |
| WiseWire-Widow-1.0-ALPHA12 | WiseWire |
| Y | |
| Имя поискового паука | Поисковик |
| Yandex | Yandex |
Если у кого-нибудь есть более точная или дополнительная информация по-поводу поисковых роботов, буду рада дополнить/исправить написанное.
(автор: r a z n o b l o g . c o m)
Советую почитать:
- Как найти песню, где найти книгу или видео всего за 1 минуту. Хитрости поиска.
- Финансовый стриптиз блогеров Рунета.
- Какова продолжительность дня ХОРОШЕГО блогера.
- Блоги Google. Как увеличить трафик при помощи Блогов Google.
- 10 советов, как реанимировать “старые” посты с пользой.
- На что ты тратишь время, ведя свой блог?
- Источник трафика. Что выбрать: FeedMates, BlogUpp или Grabr?
- Что такое W3C, и как W3C ошибки сказываются на SEO?
- SEO ФАК(FAQ). Часть 2.
- 15 .htaccess секретов для SEO. Защищаемся и продвигаемся.
- 10 качеств успешного блоггера.
- 7 основных ошибок, которые убьют твой блог!
- 100 ЖИРНЫХ RSS каталогов для регистрации Ваших RSS лент.
- Возраст домена. Важен ли возраст домена в SEO?
- Зарплаты SEO-шников в мире. Англия.
- SEO ФАК. Часть 1.
- Как увеличить трафик при помощи Google Images.
- 36 SEO инструментов. SEO инструменты для всех.
- 50 мест для регистрации блога. Продвижение,раскрутка блога - Часть 1.
- 50 мест для регистрации блога. Продвижение,раскрутка блога - Часть 2.
- 40 мелочей для успешного блога! Часть 1.
- 7 распространённых ошибок юзабилити!
Светлана, спасибо за очередной ликбез (-:
Если позволите, то один вопрос по индексации… как _наверняка_ узнать, что тем же гуглом проиндексировано? site:www.site.com выдаёт один результат, а вот “инструменты для веб-мастеров” выдаёт результат раз в 6 меньше…в смесле, где информация про сайтмап, сколько загружено, сколько в индексе…
none, спасибо Вам, что читаете. По-поводу Вашего вопроса. Я в последнее время тестировала несколько таких инструментов и должна сказать, что немного разочаровалась в их объективности. У каждого из них свои “тараканы”. Для меня вполне достаточно site:www.site.com и link:www.site.com
Что касается разницы в показателях, то, все верно. Количество проиндексированых страниц не равняется количеству страниц в СЕРПе.
А как узнать, что есть в серпе? А то, похоже, или вылетел, или фильтр у одного сайта (-:
none, все очень просто. Берете заголовок Вашего поста ставите кавычки и Гуглите. Например, этот пост в поисковой строке Гугла выглядит так: “SEO ФАК(FAQ). Часть 3.” Но это работает с уже опубиковаными некоторое время назад постами(не новыми). Хотя, если Вы часто обновляете блог, то Google должен Вас любить
Кроме этого есть еще пару способов узнать, что Вы в бане. Я как раз сейчас об этом пишу пост. Так что, ждите
Написано у вас полная таблица роботов, но на самом деле это же не так. Я вот к чему - например у яндекса несколько роботов 1.01 - индексатор, 1.03 - …. и т.д., наверное и у других поисковиков также. Вот если б таблица была бы полной, было бы действительно хорошо.
Функционалист, Вы правы, просто роботы Яндекса имеют аналогичное название, в отличии от других. Я согласна, роботов гораздо больше, и я обязуюсь регулярно пополнять таблицу!
Яндекс тоже представлен не одним пауком. Вот наиболее известные:
Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот.
Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок.
Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов (ответ на вопрос как склеить зеркала и как определить заход зеркальщика Яндекса).
Yandex/1.02.000 (compatible; Win16; F) — робот, индексирующий пиктограммы сайтов (favicons).
Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL».
Yandex/1.03.000 (compatible; Win16; M) — робот, обращающийся при открытии страницы по ссылке «Найденные слова».
YaDirectBot/1.0 (compatible; Win16; I) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса.
YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) — робот поиска по блогам, индексирующий коментарии постов.
Кроме роботов, у Яндекса есть несколько агентов-«простукивалок», которые определяют, доступен ли в данный момент сайт или документ, на который стоит ссылка в соответствующем сервисе.
Yandex/2.01.000 (compatible; Win16; Dyatel; C) — «простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.
Yandex/2.01.000 (compatible; Win16; Dyatel; Z) — «простукивалка» Яндекс.Закладок. Ссылки на недоступные сайты помечаются серым цветом.
Yandex/2.01.000 (compatible; Win16; Dyatel; D) — «простукивалка» Яндекс.Директа. Она проверяет корректность ссылок из объявлений перед модерацией. Никаких автоматических действий не предпринимается.
Yandex/2.01.000 (compatible; Win16; Dyatel; N) — «простукивалка» Яндекс.Новостей. Она формирует статистические отчеты для контент-менеджера и информирует его о возможных проблемах у партнеров-поставщиков новостей.
молчун, спасибо за дополнение.
Я держу несколько аккаунтов в различных биржах sape, mainlink, linkfeed, xap если сайт есть там то все ясно. Если нет то скорее всего он ссылками не торгует и никогда не торговал. Остальные биржы можно игнорировать. Конечно это долго так проверять, но зато эфективно.
У меня в Sape забавная статистика. Есть блог с нулевыми показателями. Там всего 95 страниц. Каждая в среднем приносит по 3,5 рубля в месяц. Другие нулевые проекты столько не приносят. И даже блог с тИЦ=10 не может обогнать по доходности на одну страницу.
Я уже и подкручивал количество ссылок на странице, и цены опускал и поднимал. Ничего не получается. А тематика у всех одинаковая. Странно.
Вот за табличку роботов СПАСИБО, полезно, пригодится!!!