Яндекс боты - какие они?

Вид для печати

29.04.2008, 00:38
Savitur

Яндекс боты - какие они?
Кем представляется Яндекс, когда приходит к нам на сайты?
- Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот
- Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок
- Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов
- Yandex/1.02.000 (compatible; Win16; F) — робот, индексирующий пиктограммы сайтов (favicons)
- Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»
- Yandex/1.03.000 (compatible; Win16; M) — робот, обращающийся при открытии страницы по ссылке «Найденные слова»
- YaDirectBot/1.0 (compatible; Win16; I) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса
Еще у Яндекса есть "дятлы", которые простукивают сайты из Я.Каталога, Я.Директа, Я.Закладок и Я.Новостей, могу их юзер-агенты тоже запостить, если интересно...

И вот такой вопрос, а Вам было бы интересно видеть в админке LinkFeed.ru статистику по активности ботов Яндекса и Google на страницах вашего сайта?
29.04.2008, 01:01
Zegaldis

Цитата:

Сообщение от Savitur

И вот такой вопрос, а Вам было бы интересно видеть в админке LinkFeed.ru статистику по активности ботов Яндекса и Google на страницах вашего сайта?

Мне бы понравилось!
29.04.2008, 02:03
nq49zk

да, было бы интересно)
03.05.2008, 13:33
Кшаду

Очень неплохая фишка была бы
03.05.2008, 22:32
Tortik

Если на нагрузке площадок не отразится, то да :)
Если нагрузка будет - то нет :mad:
Если по желанию - поставил галочку - то безусловно :D
04.05.2008, 02:04
Savitur

технически, это как счетчик будет...
04.05.2008, 03:15
Linkdealer

безусловно полезная вещь, большинство модулей и скриптов дает весьма общую статистику по индексации.
04.05.2008, 12:55
Savitur

а тут поставил ссылки, и если площадка с мониторингом ботов, то мы знаем когда пришел бот, и у ссылок размещенных сразу метку можно ставить - бот уже скушал :p
04.05.2008, 18:20
Linkdealer

тут дело такое - зашел не значит проиндексировал, к сожалению...
04.05.2008, 18:54
Savitur

все верно, НО ты точно знаешь, что он съел твои ссылки...
тут уже много чего понятно, именно по индексации становится...
05.05.2008, 21:28
bashnya
Цитата:
Сообщение от Savitur

Кем представляется Яндекс, когда приходит к нам на сайты?

Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот
Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок
Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов
Yandex/1.02.000 (compatible; Win16; F) — робот, индексирующий пиктограммы сайтов (favicons)
Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»
Yandex/1.03.000 (compatible; Win16; M) — робот, обращающийся при открытии страницы по ссылке «Найденные слова»
YaDirectBot/1.0 (compatible; Win16; I) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса

Еще у Яндекса есть "дятлы", которые простукивают сайты из Я.Каталога, Я.Директа, Я.Закладок и Я.Новостей, могу их юзер-агенты тоже запостить, если интересно...

И вот такой вопрос, а Вам было бы интересно видеть в админке LinkFeed.ru статистику по активности ботов Яндекса и Google на страницах вашего сайта?
Еще бы интереснее было знать их IP - вот что я знаю из серверных логов:
87.250.х.х YANDEX-BIGSEARCH3
77.88.х.х spider20.yandex.ru
213.180.х.х YANDEX-BIGSEARCH2
213.180.х.х Yandex corporate network
дятел работает с 213.180. причем, он регулярно начинает стучать (4-5 раз в сутки 213.180.207.25) если ссылка на сайт (некаталожный, даже очень юный) появлется где-нить на его сайтах (wow.ya.ru например)
213.180.х.х Yandex corporate network - если сайт совершенно новый слит в аддурилку, через 2-3-4 дня кто-то заходит, причем строго с мозиллы, глядит его, и если сайт напичкан качественным контентом - он встает в индекс за неделю, проверено на 3-х нулевых сайтах