Роботы Яндекса
Для поиска информации в глобальной сети поисковая система Yandex использует мощные программные средства, называемые роботами (robots). Утверждение того, что поиском занимается робот Яндекса не совсем верно. У самого большого поисковика рунета естественно несколько роботов, постоянно занятых индексацией содержимого. Давайте укажем официальный список роботов, которые могут посетить и Ваш сайт:
- Yandex I — главный индексирующий робот
- Yandex P — индексатор картинок
- YandexH — робот, определяющий зеркала сайтов
- Yandex F — робот, индексирующий пиктограммы сайтов (favicons)
- Yandex D — робот, индексирующий содержимое по требованию веб-мастера через добавление сайта через форму «Добавить URL»
-
Yandex m, Yandex M — роботы, индексирующие мультимедийные данные сайтов
- YaDirectBot I — робот, индексирующий страницы сайтов - участников Рекламной сети Яндекса
- YandexBlog B — робот поиска по блогам, индексирующий комментарии постов. Теперь то Вы знаете, что писать комментарии важно :)
Идентификация роботов Яндекса по IP-адресам, довольно сложна , так как таких адресов много, и они могут меняться. Список адресов является коммерческой тайной Яндекса.
Кроме роботов, у Яндекса есть несколько агентов-«простукивалок», которые определяют, доступен ли в данный момент сайт или документ, на который стоит ссылка в соответствующем сервисе.
- Yandex C — «простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.
- Yandex Z — «простукивалка» Яндекс.Закладок. Ссылки на недоступные сайты отмечаются поисковиком серым цветом.
- Yandex D — «простукивалка» Яндекс.Директа. Она проверяет правильность указания ссылок в объявлениях перед последующей модерацией. Кроме автоматических действий ничего не предпринимается.
- Yandex N — «простукивалка» Яндекс.Новостей. Она формирует статистические отчеты для контент-менеджера и информирует его о возможных проблемах у партнеров-поставщиков новостей.
Уверен, данный материал будет полезным дополнением Вашего багажа знаний общих правил оптимизации сайтов для поисковиков и поможет разобраться в работе поисковых роботов Яндекса.