Список роботов яндекса - в помощь специалисту :)

Yandex/1.01.001 (compatible; Win16; I)
основной индексирующий робот

Yandex/1.01.001 (compatible; Win16; P)
индексатор картинок

Yandex/1.01.001 (compatible; Win16; H)
робот, определяющий зеркала сайтов

Yandex/1.03.003 (compatible; Win16; D)
робот, обращающийся к странице при добавлении ее через форму «Добавить URL»

Yandex/1.03.000 (compatible; Win16; M)
робот, обращающийся при открытии страницы по ссылке «Найденные слова»

YaDirectBot/1.0 (compatible; Win 16; I)
робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса

YandexBlog/0.99.101 (compatible; DOS3.30,B)
робот, индексирующий xml-файлы для поиска по блогам.

YandexSomething/1.0
робот, индексирующий новостные потоки партнеров Яндекс-Новостей.

Кроме того, в Яндексе работает несколько «простукивалок», которые проверяют доступность документов:

Yandex/2.01.000 (compatible; Win16; Dyatel; C)
«простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.

Yandex/2.01.000 (compatible; Win16; Dyatel; Z)
«простукивалка» Яндекс.Закладок. Ссылки на недоступные сайты помечаются серым цветом.

Yandex/2.01.000 (compatible; Win16; Dyatel; D)
«простукивалка» Яндекс.Директа. Она проверяет корректность ссылок из объявлений перед модерацией. Никаких автоматических действий не предпринимается.