Archive for декабря 2006

You are browsing the archives of 2006 Декабрь.

Роботы Яндекса

декабря 12, 2006 | О работе | Комментариев: 2
Popularity: 32%

Яндекс использует несколько видов роботов с разными функциями. Идентифицировать их можно по строке User-agent:

Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот
Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок
Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов
Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»
Yandex/1.03.000 [...]

2 Comments | Read full story »

Previous Stories