Страница 1 из 1

User-agent поисковых роботов (ботов, пауков)

Добавлено: 06 июл 2009, 19:47
4Minsk
User-agent (useragent) поисковых роботов (информация, посылаемая поисковыми роботами посещаемому серверу)

User-agent Alexa [Bot] - ia_archiver
User-agent Ask Jeeves [Bot] - Ask Jeeves
User-agent Baidu [Spider] - Baiduspider+(
User-agent Begun [Crawler] - Begun Robot Crawler
User-agent eBolot [WTF?] - eBolot
User-agent Exabot [Bot] - Exabot/
User-agent Google [Bot] - Googlebot
User-agent Google Mobile [Bot] - Googlebot-Mobile
User-agent Heritrix [Crawler] - heritrix/1.
User-agent HostTracker [Bot] - HostTracker.com
User-agent Ichiro [Crawler] - ichiro/
User-agent libwww-perl - libwww-perl
User-agent Majestic-12 [Bot] - MJ12bot/
User-agent MSN [Bot] - msnbot/
User-agent MSNbot Media - msnbot-media/
User-agent Nutch [Crawler] - Nutch
User-agent Rambler [Bot] - StackRambler
User-agent Sogou [Spider] - Sogou web spider
User-agent W3C CSS [Validator] - W3C_CSS_Validator
User-agent W3C Linkcheck [Validator] - W3C-checklink/
User-agent W3C MarkUp [Validator] - W3C_Validator
User-agent W3C mobileOK [Validator] - W3C-mobileOK
User-agent WebAlta [Bot] - WebAlta
User-agent Yahoo! [Bot] - Yahoo! Slurp
User-agent Yandex [Bot] - Yandex
User-agent Yanga [Bot] - Yanga WorldSearch
User-agent Сuill [Bot] - Twiceler-0.9

Список постоянно пополняется! Следите за обновлениями!

eBolot - WTF?

Добавлено: 31 июл 2009, 01:26
4Minsk
Кто вкурсе что за eBolot? Хотя бы разумные предположения...
Гуглил, яндексил - поиск результата недал... ребята на серче также разводят руками...