поисковики

Поисковые боты. User agents.

web-crawler

Список поисковых ботов и соответствующих им HTTP User Agent`s.

Subscribe to RSS - поисковики