Создать ответ 
Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Автор Сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #41
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Сегодня наш список непонятных ботов пополняют сразу два бота:
Первый:
User-Agent: animalstxt.org/bot (_http://animalstxt.org/)
IP: 89.107.184.29
Пытался обратиться к файлу animals.txt, которого на нашем сайте никогда и не было.

Второй:
User-Agent: MLBot (_www.metadatalabs.com/mlbot)
IP: 66.219.58.41
09.07.2012 19:21:28
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #42
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Еще один странный бот, который зашел под прокси.

User-Agent: Medusa/1.0 (OSPM; 8-bit)
IP: 10.35.3.69, 213.160.132.68

И еще просто достал бот Java/1.7.0_05.
Банил и по IP и по User-Agent через .htaccess, а он все равно появляется. Может .htaccess научились обходить? Evil
19.07.2012 18:42:13
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #43
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
А количество различных ботов все растет.

Вот следующий:
User-Agent: My Nutch Spider/Nutch-1.5
IP: 184.73.9.68
28.07.2012 14:45:49
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #44
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Продолжаем пополнять список.

User-Agent: Mozilla/5.0 (compatible; Peepowbot/1.0; +http://www.peepow.com/bot.php)
IP: 200.142.246.10
02.08.2012 20:20:55
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #45
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Следующий бот:

User-Agent: checks.panopta.com
Зашел сразу с 3 разных IP: 50.116.55.72, 96.126.126.251 и 209.236.69.52
03.08.2012 18:11:51
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #46
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Сегодня был замечен очень настырный бот, за что он и был забанен нашим скриптом автобана за слишком частые обращения к сайту (а точнее только к главной страничке).
User-Agent: bot-pge.chlooe.com/1.0.0 (+http://www.chlooe.com/) и SEOstats 2.1.0
IP: 88.190.40.44

Далее показался еще один бот:
User-Agent: Mozilla/5.0 (compatible; Ralocobot; +http://raloco.com/bot)
IP: 46.109.202.135
10.08.2012 17:28:53
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #47
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Вот только что зашел бот Mediapartners-Google.

User-Agent: Mediapartners-Google
IP: 217.79.179.67

Что странно, так это то, что наш сайт не зарегистрирован в рекламной сети AdSense, а бот приходит (причем не на главную страницу).
19.08.2012 22:07:30
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #48
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Вот объявился поисковый бот Голландской поисковой системы (так сказано у них на сайте). Scratch
User-Agent: Mozilla/5.0 (compatible; WebNL; +http://www.web.nl/webmasters/spider.html)
IP: 141.105.120.151

И еще бот с непонятным предназначением:
User-agent: Mozilla/5.0 (compatible; Genieo/x.x _http://www.genieo.com/webfilter.html)
IP: 95.25.224.94
20.08.2012 18:46:00
Найти все сообщения Цитировать это сообщение
Admin Не на форуме
Верховный
Главнокомандующий
(Administrator)
*

Сообщений: 2,431
У нас с: Aug 2011
Сообщение: #49
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Какой-то новый поисковый бот.

User-Agent: Mozilla/5.0 (compatible; 008/0.83; _http://www.80legs.com/webcrawler.html)
IP: 83.149.9.22 и 123.191.29.156

Судя по описанию со странички из User-Agent следует, что этот бот является распределенным и имеет несколько тысяч IP адресов, так что нет смысла пытаться его забанить по IP.
31.08.2012 17:34:55
Найти все сообщения Цитировать это сообщение
Inlifeuser Не на форуме
Рядовой
*

Сообщений: 3
У нас с: Sep 2012
Сообщение: #50
RE: Что за боты NetcraftSurveyAgent, Ezooms/1.0 и TOP.NET.RU BOT?
Ничего себе сколько ботов.
Мне вообще Ezooms задолбал и забанил у себя его.
А про Mozilla/5.0 (compatible; 008/0.83; _http://www.80legs.com/webcrawler.html) вообще интересно что с беспроводного модема зашел с IP 83.149.9.22 (IP МегаФона), наверно это бот-троян устанавливающийся на компьютер.
(Последний раз сообщение было отредактировано 10.09.2012 в 01:43:09, отредактировал пользователь Inlifeuser.)
10.09.2012 01:41:17
Найти все сообщения Цитировать это сообщение
Создать ответ 


Переход:


Пользователи просматривают эту тему: 1 Гость(ей)


LiveInternet
© Copyright 2011-2024 by UsefulScript.ru