|
| Дата |
|
USD/RUB | 93.4409 | BTC/USD | 63172.6332 |
|
|
|
Поисковые системы Поисковая оптимизация под Google, Yahoo, Bing и т.д. |
11.03.2012, 15:10
|
#1
|
Юниор
Регистрация: 31.01.2008
Сообщений: 20
Бабло: $4710
|
Подсеть 128.237.0.0/16 что это?
Народ, как думаете что это ?
Около 20% (146420 из 773748) хитов на доры приходится на подсеть 128.237.0.0/16 (128.237.0.0 - 128.237.255.255) по хуизу принадлежат United States Pittsburgh Carnegie Mellon University.
Хиты как с признаками бота, так и с признаками человека с поиска.
Вот несколько ярких примеров:
Цитата:
ip, agent, referer, date
128.237.157.146, BlackBerry8520/5.0.0.1036 Profile/MIDP-2.1 Configuration/CLDC-1.1 VendorID/121, http://www.google.com/m?q=para+comprar+viagra, 2012-03-07 05:14:50
128.237.157.146, DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html), , 2012-02-27 01:44:38
128.237.157.146, Java/1.6.0_26, , 2012-02-28 04:58:12
128.237.157.146, Mail.RU/2.0, , 2012-03-03 21:02:59
128.237.157.146, Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 1.1.4322; InfoPath.2), http://www.google.it/url?sa=t&rct=j&...DrEtu-7EUtjoTQ, 2012-03-08 09:12:28
128.237.157.146, Mozilla/5.0 (Windows NT 6.1) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11, http://www.google.de/url?sa=t&rct=j&...2tkNHEF_J9cVhQ, 2012-02-28 19:38:33
128.237.157.146, Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/534.51 (KHTML, like Gecko; Google Web Preview) Chrome/12.0.742 Safari/534.51, http://www.google.com/search, 2012-03-07 18:13:46
128.237.157.146, Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html), , 2012-02-29 06:07:48
128.237.157.146, Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html), , 2012-02-28 13:55:10
128.237.157.146, Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp), , 2012-03-07 19:44:07
128.237.157.146, ia_archiver (+http://www.alexa.com/site/help/webmasters; [email protected]), , 2012-03-10 00:41:34
128.237.157.146, ichiro/4.0 (http://help.goo.ne.jp/door/crawler.html), , 2012-03-07 23:28:12
128.237.157.146, psbot/0.1 (+http://www.picsearch.com/bot.html), , 2012-03-09 00:41:04
128.237.157.146, Yeti/1.0 (NHN Corp.; http://help.naver.com/robots/), , 2012-02-27 07:50:27
128.237.157.146, Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots), , 2012-02-27 22:45:03
|
Вот и думаю, что это и относить ли эту подсеть к ботам?
Последний раз редактировалось 1oma1ka; 11.03.2012 в 15:19.
|
|
|
11.03.2012, 18:01
|
#2
|
Ебланнед
Регистрация: 09.03.2012
Сообщений: 2
Бабло: $3230
|
кто то парсит тебя
при парсинге случайный юзерагент
|
|
|
11.03.2012, 18:26
|
#3
|
Юниор
Регистрация: 31.01.2008
Сообщений: 20
Бабло: $4710
ТС -->
|
ТС
Oligarh, не похоже на парсинг (кому надо с подсети Питтсбургского университета парсить доры).
Зачем былобы так извращаться, (подставлять агента одно, а вот такой реферер подделывать это бред):
Цитата:
128.237.157.146, Mozilla/5.0 (Windows; U; Windows NT 6.1; de; rv:1.9.2.13) Gecko/20101203 Firefox/3.6.13, ttp://www.google.de/url?sa=t&rct=j&q=Kamagra+aus+Holland&source=web&cd =1&ved=0CCoQFjAA&url=doorway&ei=T7hMT6-dHZDmtQaNleiPDw&usg=AFQjCNFP3qk9mdS_Y9xWLPfuCFc5zh Ljug, 2012-02-28 12:19:50
128.237.157.146, Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729; InfoPath.2), ttp://www.google.de/url?sa=t&rct=j&q=g%C3%BCnstige%20kamagra%20%20aus% 20deutschland&source=web&cd=40&ved=0CGYQFjAJOB4&ur l=doorway&ei=zSZNT9TiGIrusgbk2ImVDw&usg=AFQjCNFef_ xbAJa6egSfvzejewbu6Lm20Q, 2012-02-28 20:11:45
|
Это больше похоже на органическй трафик (реферер и кеи взаправдашние), но тогда почему с этого-же ип ходят и боты?
|
|
|
11.03.2012, 18:33
|
#4
|
Senior Medved
Регистрация: 15.06.2008
Сообщений: 4,146
Бабло: $22479945
|
стоит сокс бот на этом айпи.
|
|
|
11.03.2012, 18:36
|
#5
|
sysadm
Регистрация: 28.12.2007
Сообщений: 588
Бабло: $101521
|
а может и бот. я думаю googlebot не будет через сокс ходить...
|
|
|
11.03.2012, 18:39
|
#6
|
Senior Medved
Регистрация: 15.06.2008
Сообщений: 4,146
Бабло: $22479945
|
Цитата:
Сообщение от pesdexx
а может и бот. я думаю googlebot не будет через сокс ходить...
|
через сокс бот ходит парсер который меняет юзерагенты.
|
|
|
11.03.2012, 18:43
|
#7
|
sysadm
Регистрация: 28.12.2007
Сообщений: 588
Бабло: $101521
|
Цитата:
Сообщение от dady
через сокс бот ходит парсер который меняет юзерагенты.
|
идея в том что в кеше гугла стоит ip о котором идёт речь. два варианта - или этот phpinfo() выдавал левую инфу или бот действительно гугловский
|
|
|
11.03.2012, 18:58
|
#8
|
Senior Member
Регистрация: 19.08.2010
Сообщений: 578
Бабло: $95255
|
гугля через проксю ходит ?
Я подобное постоянно вижу в логах айпишники другие но тоже едухи
|
|
|
11.03.2012, 19:34
|
#9
|
Юниор
Регистрация: 31.01.2008
Сообщений: 20
Бабло: $4710
ТС -->
|
ТС
Тоже из кэша, для 128.237.157.147:
NetRange: 66.249.64.0 - 66.249.95.255
CIDR: 66.249.64.0/19
NetName: GOOGLE
Зачем гугл ходит через прокси в сети универа, и зачем через эти прокси проходит органический трафик ?
|
|
|
11.03.2012, 19:43
|
#10
|
Ебланнед
Регистрация: 11.12.2011
Сообщений: 98
Бабло: $33340
|
Я там дор делал когда-то, если не ошибаюсь.
|
|
|
|