Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Поисковые системы
Дата
USD/RUB58.7570
BTC/USD0.0000
Поисковые системы Поисковая оптимизация под Google, Yahoo, Bing и т.д.

Закрытая тема
Опции темы Опции просмотра
Старый 11.03.2012, 15:10   #1
1oma1ka
Юниор
 
Аватар для 1oma1ka
 
Регистрация: 31.01.2008
Сообщений: 20
Бабло: $4710
По умолчанию Подсеть 128.237.0.0/16 что это?

Народ, как думаете что это ?
Около 20% (146420 из 773748) хитов на доры приходится на подсеть 128.237.0.0/16 (128.237.0.0 - 128.237.255.255) по хуизу принадлежат United States Pittsburgh Carnegie Mellon University.
Хиты как с признаками бота, так и с признаками человека с поиска.
Вот несколько ярких примеров:
Цитата:
ip, agent, referer, date
128.237.157.146, BlackBerry8520/5.0.0.1036 Profile/MIDP-2.1 Configuration/CLDC-1.1 VendorID/121, http://www.google.com/m?q=para+comprar+viagra, 2012-03-07 05:14:50
128.237.157.146, DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html), , 2012-02-27 01:44:38
128.237.157.146, Java/1.6.0_26, , 2012-02-28 04:58:12
128.237.157.146, Mail.RU/2.0, , 2012-03-03 21:02:59
128.237.157.146, Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 1.1.4322; InfoPath.2), http://www.google.it/url?sa=t&rct=j&...DrEtu-7EUtjoTQ, 2012-03-08 09:12:28
128.237.157.146, Mozilla/5.0 (Windows NT 6.1) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11, http://www.google.de/url?sa=t&rct=j&...2tkNHEF_J9cVhQ, 2012-02-28 19:38:33
128.237.157.146, Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/534.51 (KHTML, like Gecko; Google Web Preview) Chrome/12.0.742 Safari/534.51, http://www.google.com/search, 2012-03-07 18:13:46
128.237.157.146, Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html), , 2012-02-29 06:07:48
128.237.157.146, Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html), , 2012-02-28 13:55:10
128.237.157.146, Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp), , 2012-03-07 19:44:07
128.237.157.146, ia_archiver (+http://www.alexa.com/site/help/webmasters; [email protected]), , 2012-03-10 00:41:34
128.237.157.146, ichiro/4.0 (http://help.goo.ne.jp/door/crawler.html), , 2012-03-07 23:28:12
128.237.157.146, psbot/0.1 (+http://www.picsearch.com/bot.html), , 2012-03-09 00:41:04
128.237.157.146, Yeti/1.0 (NHN Corp.; http://help.naver.com/robots/), , 2012-02-27 07:50:27
128.237.157.146, Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots), , 2012-02-27 22:45:03
Вот и думаю, что это и относить ли эту подсеть к ботам?

Последний раз редактировалось 1oma1ka; 11.03.2012 в 15:19.
1oma1ka вне форума  
Старый 11.03.2012, 18:01   #2
Oligarh
Ебланнед
 
Регистрация: 09.03.2012
Сообщений: 2
Бабло: $3230
По умолчанию

кто то парсит тебя
при парсинге случайный юзерагент
Oligarh вне форума  
Старый 11.03.2012, 18:26   #3
1oma1ka
Юниор
 
Аватар для 1oma1ka
 
Регистрация: 31.01.2008
Сообщений: 20
Бабло: $4710
ТС -->
автор темы ТС По умолчанию

Oligarh, не похоже на парсинг (кому надо с подсети Питтсбургского университета парсить доры).
Зачем былобы так извращаться, (подставлять агента одно, а вот такой реферер подделывать это бред):
Цитата:
128.237.157.146, Mozilla/5.0 (Windows; U; Windows NT 6.1; de; rv:1.9.2.13) Gecko/20101203 Firefox/3.6.13, ttp://www.google.de/url?sa=t&rct=j&q=Kamagra+aus+Holland&source=web&cd =1&ved=0CCoQFjAA&url=doorway&ei=T7hMT6-dHZDmtQaNleiPDw&usg=AFQjCNFP3qk9mdS_Y9xWLPfuCFc5zh Ljug, 2012-02-28 12:19:50
128.237.157.146, Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729; InfoPath.2), ttp://www.google.de/url?sa=t&rct=j&q=g%C3%BCnstige%20kamagra%20%20aus% 20deutschland&source=web&cd=40&ved=0CGYQFjAJOB4&ur l=doorway&ei=zSZNT9TiGIrusgbk2ImVDw&usg=AFQjCNFef_ xbAJa6egSfvzejewbu6Lm20Q, 2012-02-28 20:11:45
Это больше похоже на органическй трафик (реферер и кеи взаправдашние), но тогда почему с этого-же ип ходят и боты?
1oma1ka вне форума  
Старый 11.03.2012, 18:33   #4
dady
Senior Medved
 
Аватар для dady
 
Регистрация: 15.06.2008
Сообщений: 4,140
Бабло: $22472180
По умолчанию

стоит сокс бот на этом айпи.
dady вне форума  
Старый 11.03.2012, 18:36   #5
pesdexx
sysadm
 
Аватар для pesdexx
 
Регистрация: 28.12.2007
Сообщений: 589
Бабло: $101521
По умолчанию

а может и бот. я думаю googlebot не будет через сокс ходить...
Изображения
Тип файла: jpg Screen Shot 2012-03-11 at 16.35.09.jpg (17.0 Кб, 69 просмотров)
pesdexx вне форума  
Старый 11.03.2012, 18:39   #6
dady
Senior Medved
 
Аватар для dady
 
Регистрация: 15.06.2008
Сообщений: 4,140
Бабло: $22472180
По умолчанию

Цитата:
Сообщение от pesdexx Посмотреть сообщение
а может и бот. я думаю googlebot не будет через сокс ходить...
через сокс бот ходит парсер который меняет юзерагенты.
dady вне форума  
Старый 11.03.2012, 18:43   #7
pesdexx
sysadm
 
Аватар для pesdexx
 
Регистрация: 28.12.2007
Сообщений: 589
Бабло: $101521
По умолчанию

Цитата:
Сообщение от dady Посмотреть сообщение
через сокс бот ходит парсер который меняет юзерагенты.
идея в том что в кеше гугла стоит ip о котором идёт речь. два варианта - или этот phpinfo() выдавал левую инфу или бот действительно гугловский
pesdexx вне форума  
Старый 11.03.2012, 18:58   #8
Andy123
Senior Member
 
Аватар для Andy123
 
Регистрация: 19.08.2010
Сообщений: 580
Бабло: $95255
По умолчанию

гугля через проксю ходит ?


Я подобное постоянно вижу в логах айпишники другие но тоже едухи
Andy123 вне форума  
Старый 11.03.2012, 19:34   #9
1oma1ka
Юниор
 
Аватар для 1oma1ka
 
Регистрация: 31.01.2008
Сообщений: 20
Бабло: $4710
ТС -->
автор темы ТС По умолчанию

Тоже из кэша, для 128.237.157.147:


NetRange: 66.249.64.0 - 66.249.95.255
CIDR: 66.249.64.0/19
NetName: GOOGLE

Зачем гугл ходит через прокси в сети универа, и зачем через эти прокси проходит органический трафик ?
1oma1ka вне форума  
Старый 11.03.2012, 19:43   #10
Лорд боксер
Ебланнед
 
Регистрация: 11.12.2011
Сообщений: 98
Бабло: $33340
По умолчанию

Я там дор делал когда-то, если не ошибаюсь.
Лорд боксер вне форума  
Закрытая тема



Опции темы
Опции просмотра