Бан ТДС в гугле и фф ( v.3 )

[mdS]

Всем привет.
Вновь хотел бы поднять вопрос на счет бана ТДС, только теперь немного в другом ракурсе.

Раньше я всегда думал, что бан наступает из за того, что после тдс траф идет на лендинг (я думаю все меня поняли) и в прошлой теме мне и многим другим подсказали решение как замаскировать эту взаимосвязь, но я столкнулся с немного другим симптомом.
Бан наступает за счет соотнесения моих доров и самой тдс, тоесть палевным фактором является сам дор. Причем в последнее время бан наступает крайне быстро ( в течении 2-3 дней ).

С дора на тдс редиректится только уник с рефером гугла, но само собой это позволяет боту пробиратся.
Может кто сталкивался с такой проблемой? Может кто подскажет какого именно рефера надо лочить, если конечно его можно выделить из общего потока.

[Joyen]

2capitan, плз, если есть заделись листом гуглоайпишникоф

[capitan]

пока такой лист ботов собрал (это те которые без юзерагента ходят)

65\.52\.\d+\.\d+
65\.53\.\d+\.\d+
65\.54\.\d+\.\d+
65\.55\.\d+\.\d+
66\.235\.124\.132
78\.137\.163\.133
187\.26\.162\.141
66\.249\.64\.\d+
66\.249\.65\.\d+
66\.249\.66\.\d+
66\.249\.67\.\d+
66\.249\.68\.\d+
66\.249\.69\.\d+
66\.249\.7\d\.\d+
66\.249\.8\d\.\d+
66\.249\.91\.\d+
66\.249\.92\.\d+
66\.249\.93\.\d+
66\.249\.94\.\d+
66\.249\.95\.\d+

[Joyen]

На самом деле я вижу какие варианты

1. Бот приходит на дор, расшифровывает js. Видит, что существует редирект на некий домен. Когда таких редиректов находит порядочно -- считает это заражением. При этом бот не сливается и вообще ничего не выполняет. Опирается лишь на результат парсинг-анализа.

Решение: палить его по айпи, либо по отсутствию реферера с поисковика и не показывать ему js редирект средставми php.

Минусы решения: реферера он может подставить, айпи может тоже не быть в базе. мб кто-то предложит вариант надежнее?)

2. Бот приходит на дор эмулируя серфера. Таким образом он подставляет
реферер и выполняет редирект, "сливаясь" на ТДС. Тут возможна, пара подвариантов.

а) Реферер, который он подставляет равен кусочку урла самого дорвея
Решение: блочить такие рефереры на доре средствами пхп, не давая слиться на ТДС

б) Реферер, который он подставляет -- случайная херня, по которой его не задетектишь. Ему же не нужна верность реферера, верно? Он может поставить хоть google.com/search?q=lalalala. Пока у меня только одно решение
блочить бота по айпи. Надежность решения вызывает сомнения.

Вывод отсюда: разбирать серфера с помощью пхп. Блочить и скрывать редирект для:
1 все что в подсетях гугла.
2 все что без реферера
3 все что с "сомнительным" реферером.

Возможно, эти меры отсекут этих гавнюков.

Если же их механизмы еще серьезнее(например подставляется человеческий реферер и работа идет с чистых ипов), то нужны
1 либо более совершенные методы определения "человечности" юзера.
2 либо более совершенные методы слива трафа, дабы у гугла не было подозрений о том, что редирект здесь -- инороден.
3 либо вообще не сливать, другие варианты

[Joyen]

2capitan, спасибо, попробуемс

[Hector]

У меня ниче не палиться, не юзаю редирект. раньше палилось когда кодеки пиздячили жестко а щас пох, всё живое

[mdS]

посмотрев внимательно стату по реферам выделил заходы по кею состоящему из домена где дор и темы дора через пробел

это явно бот, вопрос в нем ли дело

Сообщение от Hector

У меня ниче не палиться, не юзаю редирект. раньше палилось когда кодеки пиздячили жестко а щас пох, всё живое

на что сливаешь собственно ?

[Hector]

mdS свой ленд как правило, просто отказался от редиректов с доров, ресурсы живут дольше

[mdS]

Сообщение от Hector

mdS свой ленд как правило, просто отказался от редиректов с доров, ресурсы живут дольше

понятно, тоже вариант поидее.

[mdS]

а может тдс банится если траф с нее не сливается на софт, сплойт, кодек и тд. ?

[qq-]

а встречал кто-нибудь хиты с рефами что-то типа
"google.com/search?hl=en&q=домен+название_страницы" ?