Кто этот сотона и что с ним делать? - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB90.4082
BTC/USD69392.4450
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 11.02.2023, 09:06   #1
DimaX
Senior Member
 
Регистрация: 19.04.2007
Сообщений: 2,393
Бабло: $314345
По умолчанию Кто этот сотона и что с ним делать?

На один из моих полностью бесплатных онлайн сервисов повадился ходить какой-то тип, который парсит результаты работы сервиса в гигантских масштабах.

Проблема в том, что для работы сервиса юзаются квоты апи ютуба, а они, мягко говоря, не безлимитные, и если их обычно нормально хватает для адекватных юзеров, то когда наваливаются парсеры этого чувака, суточная квота заканчивается буквально за пару часов и пиздец всему сервису.

Сейчас ситуация такая.

Чисто из-за этого одного чувака пришлось прикрутить к сервису рекапчу Гугла - его это остановило на время, но теперь он без проблем шлет успешную рекапчу в многопоточном режиме.

Банить по ip не вариант - я сейчас проанализировал логи только его запросов всего лишь за неполный 1 день и там... порядка 3500 разных ip из которых всего около 20 юзались 2 раза, а все остальные лишь 1 раз, т.е. он буквально на каждый запрос берет новый ip!

Вопроса, собственно, два:

1) Кто вообще такой этот сотона, который имеет, похоже, бесконечные ip для парсинга (ботнет какой-то огромный или что?) + изи шлет гугловскую рекапчу (это явно не обработка людьми за оплату, это не имело бы никакого коммерческого смысла, т.к. он шлет десяток тысяч запросов в сутки), ее разве можно автоматически уже как-то обходить?

2) Может у кого есть из практики какие-то советы, что умного предпринять для автоматической защиты от него, не заебывая нормальных юзеров при этом?

P.S. Простенькую защиту на JS я сделал, но она работает недолго, когда он видит, что парсинг встал, заходит, разбирает защиту, вносит изменения в скрипты, и моя квота вновь начинает улетать. Соответственно, это вариант, если все время постоянно следить за этим, а у меня и других дел полно, и вообще заебал он уже конкретно в целом, нужно решение, чтобы как-то раз и навсегда уже это победить
DimaX вне форума  
Старый 11.02.2023, 09:55   #2
Skyworker
Senior Member
 
Регистрация: 25.12.2013
Сообщений: 6,586
Бабло: $785925
По умолчанию

Xevilу ботмастера привет! Судя, по оснастке и подготовке этого спамера проще его как-то найти и в реале замочить
__________________
Надежный и отзывчивый VPS хостинг для серьезных проектов
Проверенная годами пуш партнерка с ежедневными выплатами
Skyworker вне форума  
Старый 11.02.2023, 14:05   #3
Dor
Senior Member
 
Регистрация: 24.01.2013
Сообщений: 1,562
Бабло: $213455
По умолчанию

а если рандомно менять защиту ? Усложни ему задачку, Пусть потрудится ))
Эти айпихи по хуиз или реверс айпи как то палятся ? Может провайдер будет хостинг или имя в хостах .
Dor вне форума  
Старый 11.02.2023, 14:27   #4
Final Fantasy
private.
 
Аватар для Final Fantasy
 
Регистрация: 30.04.2008
Сообщений: 3,866
Бабло: $462940
По умолчанию

Dor, да просто резидентские проксики
Final Fantasy вне форума  
Старый 11.02.2023, 15:10   #5
Moroz
Get lost
 
Аватар для Moroz
 
Регистрация: 30.01.2014
Сообщений: 466
Бабло: $61496
По умолчанию

Скорее всего это Апарсер с Хевилом. Cloudflare по идее должен справится.
Moroz вне форума  
Старый 11.02.2023, 15:30   #6
Dadee
Шоколатье
 
Аватар для Dadee
 
Регистрация: 20.04.2007
Сообщений: 5,973
Бабло: $726105
По умолчанию

плюсану, это именно ксевил и апарсер, пул проксей там огромный )
отчасти помогает bot fighting mode клауда но это не панацея
Dadee вне форума  
Старый 11.02.2023, 18:51   #7
Dor
Senior Member
 
Регистрация: 24.01.2013
Сообщений: 1,562
Бабло: $213455
По умолчанию

Цитата:
Сообщение от Final Fantasy Посмотреть сообщение
Dor, да просто резидентские проксики
этих банить сложно. если страна нужна.
тогда защиту можно попробовать менять рандомно
Dor вне форума  
Старый 11.02.2023, 18:52   #8
IDL
Senior Member
 
Регистрация: 26.04.2014
Сообщений: 9,260
Бабло: $1187275
По умолчанию

Цитата:
Сообщение от Final Fantasy Посмотреть сообщение
Dor, да просто резидентские проксики
Не, слишком много ip, резидентские сильно дорогие
Максимум мобильные со сменой ip
__________________
Ахуенный КОНВЕРТ ФАРМЫ WORLDWIDE. забираем свежие инвайты на http://myinvites.xyz/ - Visa + MC. +50% в первую неделю.
IDL на форуме  
Старый 11.02.2023, 19:48   #9
веломан
сыроед
 
Аватар для веломан
 
Регистрация: 01.10.2015
Сообщений: 15,873
Бабло: $1862475
По умолчанию

возможно эти что-то смогут предложить

рандомно менять JS-скрипт - тоже первое, что мне в голову пришло
хуле если работает, надо усложнять
веломан вне форума  
Старый 11.02.2023, 20:00   #10
Юзлес конч
Иже херувимы (паки, паки)
 
Аватар для Юзлес конч
 
Регистрация: 31.12.2020
Адрес: ул. Ерепетная, дом 8
Сообщений: 393
Бабло: $81260
По умолчанию

веломан, это он его и парсит, долпаепа кусок )

ТСу просто лень самому копать.
сиди разбирайся - читай новости, ищи инфу, всё на поверхности.
__________________
РосСпамИздат 2007-2023 Создаю коморбидные сетки сайтов, доров, блогов на уникальном движке Работаем!
Юзлес конч вне форума