На сплоги напали боты

[Diplomat]

User-Agent: FPLinkChecker/1.2 ебет нереально, аж БД со статой переодически отваливается. Резать\не резать? Что за зверь? Кто сталкивался?

[Drg]

Сделай в robots.txt:
Crawl-Delay: 30
задержка в 30 сек, нормальные боты ее понимают.
А твоего бы я порезал или бы влез в код сплога и поставил бы задержку на отдачу страницы секунды в 3.

[benzole]

http://user-agent-string.info/?Fuas=...action=analyze

если сайт не врёт - чекер битых ссылок.
но возможно это заспуфленый юзер-агент.

[Diplomat]

Просто у меня сплоги плотно с социалками завязаны, поэтому много разных ходит. Ну этот чет борзеет) Убил уже
.htaccess

RewriteCond %{HTTP_USER_AGENT} ^FPLinkChecker
RewriteRule ^(.*)$ http://127.0.0.1/

[chesser]

я если сомневаюсь, то режу скорость nginx'ом
но чаще отворот поворот на 444 ошибку

Сообщение от Diplomat

RewriteRule ^(.*)$ http://127.0.0.1/

это что за пиздец?

[Diplomat]

Это редир бота на локалхост, чтоб сам себя дрючил

[chesser]

Сообщение от Diplomat

Это редир бота на локалхост, чтоб сам себя дрючил

а, теперь понял

[xanxy]

нужно тогда [r=301,nc] дописать, а так вроде как ты сам себя дрочишь

[Diplomat]

Сообщение от xanxy

нужно тогда [r=301,nc] дописать, а так вроде как ты сам себя дрочишь

Все ок, проверял.

[chesser]

Сообщение от Diplomat

Все ок, проверял.

а проверь еще раз

и если уж апач, то вот топик с примерами правильной обработки ботов:
http://www.gofuckbiz.com/showthread.php?t=26545

SetEnvIfNoCase вместо RewriteRule