Как прогнать роботов?

[Maximus325]

С сутры. А то у меня в безредиректных дорах стоят прямые ссылки на сутру - они гады и лезут туда особо массово.

[Nou]

Maximus325, символ ^ в начале и $ в конце означает, что "Mozilla/4.05 [en]" или "Mozilla/4.0" - это весь юзерагент, который тебе передаётся. Не у ботов таких не бывает.

[Maximus325]

Аа, понял, тогда спасибо)

[Hector]

Сообщение от pepper

У меня так стоит в акцессе

PHP код:

rewritecond %{http_user_agent} (googlebot|slurp|spider|zyborg/1|ask\ Jeeves|askjeeves|activetouristbot|jemmathetourist|agadine3|becomebot|clustered-search-bot|msiecrawler|freefind|galaxy|genieknows|ingrid|grub-client|mojeekbot|naverbot|netnose-crawler|onetszukaj|prassosunner|asterias\ Crawler|t-h-u-n-d-e-r-s-t-o-n-e|georgethetouristbot|voilabot|vagabondo|fantombrowser|stealthbrowser|cloakbrowser|fantomcrew\ Browser|girafabot|indy\ Library|intelliseek|zealbot|windows\ 95|^mozilla/4\.05\ \[en\]$|^mozilla/4\.0$) [nc] 
Rewriterule ^(.*)$ - [f] 


Slurp тоже фильтруется

Это будет работать можно юзать смело?

[pepper]

Сообщение от hectorix

Это будет работать можно юзать смело?

Вроде работает. Сам когда-то нашел эту схему вроде на кликовском форуме.
Если мало ботов, можете добавить отсюда http://user-agents.org/

[Hector]

Сообщение от pepper

Вроде работает. Сам когда-то нашел эту схему вроде на кликовском форуме.
Если мало ботов, можете добавить отсюда http://user-agents.org/

попробовал, не работает оно =) ил только у меня? Вопрос открыт.

[Maximus325]

Я не пробовал, мне интуитивно не нравится чем-то

[Grut]

Сообщение от Hector

попробовал, не работает оно =) ил только у меня? Вопрос открыт.

Такая же фигня. Вопрос открыт.

[JackSoft]

Возьмите .htaccess с моего мода - там я постоянно обновляю фильтры

[Grut]

Сообщение от JackSoft

Возьмите .htaccess с моего мода - там я постоянно обновляю фильтры

Спасибо. Уже использую такой способ. Однако, минус такого способа в том, что он игнорирует ботов, которые маскируются под Mozilla. То есть, бота "MLBot (www.metadatalabs.com/mlbot)" он блокирует, а бота "Mozilla/5.0 (compatible; ScoutJet; +http://www.scoutjet.com/)" пропускает

[exspam]

а как можно их по ИПу отправлять на ... ? кто нибудь нашел решение ?