Есть маленькая базейка на полтора гига
, урлы разного вида. Но нужно отобрать урлы по такому принципу
Если в урле после имени домена есть
/wordpress/
/blog/
/wp/
Складывать такие строки в файл вида (слеш в конце)
http://site1.com/wordpress/
http://site2.com/blog/
http://site3.com/wp/
И если такие строки есть, то рядом ложить просто домен
http://site1.com/wordpress/
http://site1.com/
http://site2.com/blog/
http://site2.com/
http://site3.com/wp/
http://site3.com/
Если в урле нет
/wordpress/
/blog/
/wp/
то просто обрезать строки до (слеш в конце)
http://site1.com/
http://site2.com/
http://site3.com/
Желательно на баше, но можно на пхп или чём другом.
Ну и так же надо всю эту канитель проверить на 200ОК, на баше это как реалозовать можно? или любым другим вариантом?
Проблемы с чеком объемных баз
Линейный вид
