|
| Дата |
|
USD/RUB | 88.4375 | BTC/USD | 67828.5337 |
|
|
|
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии. |
15.07.2012, 21:25
|
#1
|
Senior Member
Регистрация: 01.10.2010
Адрес: https://bankle.ru/
Сообщений: 1,136
Бабло: $306180
|
Чем массово проверить ТИЦ?
подскажите сервис для проверки тица доменов массово
|
|
|
15.07.2012, 21:56
|
#2
|
Senior Member
Регистрация: 04.09.2007
Сообщений: 1,261
Бабло: $254000
|
массово- это несколько сотен? или несколько сотен К?
если первое, то _http://www.cy-pr.com/tools/masscheck/
второе - софтом, например, фришным Datacol SEO
__________________
Апарсер охрененен
|
|
|
15.07.2012, 23:21
|
#3
|
Senior Member
Регистрация: 17.02.2011
Сообщений: 153
Бабло: $26940
|
CheckParams, бесплатно, очень сильно массово. Если надо именно сервис - могу сделать выборку.
|
|
|
16.07.2012, 01:31
|
#4
|
Advanced member
Регистрация: 04.05.2007
Сообщений: 4,320
Бабло: $458855
|
пользовался raskruty.ru/tools/cy/ кажись до 1000 урлов разом, сейчас зашел Авира кричит что там какая то сингатура, чего то..
|
|
|
16.07.2012, 02:29
|
#5
|
Senior Member
Регистрация: 11.02.2010
Сообщений: 928
Бабло: $176835
|
checkparams! Миллионами можно проверять.
|
|
|
16.07.2012, 02:32
|
#6
|
Go Fuck West
Регистрация: 07.05.2011
Адрес: .Net
Сообщений: 1,203
Бабло: $245620
|
Есть до 1-2К, то сеоквейком можно, там есть функция Check/Compare urls and domains
|
|
|
16.07.2012, 11:34
|
#7
|
Yea!
Регистрация: 15.02.2008
Сообщений: 2,319
Бабло: $313955
|
с последнего апдейта апарсер умеет чекать тиц, с его скоростями думаю другие тулзы не сравнятся.
__________________
|
|
|
16.07.2012, 11:36
|
#8
|
Senior Member
Регистрация: 17.02.2011
Сообщений: 153
Бабло: $26940
|
Цитата:
Сообщение от Tosser
с последнего апдейта апарсер умеет чекать тиц, с его скоростями думаю другие тулзы не сравнятся.
|
Если не секрет - какие скоростя?
|
|
|
16.07.2012, 13:16
|
#9
|
Senior Member
Регистрация: 23.10.2007
Сообщений: 258
Бабло: $43299
|
Цитата:
Сообщение от mlu
Если не секрет - какие скоростя?
|
ща померил - около 15к\мин в 500 потоков без прокси
|
|
|
16.07.2012, 13:23
|
#10
|
Senior Member
Регистрация: 17.02.2011
Сообщений: 153
Бабло: $26940
|
Цитата:
Сообщение от Forbidden
ща померил - около 15к\мин в 500 потоков без прокси
|
Пора заняться оптимизацией чекпарамс, конкуренты на пятки наступают.
У меня выходит около 5000 в секунду, правда, потоков 1000. Входящий траффик порядка 87 мегабит, так медленно только из-за 100% нагрузки на процессор, он очень слабый.
Код:
Threads: 1000/1000, speed: 5274.16 urls/sec., work time: 91 sec., urls processed: 447805, urls failed: 0, urls remains: 4310716, checking now: 1000, exp: 2012-07-16 10:58:57
Yandex-TIC: Checks: 447805, successful: 447805, failed: 0, bans: 0 ***NOT USING PROXIES***
Script engine (_settings): queued tasks: 0, avg. speed: 0.00 t/s, tasks processed: 2, 209.40 us per task, objects: 0
Traffic incoming: 10880804 Bps, outgoing: 6236579 Bps; CPU usage total: 100.00%, program: 78.28%
Memory: working set: 912437248, pagefile usage: 929529856, Handles: 5748
|
|
|
|