Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB58.7960
BTC/USD0.0000
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 15.02.2013, 12:05   #1
iloveadult
Senior
 
Аватар для iloveadult
 
Регистрация: 24.09.2008
Сообщений: 2,727
Бабло: $519695
По умолчанию Массовая проверка индекса в Яндексе

Только нужно не доменов, а отдельных страниц, т.е. есть список вида:
1.com/bla
2.ru/opa.html
3.org/gofuck

и т.д. нужно проверить именно эти страницы на наличие в индексе яндекса, а не самих доменов, да и этих страниц десятки К. Как?
чекпарамс попробовал - вроде не подходит, т.к. чекает домен, а не страницу.
спс
__________________
Top Links - качественные ссылки для Ваших сайтов
[UA] Моментальный вывод WM и других валют с лучшим курсом 24/7!
iloveadult вне форума  
Старый 15.02.2013, 12:41   #2
Strikelol
Senior Member
 
Регистрация: 31.03.2011
Сообщений: 3,056
Бабло: $632595
По умолчанию

такую првоерку делать так нужно
http://yandex.ua/yandsearch?text=sit...ld=ua&lr=10363

И делать проверку на результат в первой строке. На твоем месте бы я обратился к lorien, напишут скрипт по твоему тз.
Strikelol вне форума  
Старый 15.02.2013, 12:44   #3
iloveadult
Senior
 
Аватар для iloveadult
 
Регистрация: 24.09.2008
Сообщений: 2,727
Бабло: $519695
ТС -->
автор темы ТС По умолчанию

Strikelol, ну да. что-то слабо вериться, что нет решения публичного. подождем ещё )
"Лориен" - это какой-то новый тренд типа "Дигг и $400" ? ))
__________________
Top Links - качественные ссылки для Ваших сайтов
[UA] Моментальный вывод WM и других валют с лучшим курсом 24/7!
iloveadult вне форума  
Старый 15.02.2013, 12:56   #4
Strikelol
Senior Member
 
Регистрация: 31.03.2011
Сообщений: 3,056
Бабло: $632595
По умолчанию

ну скрипт простой, конкретно под твою задачу. Его ученики бы написали тебе недорого - запустил его и забыл.
Strikelol вне форума  
Старый 15.02.2013, 14:30   #5
inkubus
Senior Member
 
Аватар для inkubus
 
Регистрация: 11.02.2010
Сообщений: 935
Бабло: $176795
По умолчанию

если ссылок много то нужны будут прокси, а для яндекса хорошие прокси.

можно и с помощью чекпарамс чекать если немного допилить скрипт.
inkubus вне форума  
Старый 15.02.2013, 14:37   #6
MetroJazz
Senior Member
 
Аватар для MetroJazz
 
Регистрация: 19.01.2011
Сообщений: 327
Бабло: $48850
По умолчанию

Яндекс без прокси, с задержкой в 1 сек, отдает примерно 1к запросов. Дальше капча и после ввода, примерно еще +200 запросов можно отправить.

Паблик прокси под это дело не идут
MetroJazz вне форума  
Старый 15.02.2013, 15:16   #7
fromnull
Senior Member
 
Аватар для fromnull
 
Регистрация: 03.05.2009
Сообщений: 680
Бабло: $138575
По умолчанию

http://topperharley.ru/2009/10/programma-ucheta-sajtov/ не?
fromnull вне форума  
Старый 15.02.2013, 16:10   #8
kip
Senior Member
 
Аватар для kip
 
Регистрация: 06.05.2007
Сообщений: 473
Бабло: $67595
Отправить сообщение для kip с помощью ICQ
По умолчанию

1) Хрфером такие проблемы можно решить (после прогона проанализировав базу)
2) Действительно написать скрипт с проксями
3) Могу я отчекать через Yandex.XML
__________________
Пишу зло на PHP, с цмс не работаю
Мы немного упоролись!
kip вне форума  
Старый 15.02.2013, 16:21   #9
iloveadult
Senior
 
Аватар для iloveadult
 
Регистрация: 24.09.2008
Сообщений: 2,727
Бабло: $519695
ТС -->
автор темы ТС По умолчанию

прокси есть, не проблема
все так сложно, пиздец) я просто напросто хотел проверить какие акки тви есть в индексе, чтоб проспамить только по ним, но да хуй с ним, проще будет по всей базе пульнуть)
__________________
Top Links - качественные ссылки для Ваших сайтов
[UA] Моментальный вывод WM и других валют с лучшим курсом 24/7!
iloveadult вне форума  
Старый 15.02.2013, 16:25   #10
kip
Senior Member
 
Аватар для kip
 
Регистрация: 06.05.2007
Сообщений: 473
Бабло: $67595
Отправить сообщение для kip с помощью ICQ
По умолчанию

Берешь Хрефер, заряжаешь в него ссылки вида:
Цитата:
site:twitter.com/MedvedevRussia
Глубина парсинга - 1 страница.

На выходе получаешь список. Потом берешь фильтр баз хрумера - чистишь акки так, чтобы остались только те, которые есть в твоей начальной базе.
Делов на пару минут
__________________
Пишу зло на PHP, с цмс не работаю
Мы немного упоролись!
kip вне форума  
Закрытая тема



Опции темы
Опции просмотра