Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB58.7930
BTC/USD0.0000
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 18.09.2014, 18:26   #1
atrius
Senior Member
 
Аватар для atrius
 
Регистрация: 11.06.2008
Сообщений: 136
Бабло: $34524
По умолчанию Выдернуть все страницы сайта

А подскажет кто-нибудь сервис, который сможет показать все, ну или близко к этому, страницы сайта, которые в индексе у гугля?
Должно же быть такое в природе
atrius вне форума  
Старый 18.09.2014, 18:58   #2
directed
Senior Member
 
Аватар для directed
 
Регистрация: 12.11.2009
Адрес: href
Сообщений: 936
Бабло: $137450
Отправить сообщение для directed с помощью Skype™
По умолчанию

site:yourdomain.com в гугле вбей
directed вне форума  
Старый 18.09.2014, 20:30   #3
atrius
Senior Member
 
Аватар для atrius
 
Регистрация: 11.06.2008
Сообщений: 136
Бабло: $34524
ТС -->
автор темы ТС По умолчанию

чуть сложнее надо =))
нужны сайты где 100-250к страниц в индексе
atrius вне форума  
Старый 18.09.2014, 20:33   #4
lisa99
Member
 
Аватар для lisa99
 
Регистрация: 29.01.2009
Сообщений: 45
Бабло: $7105
По умолчанию

тогда только программно. Типа content downloader и иже с ним.
или писать парсер. и ..на больших сайтах бывает защита от массового копирования, т.е. задача может стать нетривиальной (недешевой)
халявы, скорее всего не будет.
lisa99 вне форума  
Старый 18.09.2014, 20:37   #5
atrius
Senior Member
 
Аватар для atrius
 
Регистрация: 11.06.2008
Сообщений: 136
Бабло: $34524
ТС -->
автор темы ТС По умолчанию

мне контент не нужен
мне урлы нужны
atrius вне форума  
Старый 18.09.2014, 21:18   #6
tmamedov
Member
 
Аватар для tmamedov
 
Регистрация: 14.07.2013
Сообщений: 48
Бабло: $26075
По умолчанию

SEO Frog Spider, юзер агента поставь в настройках от ПС и пройдись по всему сайту.
tmamedov вне форума  
Старый 19.09.2014, 01:40   #8
atrius
Senior Member
 
Аватар для atrius
 
Регистрация: 11.06.2008
Сообщений: 136
Бабло: $34524
ТС -->
автор темы ТС По умолчанию

мужики, я понимаю что можно написать парсер и пробежаться по всему сайту, но нужен именно сервис.
вы поймите, что гораздо удобнее просто заплатить денюжку, вбить интересующий меня урл и получить результат
а ждать пока софт обойдет кучу нужных сайтов - это немного не то
atrius вне форума  
Старый 19.09.2014, 01:54   #9
16021988
Member
 
Аватар для 16021988
 
Регистрация: 21.05.2010
Сообщений: 83
Бабло: $18990
По умолчанию

Цитата:
Сообщение от atrius Посмотреть сообщение
мужики, я понимаю что можно написать парсер и пробежаться по всему сайту, но нужен именно сервис.
вы поймите, что гораздо удобнее просто заплатить денюжку, вбить интересующий меня урл и получить результат
а ждать пока софт обойдет кучу нужных сайтов - это немного не то
Че ты паришься? Попроси любого, у кого есть парсер, если самому нет нужды покупать. 10$ + 10мин = список у тебя.
16021988 вне форума  
Старый 19.09.2014, 02:03   #10
[email protected]
Senior Member
 
Регистрация: 05.11.2010
Сообщений: 331
Бабло: $55180
По умолчанию

дольше узнаешь )
кидай урл в ЛС, дедик простаивает.
завтра с утреца заберешь...
Mori@rty вне форума  
Закрытая тема



Опции темы
Опции просмотра