Помогите подобрать запрос - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Поисковые системы
Дата
USD/RUB93.4409
BTC/USD64340.3245
Поисковые системы Поисковая оптимизация под Google, Yahoo, Bing и т.д.

Закрытая тема
Опции темы Опции просмотра
Старый 08.10.2009, 21:11   #1
DWBH
Senior Member
 
Аватар для DWBH
 
Регистрация: 20.04.2007
Адрес: web
Сообщений: 146
Бабло: $48345
По умолчанию Помогите подобрать запрос

Бразы, стоит задача выпарсить всех юзеров ютуба
т.е. линки вида: youtube.com/user/blabla

Поскольку юзеров там просто тьма, то задачу разбил на части.
1. выпарсить юзеров, логины которых начинаются с буквы 'a'
и т.д.

именно под эту задачу не могу подобрать запрос.
Удалось подобрать это:
inurl:"user/m*/*" site:youtube.com

но так выдирается далеко не весь список..
DWBH вне форума  
Старый 09.10.2009, 13:37   #2
Black Box
Member
 
Регистрация: 26.02.2008
Сообщений: 40
Бабло: $4000
По умолчанию

Я думаю что лучше будет просто запрос site:youtube.com/user и добавлять к нему daterange:2455114-2455114
(2455114 - это сегодня, 2455113 - вчера) Перевести в этот формат дату можно тут: http://jwebnet.net/advancedgooglesea...l#advDateRange
Ну и вариаторы подставляй разные.
Black Box вне форума  
Старый 09.10.2009, 14:39   #3
Mango
Member
 
Аватар для Mango
 
Регистрация: 04.12.2008
Сообщений: 48
Бабло: $2560
По умолчанию

либо кучу разных вариаторов перебирай...
либо вот тут ребята предлагают услугу выпарсивания вообще всего что есть:
http://www.gofuckbiz.com/showthread.php?t=11774
Mango вне форума  
Старый 09.10.2009, 14:49   #4
alead
Senior Member
 
Регистрация: 04.08.2008
Сообщений: 654
Бабло: $115197
По умолчанию

Цитата:
Сообщение от Black Box Посмотреть сообщение
Я думаю что лучше будет просто запрос site:youtube.com/user и добавлять к нему daterange:2455114-2455114
(2455114 - это сегодня, 2455113 - вчера) Перевести в этот формат дату можно тут: http://jwebnet.net/advancedgooglesea...l#advDateRange
Ну и вариаторы подставляй разные.
с daterange гугл банит еще быстрее, чем с инурл да и часто резалтов мало отдает... имхо толку нет от него
alead вне форума  
Старый 09.10.2009, 20:30   #5
_Sabat_
Senior Member
 
Аватар для _Sabat_
 
Регистрация: 13.02.2009
Сообщений: 138
Бабло: $16387
Отправить сообщение для _Sabat_ с помощью ICQ
По умолчанию

можно добовлять еще кеи к запросу, что-то вроде:
inurl:"youtube.com/user/" movie
inurl:"youtube.com/user/" music
только подобрать более менее релевантные надо+ базу чистить прийдется, дубле много оч будет..
_Sabat_ вне форума  
Старый 09.10.2009, 20:36   #6
Drunk Monk
Je suis moine ivre
 
Аватар для Drunk Monk
 
Регистрация: 03.03.2009
Сообщений: 15,268
Бабло: $797172957
По умолчанию

Можно выпарсить хрефером без проблем, колво спаршеного будет стремиться в 100%

1. Собирай слова
2. Бери прокси
3. site:youtube.com inurl:"youtube.com/user/"
4. Правь hrefer.ini, чтобы с одного домена резалты хавал
5. Чисть фильтры
6. Start parsing!
Drunk Monk вне форума  
Старый 09.10.2009, 20:49   #7
pina
хде мой компот?!
 
Регистрация: 07.01.2008
Сообщений: 327
Бабло: $31276
Отправить сообщение для pina с помощью ICQ
По умолчанию

а зачем через гугл парсить?
если задача всех собрать, то лучше уж бота для ютуба написать
pina вне форума  
Старый 09.10.2009, 20:54   #8
Drunk Monk
Je suis moine ivre
 
Аватар для Drunk Monk
 
Регистрация: 03.03.2009
Сообщений: 15,268
Бабло: $797172957
По умолчанию

pina, брутфорсом брать?
Или паука запустить? Зачем парсить то, что уже с любовью спаршенно Гуглом
Drunk Monk вне форума  
Старый 09.10.2009, 21:46   #9
Mr.Bogus
Senior Member
 
Регистрация: 08.09.2009
Сообщений: 158
Бабло: $12430
По умолчанию

Цитата:
Сообщение от Drunk Monk Посмотреть сообщение
pina, брутфорсом брать?
Или паука запустить? Зачем парсить то, что уже с любовью спаршенно Гуглом
парсить гуглом ютуб это как левой рукой чесать правое ухо. Парсить надо конечно же сам ютуб.
Mr.Bogus вне форума  
Старый 10.10.2009, 00:16   #10
Drunk Monk
Je suis moine ivre
 
Аватар для Drunk Monk
 
Регистрация: 03.03.2009
Сообщений: 15,268
Бабло: $797172957
По умолчанию

Ну и кто бля будет это делать? Это бред по нескольким причинам, но ТС попросил именно по запросам сказать.
Drunk Monk вне форума