Нужна ли программка для парсинга google suggest?

[lorien]

Вот думаю написать just for fun бесплатную программулину какую-нить (консольную). Нужна ли тулза для google suggest или уже есть что-то бесплатное и хорошо работающее?

[lorien]

> или же панельку крутую для чека списка сайтов на индекс

Ну я лично себе написал Для других не интересно писать пока. Хотя как идея веб-сервиса вполне ничего.

> Да, "всегда всем" интересно получить TDS быструю

Вот это интересно! Я уже думал о таком. В будущем, весьма вероятно попробую написать.

лучше даже так.
берем кей, делаем подстановки с перебором трех символов до и после кея.
key+aaa
key+aab
def+key

Пробел входит в число символов для подстановки? Я думаю да.

[Sultan]

Пробел входит в число символов для подстановки? Я думаю да.

зачем? думаю единственным, пробел не нужен. пробел всегда присутствует в качестве разделения с перебором символов, перебирается только алфавит (можно былоб и цифры включить но врятли что там выжмишь, только опционально)
побольше ПС. можно сделать перебор окончаний для ру это склонения для бурж множественные числа.
тем кому такое надо уже давно имеется, лиш бы твоя технология кому то пригодилась.
ps вот для справки материал http://www.key-collector.ru/preferen...parse_only_top

[lorien]

зачем? думаю единственным, пробел не нужен. пробел всегда присутствует в качестве разделения с перебором символов, перебирается только алфавит (можно былоб и цифры включить но врятли что там выжмишь, только опционально)

Щас проверил, пробел, действительно, не нужен. То есть одна и та же выдача для запросов "скачать м" и "скачатьм" и даже "скач атьм"

Кстати, у меня чё-то по 4 результата только на запрос. Я просто взял урл, на который через браузер запрос идёт, в браузере у меня тоже по 4 результата в подсказках. Это я не туда запросы отправляю?

[bess]

lorien, туда, гугл давно уже подрезал кол. выводящих подсказок.

[lorien]

А вот тут пробел уже имеет значение:

lorien@athlon:/web/suggest$ ./dump.py "колбаса а"
колбаса армавирская
колбаса английский
колбаса абсолют
колбаса алан
lorien@athlon:/web/suggest$ ./dump.py "колбасаа"
шоколадная колбасаа

[Sultan]

там в параметрах что то менять надо, так он и раскладку клавы меняет/угадывает, и не во всех пс ошибки правятся в подсказках если дальше гугла дело зайдет.
+ еще есть гео зависимые подсказки. т.е. он под твой регион подстановки мутит с городом

[lorien]

ps вот для справки материал http://www.key-collector.ru/preferen...parse_only_top

А там как раз говорится про два режима добавления модификаторов: с пробелом и без пробела т.е. по сути это один режим, где пробел является ещё одним модификатором. В справке грят, не юзайте оба режима, а то долго парсить будете.

Дальше гугла нет смысла обсуждать пока, надо чтобы под гугл работало для начала

[spasibo]

http://suggestqueries.google.com/com...hl=de&q=iphone
10 результатов.
считаю пробел нужен. и цифры тоже.

[lorien]

Хм, вот даже не знаю, suggestqueries.google.com выдаёт больше результатов, но он один, а запросы из браузера у меня идут на адреса типа "http://www.google.ru/s?q=", там можно менять google.ru на google.com и т.д. и теоритически это снизить может вероятность бана.

А откуда урл suggestqueries.google.com вообще взялся, где он используется?

[Sultan]

можно набор подстановок в отдельных файлах держать, и там кому как надо русский или латинский...

если под окончания мутить то там весь алфавит не нужен типичный набор под падежы для ру
для бурж s es ing
но как бы надо еще прикинуть чтоб он слова правильно крамсал