Цитата:
Сообщение от Weil
скрипт поисковика/краулера
|
подобный софт, обычно, включает в себя несколько компонентов, например: кролер, индексатор и поисковик, каждый из этих компонентов также может состоять из другого множества элементов. Какое софт, сочетание компонентов лучше либо неизвестно, либо зависит от задачи.
изучение темы лучше начать отсюда и читать все ссылки:
https://en.wikipedia.org/wiki/Web_search_engine
судя по исходным данным, тебе нужен "вертикальный поиск" (domain-specific)
https://en.wikipedia.org/wiki/Vertical_search используя "focused search"-кролер:
https://en.wikipedia.org/wiki/Focused_crawler
а нельзя использовать google cse ? он удобный saas...и на рекламе можно заработать $
upd: а так то известные решения
тут