Чем сравнить два текстовых файла?

[911neo]

Имеем два больших текстовых файла - файл1 и файл2. Необходимо сравнить два файла и автоматически удалить из файла1 все строки, которые присутствуют в файле2. Подскажите пожалуйста чем это можно быстрее всего сделать.

[sim0n]

Сообщение от ivy

sim0n, файл на миллиард строк хотя бы сожрет? А насколько оно быстрее fgrep?

он под винду

[ivy]

sim0n, fgrep тоже в винде работает.

[Cannabis Cup]

А что за задачи с миллиардами строк?)

[ivy]

Cannabis Cup, у меня с кейвордами.

[Cannabis Cup]

Ну понятно, а в каких тематиках миллиарды кеев ?

[ivy]

Обработка баз после парсинга, выборки из общей базы.

[Cannabis Cup]

А как почистить те же миллионные базы от ру кейвордов? вычистить все строки содержащие кириллические симв. Десктопная софтина какая нить

[ivy]

grep -v "[А-Яа-я]" in > out

или так, должно быть сильно быстрее:

LC_ALL=C grep -v "[А-Яа-я]" in > out

[Cannabis Cup]

а кроме грепа? софтверные есть решения?

[krob]

Сообщение от Cannabis Cup

а кроме грепа? софтверные есть решения?

да зенка
вот скачать тут можно http://www.zennolab.com/ru/products/...6-2c898690cc1f

рекомендую