Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB59.1910
BTC/USD0.0000
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 22.03.2011, 07:25   #1
balamutik
Страдаю приступами политических высеров.
 
Аватар для balamutik
 
Регистрация: 12.12.2007
Сообщений: 2,091
Бабло: $371815
По умолчанию Помогите с фильтрацией текстовиков плз

Вот есть файл с кейм 1.тхт и напарсил новые кеи 2.тхт
Чем мне теперь из нового файла 2.тхт удалить всё что было в 1.тхт?
__________________
http://goo.gl/duXu9C - парсер контента, 08C8ACDC7131414A промокод на скидку 40%.http://goo.gl/JUU4Lu - 100% бонус первого платежа + месяц халявы на VPS по промокоду EBP1EYB.
balamutik вне форума  
Старый 22.03.2011, 08:21   #2
WebNinja
grablab.org
 
Аватар для WebNinja
 
Регистрация: 18.09.2007
Адрес: Thailand
Сообщений: 4,921
Бабло: $322214
Отправить сообщение для WebNinja с помощью ICQ Отправить сообщение для WebNinja с помощью Skype™
По умолчанию

слить их вместе и удалить дубли. пятон только нужен

http://ninjaside.info/2011/03/udalit-dubli-iz-fajla/

Последний раз редактировалось WebNinja; 22.03.2011 в 08:31.
WebNinja вне форума  
Старый 22.03.2011, 08:29   #3
deschain
Senior Member
 
Аватар для deschain
 
Регистрация: 01.11.2007
Сообщений: 2,275
Бабло: $288535
По умолчанию

Просто удалить дубли из одного файла можно с помощью:
http://4seo.biz/tools/27/doubles.php

Многие текстовые редакторы это умеют делать. Не из двух файлов, а именно, если слить оба файла в один и удалить дубли.
deschain вне форума  
Старый 22.03.2011, 08:31   #4
xanxy
Senior Member
 
Регистрация: 18.08.2010
Сообщений: 361
Бабло: $66100
По умолчанию

cat 1.txt 2.txt | sort --unique
xanxy вне форума  
Старый 22.03.2011, 11:01   #5
chesser
автоматизирую интернеты
 
Аватар для chesser
 
Регистрация: 05.07.2009
Адрес: chesser.ru
Сообщений: 3,382
Бабло: $470735
По умолчанию

100500 способов удалить дубли в файле с кея - там и на php, и на linux bash - кому как нравится
__________________
USA и NL серверы и VPS | wiki | блог | Drupal | NginxТДС
Ave, Google, morituri te salutant! © chesser
chesser вне форума  
Старый 22.03.2011, 12:48   #7
chesser
автоматизирую интернеты
 
Аватар для chesser
 
Регистрация: 05.07.2009
Адрес: chesser.ru
Сообщений: 3,382
Бабло: $470735
По умолчанию

Цитата:
Сообщение от jarosek Посмотреть сообщение
array_unique
он у меня предпоследним идет в списке, только памяти жрет много
PHP код:
<?php
ini_set
("memory_limit""64M");
$f file("keys.txt");
$f array_unique($f);
foreach(
$f as $k)
 echo 
$k;
?>
__________________
USA и NL серверы и VPS | wiki | блог | Drupal | NginxТДС
Ave, Google, morituri te salutant! © chesser
chesser вне форума  
Старый 22.03.2011, 17:51   #8
sydoow
Senior Member
 
Аватар для sydoow
 
Регистрация: 26.09.2008
Сообщений: 3,918
Бабло: $488249
Отправить сообщение для sydoow с помощью ICQ Отправить сообщение для sydoow с помощью Skype™
По умолчанию

Есть аналог KWK называется KeyWasher - мне он больше нравится и по скорости и по удобству.
Открываешь файл 2.тхт в проге, 1.тхт заносишь в чёрный список слов программы, и чистишь.
sydoow вне форума  
Старый 23.03.2011, 00:06   #9
iloveadult
Senior
 
Аватар для iloveadult
 
Регистрация: 24.09.2008
Сообщений: 2,727
Бабло: $519695
По умолчанию

в хруме есть фильтр баз
__________________
Top Links - качественные ссылки для Ваших сайтов
[UA] Моментальный вывод WM и других валют с лучшим курсом 24/7!
iloveadult вне форума  
Старый 23.03.2011, 00:19   #10
spomoni
royalads.net
 
Аватар для spomoni
 
Регистрация: 06.04.2008
Сообщений: 12,631
Бабло: $1435695
По умолчанию

Юзаю Хрумер. KeyWordKeeper еще есть, но он кажись не шарит, если в урле домены одинаковые, а папки, файлы нет, то такое не удаляет.
spomoni на форуме  
Закрытая тема



Опции темы
Опции просмотра