How to remove duplicate domains ?

intruder2600

Client
Регистрация
15.12.2011
Сообщения
47
Благодарностей
1
Баллы
6
Hi,

I'm harvesting some domains and I have lots of duplicates, is it possible to check domain if it's already in txt file ?
 

lokiys

Moderator
Регистрация
01.02.2012
Сообщения
4 812
Благодарностей
1 187
Баллы
113

intruder2600

Client
Регистрация
15.12.2011
Сообщения
47
Благодарностей
1
Баллы
6
Thx, but this will remove duplicate entries, not duplicate domains :-)
 

rostonix

Известная личность
Регистрация
23.12.2011
Сообщения
29 067
Благодарностей
5 715
Баллы
113
Then do not store anything except domains in list ;-)
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)