Помогите удалить дубли строк

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
566
Благодарностей
38
Баллы
28
Есть файл в нем 47 миллионов строк... как можно удалить дубли строк....
 

promeed

Client
Регистрация
11.04.2022
Сообщения
129
Благодарностей
9
Баллы
18
91743

Так как в файле 47 миллионов строк, а у меня в проекте 50 строк долго дубли удалялись, так что ставьте на ночь или как-то ещё.
 

igoreff

Client
Регистрация
24.02.2011
Сообщения
176
Благодарностей
20
Баллы
18
Именно зенкой удалить надо? Так то есть спец софт для такого, KeyWordKeeper, пингвин, EmEditor вроде тоже пойдет.
 

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
566
Благодарностей
38
Баллы
28
Именно зенкой удалить надо? Так то есть спец софт для такого, KeyWordKeeper, пингвин, EmEditor вроде тоже пойдет.

EmEditor - 4 дня стоял пробовал удалить дубни .. не вдержал закрыл
KeyWordKeeper - поддерживает только до 20лямов строк
пингвина незнаю...
 

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
566
Благодарностей
38
Баллы
28

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
19 440
Благодарностей
8 672
Баллы
113
  • Спасибо
Реакции: xatchikzzz

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
566
Благодарностей
38
Баллы
28
  • Спасибо
Реакции: Sergodjan

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
566
Благодарностей
38
Баллы
28

orka13

Client
Регистрация
07.05.2015
Сообщения
2 163
Благодарностей
2 163
Баллы
113
  • Спасибо
Реакции: Sergodjan

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)