Помогите удалить дубли строк

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
577
Благодарностей
41
Баллы
28
Есть файл в нем 47 миллионов строк... как можно удалить дубли строк....
 

promeed

Client
Регистрация
11.04.2022
Сообщения
129
Благодарностей
9
Баллы
18
91743

Так как в файле 47 миллионов строк, а у меня в проекте 50 строк долго дубли удалялись, так что ставьте на ночь или как-то ещё.
 

igoreff

Client
Регистрация
24.02.2011
Сообщения
190
Благодарностей
24
Баллы
18
Именно зенкой удалить надо? Так то есть спец софт для такого, KeyWordKeeper, пингвин, EmEditor вроде тоже пойдет.
 

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
577
Благодарностей
41
Баллы
28
Именно зенкой удалить надо? Так то есть спец софт для такого, KeyWordKeeper, пингвин, EmEditor вроде тоже пойдет.

EmEditor - 4 дня стоял пробовал удалить дубни .. не вдержал закрыл
KeyWordKeeper - поддерживает только до 20лямов строк
пингвина незнаю...
 

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
577
Благодарностей
41
Баллы
28

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
20 407
Благодарностей
9 115
Баллы
113
  • Спасибо
Реакции: xatchikzzz

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
577
Благодарностей
41
Баллы
28
  • Спасибо
Реакции: Sergodjan

xatchikzzz

Client
Регистрация
08.09.2010
Сообщения
577
Благодарностей
41
Баллы
28

orka13

Client
Регистрация
07.05.2015
Сообщения
2 177
Благодарностей
2 184
Баллы
113
  • Спасибо
Реакции: Sergodjan

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)