Как сравнить результаты и удалить дубли?

backoff

Client
Регистрация
20.04.2015
Сообщения
6 042
Благодарностей
6 476
Баллы
113
Приветствую.
Давно работаю с зенкой, но с такой задачей не встречался, задача следующая.

Шаблон парсит урлы постов в ВК, те, которые были отмечены лайками, все урлы шаб собирает в текстовый файл. Иногда лайкается очень много постов, и шаб не берет определенное количество урлов, может взять больше или меньше. И взятые урлы могут совпадать с предыдущим взятием, так вот как вычислить те ктоторые уже есть и удалить их из конечного результата

пример - пояснение: У нас есть 2 списка
1 список состоит из строк
12222222
13333333
14444444

2 список состоит из строк
31111111
32222222
33333333
34444444
12222222

Так вот как найти и удалить эту строчку "12222222", учитывая что дублей может быть много.
чпасибо
 

Ribas

Client
Регистрация
31.05.2014
Сообщения
1 440
Благодарностей
503
Баллы
113
Ищите по форуму сравнение списков
 

ssXXXss

Client
Регистрация
23.12.2014
Сообщения
7 379
Благодарностей
2 041
Баллы
113
тоже милионны ))))))
 

Ribas

Client
Регистрация
31.05.2014
Сообщения
1 440
Благодарностей
503
Баллы
113
Хз как насчёт миллионов, но тема сравнения списков появляется с завидной регулярностью. Может кнопку "Поиск" покрупнее сделать?
 

ssXXXss

Client
Регистрация
23.12.2014
Сообщения
7 379
Благодарностей
2 041
Баллы
113
Хз как насчёт миллионов, но тема сравнения списков появляется с завидной регулярностью. Может кнопку "Поиск" покрупнее сделать?
может просто они много парсят )))))
 

backoff

Client
Регистрация
20.04.2015
Сообщения
6 042
Благодарностей
6 476
Баллы
113
ну вот почему так, не пойму.
скачал пример как можно из 2х списков сделать уникальный третий. ( http://zennolab.com/discussion/threads/kak-vzjat-tolko-unikalnye-nepovtorjajuschiesja-znachenija-iz-dvux-spiskov.19582/#post-126875 )
но почему-то когда берет 1ю строку из файла, то все норм.
а когда берет 1ю строку из второго списка, то почему-то копирует весь текст в одну переменную.
думал глюк шаблона, сделал свой, тоже самое.
почему такое может быть? списки настроены одинаково, только на 2 разных файла
 

ssXXXss

Client
Регистрация
23.12.2014
Сообщения
7 379
Благодарностей
2 041
Баллы
113
а во втором списке случайна не одна ли это строка с переносами
 

backoff

Client
Регистрация
20.04.2015
Сообщения
6 042
Благодарностей
6 476
Баллы
113

ZennoScript

Moderator
Регистрация
04.03.2011
Сообщения
4 450
Благодарностей
1 885
Баллы
113

backoff

Client
Регистрация
20.04.2015
Сообщения
6 042
Благодарностей
6 476
Баллы
113
нет, не менял, разделитель Enter, стандартные настройки
 

ssXXXss

Client
Регистрация
23.12.2014
Сообщения
7 379
Благодарностей
2 041
Баллы
113
ну так кинь кусок шаблона, что так гадать
 

backoff

Client
Регистрация
20.04.2015
Сообщения
6 042
Благодарностей
6 476
Баллы
113

Кто просматривает тему: (Всего: 2, Пользователи: 0, Гости: 2)