Парсер текста - сохраняет дубли

[asgard]

Есть парсер который собирает тексты со страницы, URL-ы меняются на странице, при их смене он собирает новый текст, но при этом еще сохраняет в списке старый, пробовал добавить удаление дублей, но он не все удаляет.

 

[budora]

Есть парсер который собирает тексты со страницы, URL-ы меняются на странице, при их смене он собирает новый текст, но при этом еще сохраняет в списке старый, пробовал добавить удаление дублей, но он не все удаляет.

Можно сделать вывод о том, что у вас что-то нужно править в шаблоне.

 

[LexxWork]

asgard, согласен, не удаляет. версия 5.5.5

 

[asgard]

asgard, согласен, не удаляет. версия 5.5.5

у меня 5.4.3.0

Можно сделать вывод о том, что у вас что-то нужно править в шаблоне.

еще бы знать что править?) вот данные DOM при первом проходе сохраняет все норм, а потом когда меняются URL-ы сохраняет спарсенный текст с первой страницы и добавляет их вместе со второй страницы.

 

[rostonix]

Не используйте экшен сохранения в файл. Вместо этого просто пропишите путь к файлу в свойствах списка и поставьте галки "загружать из файла" и "сохранять изменения в файл"

 

[asgard]

Не используйте экшен сохранения в файл. Вместо этого просто пропишите путь к файлу в свойствах списка и поставьте галки "загружать из файла" и "сохранять изменения в файл"

спс