- Регистрация
- 28.02.2016
- Сообщения
- 2 058
- Благодарностей
- 745
- Баллы
- 113
Нужно пару сайтов спарсить, вот как не допустить дубли новостей?
Собираю новости с сайта в список, чтобы каждый раз сайт заново не парсить, а со временем просто добавлять, в готовый список. Как это сделать лучше всего, как вариант ссылки записывать в список, именно то что уже спарсил, и от этого уже строить логику. Подскажите пожалуйста, какие еще есть варианты?
Собираю новости с сайта в список, чтобы каждый раз сайт заново не парсить, а со временем просто добавлять, в готовый список. Как это сделать лучше всего, как вариант ссылки записывать в список, именно то что уже спарсил, и от этого уже строить логику. Подскажите пожалуйста, какие еще есть варианты?