подскажите как сделать удаление

[dbjktnf]

после парсинга ссылок с сайта чтобы они больше 1 раза не парсили один и тоже текст статьи очень надо

 

[Roman48]

Когда парсишь, надо ссылки, сначала удалить дубли, а потом брать по одной ссылки и с удалением, тогда дублей не будет, да и так можно попробовать дубли удалить

 

[dbjktnf]

это я знаю просто на сайт каждую минуту новая статья и она нужна сразу а если парсиш и сразу публикуешь автопостером он берет и старые

 

[Phoenix78]

непонял, за что голосуем ?

 

[dbjktnf]

надо постоянно парсить и автопостить а парсир берет и старые статьи

 

[Roman48]

это я знаю просто на сайт каждую минуту новая статья и она нужна сразу а если парсиш и сразу публикуешь автопостером он берет и старые

Тогда как вариант, старые которые спарсил уже, записывать в файл, и потом, когда новые спарсил, сравнить два списка, а в третьем списке, будет то чего еще у тебя на сайте. Сравнить после парсинга

List<string> bad = project.Lists["Ссылки из вебмастера"].ToList();//стопслова
List<string> mix = project.Lists["Ссылки из вебмастера новые"].ToList();//потенциальные счастливцы
var good =project.Lists["Новые ссылки"];//те, кото будем осчастливливать точно
List<string> kostyl = new List<string>();//важный элемент индусского кода
//блок очень сложного индусского кода
kostyl=mix.Except(bad).ToList();
foreach(string data in kostyl)
{good.Add(data);}

 

[dbjktnf]

спасибо

 

[Roman48]

Нет так не получиться, может все перемешаться, надо разделитель статей или все в одну строку делать, так делай в одну строку, тогда точно все получиться, а дату статьи не парсить, может он вебмастер новости апает в ручную обновляет, или меняет урл, но статья от этого не меняется

 

[Vladimir71]

У меня такое впечатление, что вопрос не в тему , здесь по моему начинающие зенноводы просят сделать какой нибудь шаблон , а вопрос не в тему вообще , так можно засрать весь топик.

 

[Mikhail B.]

У меня такое впечатление, что вопрос не в тему , здесь по моему начинающие зенноводы просят сделать какой нибудь шаблон , а вопрос не в тему вообще , так можно засрать весь топик.

походу просто разделом ошибся

 

[Vladimir71]

Я так часто хрумером ошибаюсь

 

[dbjktnf]

У меня такое впечатление, что вопрос не в тему , здесь по моему начинающие зенноводы просят сделать какой нибудь шаблон , а вопрос не в тему вообще , так можно засрать весь топик.

я здесь первый раз сори если не в тему закинул вопрос