Привет,
есть шаблон который с определенной периодичностью обходит страницы и в случае появления новых статей собирает текст. Проверка на наличие повторов осуществляется по такой схеме -
Проблема в том, что периодически случаются повторы. Была мысль что в заголовках присутствуют скрытые символы не сохраняющиеся в таблицы, в следствии чего, была добавлена проверка по Url по такой же схеме и даже по дате, но все равно случаются повторы.
Вопрос в том, как сделать проверку которая исключила бы повторы?
есть шаблон который с определенной периодичностью обходит страницы и в случае появления новых статей собирает текст. Проверка на наличие повторов осуществляется по такой схеме -
Проблема в том, что периодически случаются повторы. Была мысль что в заголовках присутствуют скрытые символы не сохраняющиеся в таблицы, в следствии чего, была добавлена проверка по Url по такой же схеме и даже по дате, но все равно случаются повторы.
Вопрос в том, как сделать проверку которая исключила бы повторы?
