Обработка списка в многопоточности

[sparsa]

Задача:
Отработать ID в многопоточности.
Условие:
Есть список ID в файле site.ru/file.txt, который периодически пополняется новыми.
Список выглядит так:
id321312
id432432
id423555
id252343
Вопрос:
Как лучше брать с этого списка строку с необработанными ID в многопоточноти, чтоб уменьшить вероятность того что несколько потоков возьмут одну строку.

СПС

 

[rostonix]

Брать строки с удалением из списка.

 

[sparsa]

rostonix,спс, но к site.ru/file.txt нет доступа по ftp, удаление обработанных из данного списка не возможно

 

[svaminar]

Вести 2 список обработанных ид локально на компе с зено.
Потом по циклу берешь ид из списка 1 если его нет в списке 2 то работаешь (сразу добавив в список 2 )если есть то пропуск.
Но при при такой реализации надо брать случайную строку из списка 1 (если по порядку то все потоки возьмут первий подходящий ид.)

 

[Roman*]

Я правильно понимаю, что при взятие из списка с удалением строки многопотоком исключен % повторного взятия строки другим потоком?
И второе, как мне поставить счетчик на все потоки, чтобы сравнивать взятое колличество строк и для статистики, слышал что как то глобальные переменные участвуют или я ошибаюсь?.

 

[rostonix]

Я правильно понимаю, что при взятие из списка с удалением строки многопотоком исключен % повторного взятия строки другим потоком?

Да, если список привязан к файлу и стоит галка "сохранять изменения".
я тут http://zennolab.com/discussion/threads/mnogopotok-prostoj-primer.15888/ писал как работать с глобальными в многопотоке

 

[Roman*]

Да, если список привязан к файлу и стоит галка "сохранять изменения".
я тут http://zennolab.com/discussion/threads/mnogopotok-prostoj-primer.15888/ писал как работать с глобальными в многопотоке

До сих пор так и не понимаю что значит привязать файл?Это делается отдельным экшеном привязать файл такой то?только в этом случае повторов нет? И правильно я понял,глобальная переменная решит вопрос с счетчиком для статы в многопотоке?

 

[rostonix]

До сих пор так и не понимаю что значит привязать файл?Это делается отдельным экшеном привязать файл такой то?только в этом случае повторов нет?

привязка = наличие галки "сохранять изменения в файле" и "загружать из файла".
путь к файлу при этом все равно как устанавливать: через экшен или просто прописать в свойствах списка.

глобальные пермееные обнуляются при перезагрузке программы. я не знаю ваших задач, но я не юзаю глобальные переменные

 

[Se0mashines]

К примеру, если в список записываются строки, потом обрабатываются около минуты. Если запустить 2 потока, то данные будут записываться в один файл и мешаться. Как выйти с данной ситуации? Если ли в свойствах списка не выставлять галочку "Сохранять в файл" прокатит так? Не будет путаницы в переменных?

 

[rostonix]

если список не синхронизирован с файлом, то содержимое не будет пересекаться по потокам