Что у вас с файловым накопителем?
В данный момент крутится зенка в 75 потоков
1 задание 5 потоков, файл в 2кк строк, берется с удалением, пишется в новый данные.
2 задание 70 потоков, файл в 5кк строк, берется с удалением, пишется в новый файл
Плюс идет оптимизация большой базы данных, буфер...