Большой объем данных

[rich788]

Всем привет.Зенка не тянет файл формата "YML",объемом 1,17 гб.Что делать?
Скачал с пратнерки список книг,и не могу их этого файла вытянуть url адреса.

 

[vlsdrmy]

Разбить файл на несколько более мелких, я например разбивал например этим: KeyWordKeeper.
А вообще Zennoposter объем 1,17 Гб по идее должен тянуть, видимо физической памяти на компе не хватает.

 

[fri-lancer]

Всем привет.Зенка не тянет файл формата "YML",объемом 1,17 гб.Что делать?
Скачал с пратнерки список книг,и не могу их этого файла вытянуть url адреса.

Посмотрите тут https://zennolab.com/discussion/threads/poluchaem-spiski-nuzhnyx-url-po-patternam-v-bolshom-kolichestve-cdx-cc.110869/
Автор пишет:

Готовые решения мне не подошли, нужен был кастом, поэтому собрал на ZP. Требование были простые -сделать выборку как указано выше и как можно быстрей. Получилось приемлимо - ~2 минуты на один 5-7 Гб файл.
Видеопруф - чтобы исключить вопросы новичков - "Действительно ZP может обрабатывать файлы большого размера с высокой скоростью".

 

[DevOps]

Всем привет.Зенка не тянет файл формата "YML",объемом 1,17 гб.Что делать?
Скачал с пратнерки список книг,и не могу их этого файла вытянуть url адреса.

Используйте StreamReader для чтения файла. Хоть террабайт весом пусть будет, Зенка схавает
PS Можете прислать код если хотите, сделаю под поточную обработку

 

[rich788]

Всем большое спасибо,все что вы посоветовали,пригодится в будущем.Решил ситуацию.Что сделал,открыл через нотепад ++ и с помощью регулярки,удалил до и после искомого текста,что очистило файл на 800 мб и дальше уже зенка справилась.И да,оперативы маловато на пк.

 

[DevOps]

Всем большое спасибо,все что вы посоветовали,пригодится в будущем.Решил ситуацию.Что сделал,открыл через нотепад ++ и с помощью регулярки,удалил до и после искомого текста,что очистило файл на 800 мб и дальше уже зенка справилась.И да,оперативы маловато на пк.

Молодец!