2.2.2.1 Баг - вылетает

  • Автор темы Автор темы 7make
  • Дата начала Дата начала

7make

Client
Регистрация
25.06.2011
Сообщения
1 547
Реакции
1 312
Баллы
113
процесс набирает 2,5 -2,7 гига по памяти и вылетает через 10 мин.
бывает исключение OutOfMemory, но свободной памяти вагон. (6-8гиг свободно)
 
написал в личку
 
ок. перенаправил данные программистам
 
Пришли проект в сапорт, где это происходит, я гляну.
Вообще, слишком много каптч ты засунул, либо поставил слишком много искаженных символов сгенерировать при обучении, но надо глянуть, может что-то можно оптимизировать.
То, что памяти у тебя достаточно - это не важно, процесс в котором происходит обучение может занять только чуть больше трех гигов памяти.
 
Проект весит: 93Мб
собиралось по 500 символов
размножение:
х2 - все ок
х3 - вылетает через мин 10
х4 - не стартует.

так понял что процесс 32 битный и ограничение до 3.5 Gb по памяти?
 
У тебя слишком много символов получается, оперативки не хватает.
Если у тебя по 500 символов для каждой буквы то зачем использовать размножение?
Эта функция если по 10-20 символов для 1 буквы.

Т.е. если x2 и у тебя 28 букв по 500 изображений => 28 000 изображений
если x3 и у тебя 28 букв по 500 изображений => 42 000 изображений,
по 100 кб => 4 101 мб и это только на хранение изображений для обучения
а про >= x4 все понятно )
 
Если тебе не трудно проверь обучение на каком-нибудь не большом проекте.
Просто открыть другой проект (где достаточно много символов) который у тебя раньше обучался без проблем и просто запустить обучение. запустится или нет
 
5кб, весит каптча одна)
даже если без размножения обучать, при ресайзе 200%, аналогично, вылетает.
Там свой формат изображения и в этом формате картинки далеко не 5кб весят.
500 вариантов символа - это даже слишком много, 200 более чем достаточно.
Я тестировал различное количество, после 200 вариантов % распознавания практически не меняется при добавлении новых.
 
Если тебе не трудно проверь обучение на каком-нибудь не большом проекте.
Просто открыть другой проект (где достаточно много символов) который у тебя раньше обучался без проблем и просто запустить обучение. запустится или нет
Да, с другими все ок. Просто тут проект большой и много символов. Видимо в этом дело.

Там свой формат изображения и в этом формате картинки далеко не 5кб весят.
500 вариантов символа - это даже слишком много, 200 более чем достаточно.
Я тестировал различное количество, после 200 вариантов % распознавания практически не меняется при добавлении новых.

Ну я собирал не все подряд символы, а визуально хотел покрыть все разнообразие.
При 500 символах вышел на пробив 60+%
 
Мы еще кое-что оптимизируем, это добавит лишние пол гига памяти к процессу, но это, скорее всего, будет уже предел для оптимизации.


Ну я собирал не все подряд символы, а визуально хотел покрыть все разнообразие.
При 500 символах вышел на пробив 60+%
Да, прирост % растет логарифмически от кол-ва собранных символов.
Работы больше на 150% а прибавка в распознавании ~10%
 

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)