Модераторы: Poseidon, Snowy, bems, MetalFan
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> Оптимизировать декомпрессию gzip? 
:(
    Опции темы
MadMas
  Дата 13.8.2008, 13:51 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Блондинко
*


Профиль
Группа: Участник
Сообщений: 89
Регистрация: 5.5.2006
Где: Екатеринбург

Репутация: нет
Всего: нет
Суть приложения: Консольное приложение, берет файл gzip, распаковывает кусками, куски парсит. 

Декомпрессию осуществляю следующим образом: 
Код

z := TZDecompressionStream.Create(TFileStream.Create(wLogFile, fmOpenRead), 15 + 32);
AssignFile(outfile, wOutfile);
Rewrite(outfile);
try 
repeat
mainbuffer := '';
bytesRead := z.Read(mainbuffer, sizeof(mainbuffer));
...


Парсю полученные куски при помощи либы RegExpr.

Небольшие файлики обрабатываются нормально, но проблема в том, что обычно размер файлов, подлежащих обработке составляет примерно 60Мб. При попытке "скормить" их программе, она "вешает" машину и в итоге вылетает с ошибкой переполнения памяти. 

Как можно ее оптимизировать, подскажите пожалуйста. 
PM   Вверх
Alkash
Дата 13.8.2008, 16:32 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


коллекционер жизни
**


Профиль
Группа: Участник
Сообщений: 516
Регистрация: 5.7.2004
Где: /

Репутация: нет
Всего: нет
Application.processmessages не помогает?


--------------------
Подпись >> /dev/null
PM MAIL ICQ MSN   Вверх
MadMas
Дата 14.8.2008, 05:48 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Блондинко
*


Профиль
Группа: Участник
Сообщений: 89
Регистрация: 5.5.2006
Где: Екатеринбург

Репутация: нет
Всего: нет
Alkash, не помогает, пробовала. 
PM   Вверх
Alexeis
Дата 14.8.2008, 09:20 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Амеба
Group Icon


Профиль
Группа: Админ
Сообщений: 11743
Регистрация: 12.10.2005
Где: Зеленоград

Репутация: 109
Всего: 459
  От подвешивания можно избавиться сравнительно просто перенеся распаковку в отдельный поток, а вот нехватка памяти это странно, подозреваю что в коде есть утечка памяти.


--------------------
Vit вечная память.

Обсуждение действий администрации форума производятся только в этом форуме

гениальность идеи состоит в том, что ее невозможно придумать
PM ICQ Skype   Вверх
morpheyushka
Дата 14.8.2008, 10:12 (ссылка) | (голосов:1) Загрузка ... Загрузка ... Быстрая цитата Цитата


Зеленый человек
**


Профиль
Группа: Участник
Сообщений: 563
Регистрация: 26.2.2008
Где: Киев

Репутация: 3
Всего: 8
Цитата(Alexeis @  14.8.2008,  09:20 Найти цитируемый пост)
подозреваю что в коде есть утечка памяти.

угу, возможно забыла чтото фрикнуть smile 


--------------------
user posted image
Спасибо делается вот так!!!
PM MAIL WWW   Вверх
  
 Ответ в темуСоздание новой темы Создание опроса
Правила форума "Delphi: Общие вопросы"
SnowyMetalFan
bemsPoseidon
Rrader

Запрещается!

1. Публиковать ссылки на вскрытые компоненты

2. Обсуждать взлом компонентов и делиться вскрытыми компонентами

  • Литературу по Дельфи обсуждаем здесь
  • Действия модераторов можно обсудить здесь
  • С просьбами о написании курсовой, реферата и т.п. обращаться сюда
  • Вопросы по реализации алгоритмов рассматриваются здесь
  • 90% ответов на свои вопросы можно найти в DRKB (Delphi Russian Knowledge Base) - крупнейшем в рунете сборнике материалов по Дельфи

Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, Snowy, MetalFan, bems, Poseidon, Rrader.
 
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Delphi: Общие вопросы | Следующая тема »

Подписаться на тему | Подписка на этот форум | Скачать/Распечатать тему


 




[ Время генерации скрипта: 0.1785 ]   [ Использовано запросов: 22 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
 По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.