Модераторы: korob2001, ginnie
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> Копирование файла построчно, нагрузка 
:(
    Опции темы
xxxdevxxx
Дата 18.9.2013, 15:34 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 7
Регистрация: 19.7.2013

Репутация: нет
Всего: нет
Добрый день!

Подскажите, как снизить нагрузку на сервер при построчном копирование большого файла (более гигабайта).

Код

    open(XMLFILE, "<:utf8", $file) or die $!;
    flock(XMLFILE, 2);
    open(MXMLFILE, ">>:utf8", sprintf "var/temp/cpi%s.xml", $fi) or die $!;
    flock(MXMLFILE, 2);
    while (<XMLFILE>) 
    {
        $| = 1;
        
        ...
        
        print MXMLFILE $xmlchunk;
    }
    close MXMLFILE;
    close XMLFILE;
    print "Done\n";


В данном примере использование процессора на 100% ...

Заранее благодарен за помощь!
PM MAIL   Вверх
Pfailed
Дата 19.9.2013, 08:07 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 933
Регистрация: 19.7.2009

Репутация: 22
Всего: 39
А есть ли смысл его построчно копировать?


--------------------
I'm on CPAN
I'm on github
PM MAIL   Вверх
xxxdevxxx
Дата 19.9.2013, 12:36 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 7
Регистрация: 19.7.2013

Репутация: нет
Всего: нет
Цитата(Pfailed @ 19.9.2013,  08:07)
А есть ли смысл его построчно копировать?

Да, необходимо разбить фаил на несколько маленьких.
PM MAIL   Вверх
Loki
Дата 22.9.2013, 03:09 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 244
Регистрация: 9.7.2006

Репутация: нет
Всего: нет
смотрят как бить, если по колличеству строк, то может awk проще?

awk '(NR>0 && NR<500)' file
awk '(NR>500 && NR<1000)' file
только нужно авк в петлю засунуть по сколько строк вайлик разделять.
PM MAIL   Вверх
krypt3r
Дата 23.9.2013, 09:22 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 359
Регистрация: 9.6.2009

Репутация: 2
Всего: 16
man split
PM MAIL   Вверх
  
 Ответ в темуСоздание новой темы Создание опроса
Правила форума "Perl"
korob2001
sharq
  • В этом разделе обсуждаются общие вопросы по языку Perl
  • Если ваш вопрос относится к системному программированию, задавайте его здесь
  • Если ваш вопрос относится к CGI программированию, задавайте его здесь
  • Интерпретатор Perl можно скачать здесь ActiveState, O'REILLY, The source for Perl
  • Справочное руководство "Установка perl-модулей", можно скачать здесь

Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, korob2001, sharq.
 
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Perl: Общие вопросы | Следующая тема »

Подписаться на тему | Подписка на этот форум | Скачать/Распечатать тему


 




[ Время генерации скрипта: 0.0880 ]   [ Использовано запросов: 22 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
 По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.