Модераторы: LSD, AntonSaburov
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> RandomAccessFile сильно тормозит, Это нормально или я что-то не так делаю? 
:(
    Опции темы
Mirkes
Дата 27.5.2013, 10:57 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 586
Регистрация: 18.8.2011
Где: Красноярск

Репутация: 7
Всего: 17
День добрый.
У меня есть два типа файлов. Один - бинарный, в нем записаны double,
второй - текстовый, каждая строка содержит два целых числа и одно действительное.
Размеры файлов вполне сопоставимы - бинарные по совокупности 22 гига, текстовый - 3 гига.
При обработке текстовый фаил читается подряд, а бинарник только выборочно.
Если я пускаю обработку двух текстовых (BufferedReader), все срабатывает почти мгновенно.
Если я пускаю текстовый с бинарным - в разы (где-то в 10 раз) медленнее.
В чем может быть дело? Я так понимаю, что для RandomAccessFile буфферизация не предусмотрена?
Файл создается так
Код

                    raf = new RandomAccessFile(dir + chroms + "-GC.ftr", "r");

Можете посоветовать что-нибудь полезное по ускорению работы?


--------------------
Mirkes
PM MAIL   Вверх
LSD
Дата 27.5.2013, 12:59 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Leprechaun Software Developer
****


Профиль
Группа: Модератор
Сообщений: 15718
Регистрация: 24.3.2004
Где: Dublin

Репутация: 210
Всего: 538
А как ты работаешь с RAF?


--------------------
Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it.
PM MAIL WWW   Вверх
Mirkes
Дата 28.5.2013, 00:18 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 586
Регистрация: 18.8.2011
Где: Красноярск

Репутация: 7
Всего: 17
мне нужны куски заранее неизвестной длины, идущие подряд. Читаю их следующим образом:
Код

                if (pos * dblSize < raf.length()) {
                    if (pos > oldPos + 1)
                        raf.seek(pos * dblSize);
                    value = raf.readDouble();
                    oldPos = pos;
                }



--------------------
Mirkes
PM MAIL   Вверх
LSD
Дата 28.5.2013, 09:26 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Leprechaun Software Developer
****


Профиль
Группа: Модератор
Сообщений: 15718
Регистрация: 24.3.2004
Где: Dublin

Репутация: 210
Всего: 538
Все равно непонятно, как у тебя меняется pos например. Что за магия pos > oldPos + 1 и т.д.

Попробуй перейти на MappedByteBuffer
Код

MappedByteBuffer mappedByteBuffer = raf.getChannel().map(FileChannel.MapMode.READ_ONLY, 0L, raf.length());



--------------------
Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it.
PM MAIL WWW   Вверх
Mirkes
Дата 28.5.2013, 16:06 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 586
Регистрация: 18.8.2011
Где: Красноярск

Репутация: 7
Всего: 17
Спасибо. Посмотрю.


--------------------
Mirkes
PM MAIL   Вверх
  
 Ответ в темуСоздание новой темы Создание опроса
Правила форума "Java"
LSD   AntonSaburov
powerOn   tux
javastic
  • Прежде, чем задать вопрос, прочтите это!
  • Книги по Java собираются здесь.
  • Документация и ресурсы по Java находятся здесь.
  • Используйте теги [code=java][/code] для подсветки кода. Используйтe чекбокс "транслит", если у Вас нет русских шрифтов.
  • Помечайте свой вопрос как решённый, если на него получен ответ. Ссылка "Пометить как решённый" находится над первым постом.
  • Действия модераторов можно обсудить здесь.
  • FAQ раздела лежит здесь.

Если Вам помогли, и атмосфера форума Вам понравилась, то заходите к нам чаще! С уважением, LSD, AntonSaburov, powerOn, tux, javastic.
 
1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Java: Общие вопросы | Следующая тема »

Подписаться на тему | Подписка на этот форум | Скачать/Распечатать тему


 




[ Время генерации скрипта: 0.0776 ]   [ Использовано запросов: 21 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
 По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.