 |
|
Модераторы: Daevaorn |
 
|
|
Чтение в память больших файлов 
| temr |
|
|||
|
Новичок Профиль Группа: Участник Сообщений: 47 Регистрация: 30.3.2006 Репутация: нет Всего: нет |
Добрый день,
посоветуйте способ быстрого чтения в память фала размером в 1 gb желательно чтобы модzhnо было читать определенную часть файла Всем спасибо |
|||
|
||||
Загрузка ...
| feodorv |
|
|||
 Эксперт  Профиль Группа: Комодератор Сообщений: 2214 Регистрация: 30.7.2011 Репутация: 11 Всего: 45 |
Memory map?
mmap на юниксе и CreateFileMapping/MapViewOfFile в виндах... -------------------- Напильник, велосипед, грабли и костыли - основные инструменты программиста... |
|||
|
||||
| temr |
|
|||
|
Новичок Профиль Группа: Участник Сообщений: 47 Регистрация: 30.3.2006 Репутация: нет Всего: нет |
Спасибо поробую
|
|||
|
||||
| Randajad |
|
|||
|
Опытный Профиль Группа: Участник Сообщений: 295 Регистрация: 15.3.2012 Репутация: 8 Всего: 8 |
В бусте все это есть и кроссплатформенно.
А чем MMap быстрее malloc + fread? Если автору нужен не весь файл, а только часть, то именно f* функции нужны. Потому что MMap пытается зарезервировать для процесса памяти столько, каков размер файла. И при 512 MB озу и отключенном свопе, файл даже в 0.5 гига просто не замапится. Функция вернет ошибку. Это сообщение отредактировал(а) Randajad - 19.9.2012, 08:07 |
|||
|
||||
| feodorv |
|
||||
|
Эксперт Профиль Группа: Комодератор Сообщений: 2214 Регистрация: 30.7.2011 Репутация: 11 Всего: 45 |
Хороший вопрос. Я полагаю, из-за отсутствия необходимости копирования данных файла из системной области в пользовательскую. Плюс ОС всегда оптимизируется для работы со страницами памяти. В реальности нужно сравнивать производительности для конкретной задачи.
Я надеюсь, что такого не случиться))) -------------------- Напильник, велосипед, грабли и костыли - основные инструменты программиста... |
||||
|
|||||
| bems |
|
|||
 Эксперт Профиль Группа: Комодератор Сообщений: 3400 Регистрация: 5.1.2006 Репутация: нет Всего: 88 |
Это сообщение отредактировал(а) bems - 20.9.2012, 03:53 -------------------- Обижено школьников: 8 |
|||
|
||||
| Randajad |
|
|||
|
Опытный Профиль Группа: Участник Сообщений: 295 Регистрация: 15.3.2012 Репутация: 8 Всего: 8 |
На хрюше у меня упорно отказывалось маппиться. На висте и выше не тестил.
|
|||
|
||||
| bems |
|
|||
|
Эксперт Профиль Группа: Комодератор Сообщений: 3400 Регистрация: 5.1.2006 Репутация: нет Всего: 88 |
только что на семёрке под х64 замаппил 32Г на компе с 16Г оперативы и отключенным свопом
должно работать и под ХР если есть подходящий регион виртуальной памяти -------------------- Обижено школьников: 8 |
|||
|
||||
| xvr |
|
|||
|
Эксперт Профиль Группа: Комодератор Сообщений: 7046 Регистрация: 28.8.2007 Где: Дублин, Ирландия Репутация: 60 Всего: 223 |
Должно замэпится, если найдется свободный непрерывный кусок адресов виртульной памяти необходимого размера. На 32х битной системе может 0.5Г непрерывного участка и не найтись. |
|||
|
||||
| baldina |
|
|||
 Эксперт Профиль Группа: Завсегдатай Сообщений: 3433 Регистрация: 5.12.2007 Где: Москва Репутация: 32 Всего: 101 |
MMap пытается зарезервировать для процесса памяти столько, каков размер указанного окна. А дальше - как xvr сказал. |
|||
|
||||
|
|
| Правила форума "С++:Общие вопросы" | |
|
|
Добро пожаловать!
Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, Earnest Daevaorn |
| 1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей) | |
| 0 Пользователей: | |
| « Предыдущая тема | C/C++: Общие вопросы | Следующая тема » |
[ Время генерации скрипта: 0.0749 ] [ Использовано запросов: 21 ] [ GZIP включён ]
Реклама на сайте Информационное спонсорство
|
|
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности Powered by Invision Power Board(R) 1.3 © 2003 IPS, Inc. |