Модераторы: LSD, AntonSaburov
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> DBM файлы в Java или их аналог 
:(
    Опции темы
korob2001
Дата 7.8.2011, 11:51 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
****


Профиль
Группа: Комодератор
Сообщений: 2871
Регистрация: 29.12.2002

Репутация: 1
Всего: 61



Привет всем!
Причина породившая этот вопрос:
Мне сейчас необходимо написать библиотеку, что впринципе и сделал. С помощью этой библиотеки программа должна фильтровать входные строки и ассоциировать их с ID в базе данных, по принципу словаря. Например на вход я получаю марки автомобилей:

Audi, может быть AUD, может быть AU, где все три варианта подразумевают одно и тоже, и их необходимо привести к единому виду Audi, точнее к его ID в базе данных например 1.

или цвета:

Black, может быть Noir, Zwart, Чёрный, Sensation Black и т.д., что необходимо привести к виду Black, точнее его ID в базе, например 10.

Сейчас все ассоциации ханятся в HashMap после чего сериализуются на диск. Проблема в том, что при десериализации всё считывается в память, после чего программа использующая библиотеку работает с ней длительное время, от 20 минут до 3 часов. В хеш добавляются другие ассоциации, когда программа завершает свою работу, она сериализует данные обратно на диск.

Вот собственно и проблема:
Десериализовали данные, получили HashMap в памяти, в это время другая программа использующая библиотеку десериализует файл и получает свой HashMap в памяти. ;((( После чего одна отработала скажем за 20 минут, сериализовала свои данные на диск. Проходит час, завершает свою работу вторая программа и тоже сериализовала свои данные в тот же файл. ;(((

Можно было бы создать табилицу в базе, но это не есть гуд, собственно для этого и делался этот фильтр, что бы в базу входили чистые данные. Потому хранение мусора в базе отпадает.

Почему DBM?
В Perl я бы использовал, в данной ситуации, именно его. DBM - это по сути тот же хеш, только он не в памяти, а в файле на диске. Кол-во ассоциаций марок авто, в текущий момент доходит до 70000, фантазия у людей бурная, каждый извращается как может, с цветами авто дела обстоят ещё хуже. ;))))

Вопрос:
Есть ли что-то подобное в Java? Причём не обязательно точный аналог DBM в Perl. Может быть какая-то другая технология решающая данную проблему? Может кто-то уже сталкивался с подобной проблемой и знает куда копать?


--------------------
"Время проходит", - привыкли говорить вы по неверному пониманию. 
"Время стоит - проходите вы".
PM MAIL WWW ICQ MSN   Вверх
jk1
Дата 7.8.2011, 13:17 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Участник
Сообщений: 1168
Регистрация: 17.10.2008
Где: Санкт-Петербург

Репутация: 40
Всего: 75



EHCache подойдет?


--------------------
Opinions are like assholes — everybody has one
PM MAIL   Вверх
  
Ответ в темуСоздание новой темы Создание опроса
Правила форума "Java"
LSD   AntonSaburov
powerOn   tux
javastic
  • Прежде, чем задать вопрос, прочтите это!
  • Книги по Java собираются здесь.
  • Документация и ресурсы по Java находятся здесь.
  • Используйте теги [code=java][/code] для подсветки кода. Используйтe чекбокс "транслит", если у Вас нет русских шрифтов.
  • Помечайте свой вопрос как решённый, если на него получен ответ. Ссылка "Пометить как решённый" находится над первым постом.
  • Действия модераторов можно обсудить здесь.
  • FAQ раздела лежит здесь.

Если Вам помогли, и атмосфера форума Вам понравилась, то заходите к нам чаще! С уважением, LSD, AntonSaburov, powerOn, tux, javastic.

 
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Java: Общие вопросы | Следующая тема »


 




[ Время генерации скрипта: 0.0541 ]   [ Использовано запросов: 22 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.