Модераторы: LSD
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> Как хранить 3 миллиарда записей 
:(
    Опции темы
SneG0K
Дата 20.11.2012, 22:30 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Max Mara
***


Профиль
Группа: Завсегдатай
Сообщений: 1887
Регистрация: 1.12.2007
Где: Wis Dells

Репутация: нет
Всего: 54



И иметь быстрый доступ к ним?
PM WWW Skype   Вверх
Данкинг
Дата 20.11.2012, 22:58 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Yersinia pestis
****


Профиль
Группа: Завсегдатай
Сообщений: 8302
Регистрация: 7.11.2006
Где: მოსკოვი

Репутация: нет
Всего: 130



А что именно за данные?


--------------------
There's nothing left but silent epitaphs.
PM MAIL WWW   Вверх
Akina
Дата 21.11.2012, 08:05 (ссылка) |    (голосов:2) Загрузка ... Загрузка ... Быстрая цитата Цитата


Советчик
****


Профиль
Группа: Модератор
Сообщений: 20581
Регистрация: 8.4.2004
Где: Зеленоград

Репутация: 13
Всего: 454



Вероятно, на быстрой дисковой подсистеме... более осмысленный на имеющейся информации дать трудновато.


--------------------
 О(б)суждение моих действий - в соответствующей теме, пожалуйста. Или в РМ. И высшая инстанция - Администрация форума.

PM MAIL WWW ICQ Jabber   Вверх
Akella
Дата 21.11.2012, 13:54 (ссылка)    | (голосов:1) Загрузка ... Загрузка ... Быстрая цитата Цитата


Творец
****


Профиль
Группа: Модератор
Сообщений: 18485
Регистрация: 14.5.2003
Где: Корусант

Репутация: 3
Всего: 329



SSD в RAID массиве?

Добавлено через 28 секунд
Читай до конца
http://www.sql.ru/forum/actualthread.aspx?tid=825919

Добавлено через 1 минуту и 13 секунд
А вообще с такими вопросами в битву экстрасенсов  smile 
PM MAIL   Вверх
LSD
Дата 21.11.2012, 15:37 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Leprechaun Software Developer
****


Профиль
Группа: Модератор
Сообщений: 15718
Регистрация: 24.3.2004
Где: Dublin

Репутация: 24
Всего: 538



3 миллиарда бит (и даже байт) можно хранить в оперативке.  smile 
А так все зависит от того что за данные и что подразумевается под "быстрый" доступ.


--------------------
Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it.
PM MAIL WWW   Вверх
Akella
Дата 22.11.2012, 12:53 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Творец
****


Профиль
Группа: Модератор
Сообщений: 18485
Регистрация: 14.5.2003
Где: Корусант

Репутация: 3
Всего: 329



Одна запись, как правило, это далеко не 1 байт.
PM MAIL   Вверх
tzirechnoy
Дата 22.11.2012, 18:12 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1173
Регистрация: 30.1.2009

Репутация: 0
Всего: 16



(Пожав плечами) Если считать, что у Вас будет 100 байт в среднем на запись, и для идэнтификацыи конкретной записи будет достаточно информацыи из одного поля, и по этому полю будет организован индэкс типа B-Tree с размером записи индэкса в 20 байт -- то Вам потребуется 3000000000*(100+20) = 360000000000 B = 360000000000/1000000000 GB = 360 GB места на жёстком диске. Если считать размер страницы в 8 KiB, то на страницэ индэкса будет около 400 записей, а в среднем для поиска записи потребуется прочитать log_400(3000000000) = 3.64... страницы. Ещё потребуется прочитать страницу с самой записью, плюс можно немного накинуть на накладный расходы файловой системы -- в общем, придётся читать около 5 страниц. Страницы будут распределены достаточно произвольно по диску (и читаться строго последовательно -- так как каждая следующая требует прочтённой предыдущей), но каждая из них скорее всего будет лежать в соседних секторах, так что, скорее всего, каждая страница будет читаться с HDD примерно время, соответствующее среднему времени позицыонирования головки диска (время на чтение нескольких последовательных секторов пренебрежымо мало по сравнению с временем позицыонирования) -- или, при среднем времени позицыонирования невыдающихся жёстких дисков в 3-4 мс -- это будет 15-20 мс на одну запись.
Это нижэ Раскинских 50мс как времени реакцыи, которая считается "мгновенной" и дажэ не вышэ моих личных 20мс, на которых я точно не могу различить два последовательных события. Таким образом, для человека такая скорость доступа можэт оцэниваться как очень быстрая.

Так что для хранения и быстрого доступа к записям поштучно при указанных предположэниях (размер записи, наличие используемого индэкса, выборка по одной, использование одним человеком в каждый момент времени) -- подойдёт дажэ довольно слабый современный офисный компьютэр.

PM MAIL   Вверх
Akella
Дата 25.11.2012, 02:05 (ссылка)    | (голосов:1) Загрузка ... Загрузка ... Быстрая цитата Цитата


Творец
****


Профиль
Группа: Модератор
Сообщений: 18485
Регистрация: 14.5.2003
Где: Корусант

Репутация: 3
Всего: 329



Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
 нижэ


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
дажэ


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
идэнтификацыи


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
оцэниваться


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
можэт


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
предположэниях


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
индэкса


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
дажэ


Цитата(tzirechnoy @  22.11.2012,  18:12 Найти цитируемый пост)
компьютэр



У тебя к букве "э" какая-то особая пристрасть или ты просто не грамотный?
PM MAIL   Вверх
  
Ответ в темуСоздание новой темы Создание опроса
Правила форума "Общие вопросы по базам данных"
LSD
Zloxa

Данный форум предназначен для обсуждения вопросов о базах данных не попадающих под тематику других форумов:

  • вопросам по СУБД для которых нет отдельных подфорумов
  • вопросам которые затрагивают несколько разных СУБД (например проблема выбора)
  • инструменты для работы с СУБД
  • вопросы проектирования БД
  • теоретически вопросы о СУБД

Данный форум не предназначен для:

  • вопросов о поиске разлиных БД (если не понимаете чем БД отличается от СУБД то: а) вам не сюда; б) Google в помощь)
  • обсуждения проблем с доступом к СУБД из различных ЯП (для этого есть соответсвующие форумы по каждому ЯП)
  • обсуждения проблем с написание SQL запросов, для этого есть форум Составление SQL-запросов
  • просьб о написании курсовой, реферата и т.п., для этого есть Центр помощи или фриланс биржа
  • объявлений о найме специалистов, для этого есть раздел Объявления о найме специалистов

Если вы не соблюдаете эти правила, не удивляйтесь потом не найдя свою тему/сообщение. ;)


Полезные советы:

При написании сообщения постарайтесь дать теме максимально понятное название. В теме максимально подробно опишите проблему. Если применимо укажите: название базы данных и версии (MySQL 4.1, MS SQL Server 2000 и т.п.); используемых язык программирования; способа доступа (ADO, BDE и т.д.); сообщения об ошибках.

Для вставки кода используйте теги [code=sql] [/code].

Литературу по базам данных можно поискать здесь.

Действия модераторов можно обсудить здесь.


Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, LSD, Zloxa.

 
1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | СУБД, общие вопросы | Следующая тема »


 




[ Время генерации скрипта: 0.1013 ]   [ Использовано запросов: 21 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.