 |
|
Модераторы: LSD |
 
|
|
Поиск по BLOB-полю 
| MrKit |
|
|||
|
Новичок Профиль Группа: Участник Сообщений: 21 Регистрация: 18.1.2007 Где: Москва Репутация: нет Всего: нет |
Имеется: БД для хранения сообщений с новостных каналов инета.
Сообщения (новости) хранятся в поле типа BLOB, поскольку размер иногда превышает 32 Кб (ограничение Varchar), хотя средний размер - 1-2 Кб. Число записей в день ~500-1000. СУБД - InterBase. Необходимо организовать поиск среди новостей, чтобы выводить только те из них, которые содержат 1 или несколько ключевых слов. При этом забота о морфологии (изменяющиеся окончания, корневые гласные и т.п.) остается на плечах компетентного пользователя (за исключением учета регистра букв). При поиске путей реализации перелопатил кучу инфы в инете, а потом попробовал элементарное условие CONTAINING для всех ключевых слов, т.е. ... WHERE (news CONTAINING <слово1>)AND(news CONTAINING <слово2>) ... Оказалось, что для 3-5 слов поиск по 15000 записям занимает всего 1-2 секунды (на глазок), что более чем приемлемо. Единственная заноза - для поиска без учета регистра нужно писать UDF BlobLowerCase, поскольку стандартный LowerCase для BLOB не работает. У кого какие будут советы и соображения по этому поводу? ;) |
|||
|
||||
Загрузка ...
| LSD |
|
|||
 Leprechaun Software Developer  Профиль Группа: Модератор Сообщений: 15718 Регистрация: 24.3.2004 Где: Dublin Репутация: 24 Всего: 538 |
Я бы предложил не изобретать велосипед, а использовать готовые решения для организации полнотекстового поиска.
-------------------- Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it. |
|||
|
||||
| MrKit |
|
|||
|
Новичок Профиль Группа: Участник Сообщений: 21 Регистрация: 18.1.2007 Где: Москва Репутация: нет Всего: нет |
Это относительно BlobLowerCase? Я уже смотрел ;), хотел оттуда что-нибудь взять. Там очень много инфы, голова пухнет и времени нет разбирать все что есть. По поводу полнотекстового поиска: насколько я понимаю, он предполагает наличие словаря, так? А я хочу обойтись без него. Это сообщение отредактировал(а) MrKit - 22.4.2007, 23:39 |
|||
|
||||
| LSD |
|
|||
|
Leprechaun Software Developer Профиль Группа: Модератор Сообщений: 15718 Регистрация: 24.3.2004 Где: Dublin Репутация: 24 Всего: 538 |
Очень неправильное желание. Это на тестовой базе, с одним пользователем и маленькими блобами, поиск занимает 1-2 секунды, а в реальности он возрастет на порядок. Но если все же решишь писать сам посмотри эту статью. Пример поиска по блобу там есть, осталось сделать его нечуствительным к регистру. -------------------- Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it. |
|||
|
||||
| MrKit |
|
|||
|
Новичок Профиль Группа: Участник Сообщений: 21 Регистрация: 18.1.2007 Где: Москва Репутация: нет Всего: нет |
У меня и будет 1 пользователь. Размеры blob я привел сразу. А вот насколько поиск замедлится при таких темпах, скажем, через полгода?... За статью спасибо, уже неск. дней открыта в браузере, все никак не успеваю прочитать.  |
|||
|
||||
| LSD |
|
|||
|
Leprechaun Software Developer Профиль Группа: Модератор Сообщений: 15718 Регистрация: 24.3.2004 Где: Dublin Репутация: 24 Всего: 538 |
Если ты знаешь темпы роста базы, то посчитай сколько будет записей через год. И протестируй на таком объеме данных.
-------------------- Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it. |
|||
|
||||
|
|
| Правила форума "Общие вопросы по базам данных" | |
|
|
Данный форум предназначен для обсуждения вопросов о базах данных не попадающих под тематику других форумов:
Данный форум не предназначен для:
Если вы не соблюдаете эти правила, не удивляйтесь потом не найдя свою тему/сообщение.
Полезные советы: Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, LSD, Zloxa. |
| 0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей) | |
| 0 Пользователей: | |
| « Предыдущая тема | СУБД, общие вопросы | Следующая тема » |
[ Время генерации скрипта: 0.0465 ] [ Использовано запросов: 22 ] [ GZIP включён ]
Реклама на сайте Информационное спонсорство
|
|
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности Powered by Invision Power Board(R) 1.3 © 2003 IPS, Inc. |