VPF::Бытрая вставка данных в Access - Форум программистов

Skevalt

Дата 2.1.2009, 20:56 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 48
Регистрация: 30.11.2006

Репутация: нет
Всего: 3

Доброго времени суток!
Если кто знает, посоветуйте как ускорить следующую операцию:
Имеется текстовый файл (csv), который содержит большое количество записей - порядка 100000. Данный представляют собой дату+время и значения технологических параметров. Для дальнейшей обработки информацию из множества таких файлов сливаю в базу Access, к которой подключен через ADO (TADOTable и Microsoft.Jet.OLEDB.4.0).
На данный момент парсер по-строчно разбирает каждый файл по-очереди и после обработки вставляет данные в таблицу базы данных.
Такая операция очень длительная (порядка 5 минут на файл). Как бы по другому организовать вставку данных в таблицу? До этого все данные собирались в массив записей - и было на порядок быстрее.

Код


vector<record> recs;

А сейчас собирается в таблицу:

Код


for(i = 0; i < names.size(); i++)
   {
      if(in != NULL && tabl.getTable() != NULL)
      {
         count++;
         while(csv.getLine(line) != 0)
         {
            tabl.getTable()->Insert();
            tabl.getTable()->FieldByName("Data")->AsString   = csv.getField(1).c_str();
            tabl.getTable()->FieldByName("Value")->AsFloat   = atof(csv.getField(2));
         }
         tabl.getTable()->Post();
         makeHistoryRecord("  " + names[i]);
      }
      else
         makeHistoryRecord(" " + names[i]);
      in.close();
   }

Думаю, что надо порциями загонять данные из файла в буферный массив(какой был раньше), а затем его писать в таблицу разом. Но как это сделать наиболее эффективно?
Спасибо за внимание!

0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема \| C++ Builder \| Следующая тема »