Как ускорить создание таблицы (через QSqlQuery)? Опции

[Rocky]

Создаю таблицу и заполняю ее посредством запроса INSERT. В таблицы больше 1к записей и заполнение идет очень долго... Можно ли как-нибудь ускорить запись? Оптимизировать это дело?

Да, кто знает, обязательно ли перед каждым вызовом QSqlQuery::exec использовать QSqlQuery::prepare (все это происходит в цикле)? Или QSqlQuery::prepare достаточно вызывать один раз перед циклом, а внутри делать только QSqlQuery::bindValue и затем QSqlQuery::exec?

Спасибо!

[Litkevich Yuriy]

обязательно ли перед каждым вызовом QSqlQuery::exec использовать QSqlQuery::prepare (все это происходит в цикле)?

да он для того и предназначен, чтобы его вынести можно было из цикла:

query.prepare("SELECT F_GROUP FROM APPUSER WHERE (F_ID = :id)");
for(...)
{
    query.bindValue(":id", id);
    if (! query.exec())
    {
        // Обработать ошибку
    }
}

Создаю таблицу и заполняю ее посредством запроса INSERT. В таблицы больше 1к записей и заполнение идет очень долго...

Что за СУБД и сколько по времени это занимает?

[Rocky]

СУБД SQLite 3.
В базе 11 таблиц, общее число вставляемых записей около 5.3к. 5.3к записей вставляется 18 мин (prepare я уже вынес из тел циклов). Задержек в других местах в коде нет точно (есть только цикл, внутри которого bindValue и exec).

Когда работал через ODBC с MS Access, было все намнооого быстрее (4к записей около минуты)...

[Litkevich Yuriy]

Когда работал через ODBC с MS Access, было все намнооого быстрее

ну ты сравнил, Лайт придуман для учебых целей, да нвские мелкие настройки хранить. 4К записей для него слишком жирно.

[Rocky]

А есть какой-нибудь "легкий" вариант, т.е. чтобы база была под рукой (рядом с прогой), но кроме драйвера ничего не требовалось устанавливать? (никаких серверов БД и пр).

[trdm]

Создаю таблицу и заполняю ее посредством запроса INSERT. В таблицы больше 1к записей и заполнение идет очень долго... Можно ли как-нибудь ускорить запись? Оптимизировать это дело?

_db.transaction();
+
_db.commit();

bool transaction ()
и т.п.

Сообщение отредактировал trdm - 16.2.2009, 17:00

[Litkevich Yuriy]

trdm, транзакция не ускоряет процесс, она лишь делает его атомарным

А есть какой-нибудь "легкий" вариант, т.е. чтобы база была под рукой (рядом с прогой), но кроме драйвера ничего не требовалось устанавливать? (никаких серверов БД и пр).

можно FireBird или MySQL использовать, у них есть встраиваемые версии, dll'ку подкладываешь в каталог приложения и все.
Обе эти СУБД хранять БД в виде одного файла (бывают конечно и многофайловые БД, но это уже другая история)

[trdm]

trdm, транзакция не ускоряет процесс, она лишь делает его атомарным

еще как ускоряет.. была такая же проблема, выручила транзакция.

[panter_dsd]

Полностью согласен с trdm, сам сталкивался. Соотношения времени огромные. У меня до использования транзакции работа занимала минуты три, после использования онной стало несколько секунд. О как.

[Константин]

можно FireBird или MySQL использовать, у них есть встраиваемые версии, dll'ку подкладываешь в каталог приложения и все.
Обе эти СУБД хранять БД в виде одного файла (бывают конечно и многофайловые БД, но это уже другая история)

встроенный мускуль хранит базы так же, как и полноценный и с ним чуть больше гемора...