Sql в Qt (конкретно SQLite)

[Bepec]

Уважаемые господа, ответьте на простой вопрос.

QSqlQuery поддерживает множественную вставку в таблицы? Или нет?

PS судя по моему бытию, не поддерживает, что очень странно. Или может есть какой обходной способ множественного добавления?

[Странник]

Есть такой вариант.

bool QSqlQuery::execBatch ( BatchExecutionMode mode = ValuesAsRows )
Executes a previously prepared SQL query in a batch. All the bound parameters have to be lists of variants. If the database doesn't support batch executions, the driver will simulate it using conventional exec() calls.

[Bepec]

Хм. печальненько что стандартный оператор не поддерживается. Попробую завтра с утреца (рабочий проект).

Огромное спасибо, даже и не подумал что функционал будет так спрятан.

[carrygun]

execBatch() вроде бы не поддерживается ни одним из драйверов бд в Qt. Там в сырцах банальная циклическая вставка, как написано в описании.

[Bepec]

Увидим попозже через часика полтора

[Странник]

execBatch() вроде бы не поддерживается ни одним из драйверов бд в Qt. Там в сырцах банальная циклическая вставка, как написано в описании.

SQLITE не поддерживает, да. Но ни одним - это вы погорячились. Поддержка этой фичи есть, к примеру, у OCI. Других действительно не припомню.

Хм. печальненько что стандартный оператор не поддерживается. Попробую завтра с утреца (рабочий проект).

Стандартный - это уровня SQL? Тогда все определяется непосредственно SQLITE, QSqlQuery вообще никаким боком. Многострочный INSERT поддерживается SQLITE с версии что-то около 3.7.11. В моем Qt 5.0.1, к примеру, из коробки идет версия 3.7.7, так что пряники пока недоступны. Как вариант, если очень уж хочется, можно сделать грязный хак:

Код:

INSERT INTO tableName(col1, col2)
SELECT 'val1.1', 'val1.2'
UNION SELECT 'val2.1', 'val2.2'
UNION SELECT 'val3.1', 'val3.2'

[Bepec]

Да, драйверы Qt для sqlite не поддерживают множественной вставки.

Приблизительное сравнение возможностей драйвера Qt и простого подключения библиотеки в проект.

Добавление 13000 хешей файлов:

QSqlQuery - 1760896 мс (29 минут)
sqlite3 - 146 мс(эээ... ноу минут)

PS а я то думал, что это sql такой тормозной

[Пантер]

Bepec, transaction юзал?

[Bepec]

Конечно. Все добавления шли в транзакции.  (в QSqlQuery)
В случае с sqlite транзакции не использовались. (недоработочка)

PS это пока первое впечатление, сейчас создам тестовый проектик на оба случая. А то мб действительность отличается

[Странник]

советую погуглить на тему медленной вставки SQLITE, узнаете много нового.

[Bepec]

Хм. А на чистом проекте показывает практически одинаковые результаты

Странно сие. Буду искать проблемку

PS гуглил уже, включал различные режимы, отрубал журнал. Выигрыш был, но несущественный.

[Пантер]

Мне для ускорения вставки помогло удаление всех индексов перед вставкой и создание их после.

[fuCtor]

Да, драйверы Qt для sqlite не поддерживают множественной вставки.

Приблизительное сравнение возможностей драйвера Qt и простого подключения библиотеки в проект.

Добавление 13000 хешей файлов:

QSqlQuery - 1760896 мс (29 минут)
sqlite3 - 146 мс(эээ... ноу минут)

PS а я то думал, что это sql такой тормозной

Какие-то нереальные цифры (если конечно не считаете хэши в реалтайме) о_О у себя перегон записей (14000 шт) из одной БД (Mysql) в Sqlite, пачками по 500шт (обернуто в одну транзакцию) c промежуточной обработкой, занимает 15-20сек. Тут больше затраты на сеть уходят, чем на sqlte.
Индексов нет, добавляются потом.

[Bepec]

Да, у меня там был маленький просчёт в замерах.

Но тем больше моя радость, когда был показан приятный результат