Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
|
24.04.2020, 20:55:15
|
|||
|---|---|---|---|
|
|||
xml2sqlite |
|||
|
#18+
Хай, есть xml файл, 3кк записей, 30кк строк, на 1.5 гига, надо его в формат sqlite переконвертить, отчаялся и написал свою говноконвертилку, но результирующую базу формирую запросами insert спарсив из xml данные и сформировав строку запроса, работает имеено из-за инсертов очень медленно, формировать самому бинарник бд под нужный формат, как то совсем из пушки по воробьям... может кто подскажет решение толковое, перебирать конвертилки и воевать с платными не очень хочется( ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.04.2020, 21:16:53
|
|||
|---|---|---|---|
xml2sqlite |
|||
|
#18+
lamer007, выключить синхронизацию, не удалять журнал, инсертить блоками в транзакциях, будет довольно быстро. Для разовой задачи, за несколько часов справится ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.04.2020, 21:24:22
|
|||
|---|---|---|---|
xml2sqlite |
|||
|
#18+
Тут я импорт много строк делал, посмотри прагмы в начале ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.04.2020, 21:26:15
|
|||
|---|---|---|---|
xml2sqlite |
|||
|
#18+
pragma foreign_keys=ON; pragma read_uncommitted=ON; pragma synhronous=OFF; pragma journal_mode=OFF; pragma cache_size=-32678; ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
start [/forum/search_topic.php?author=alextov&author_mode=last_posts&do_search=1]: |
0ms |
get settings: |
6ms |
get forum list: |
10ms |
get settings: |
7ms |
get forum list: |
15ms |
check forum access: |
5ms |
check topic access: |
5ms |
track hit: |
194ms |
get topic data: |
9ms |
get forum data: |
2ms |
get page messages: |
38ms |
get tp. blocked users: |
1ms |
| others: | 402ms |
| total: | 694ms |
| 0 / 0 |
