|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Всем привет, выручайте, может кто сталкивался или знает куда копать? 1С вылетает с ошибкой каждые 2 часа, потом восстанавливается сама спустя 5 мин, ошибка http://joxi.ru/eAO49R6u9Rz1er Базы 2. Бекапы 1С делаются через постгресс, но битые, при восстановлении ошибка http://joxi.ru/5mdWLvnC3MBdZr У второй базы бекапы даже не делаются, скрипт вылетает при попытке создания бекапа с ошибкой http://joxi.ru/5mdWLvnC3M9a6r При попытке произвести тестирование и исправление падает с ошибкой тут http://joxi.ru/ZrJq9djTwOxnLA При попытке выгрузить базу в dt ошибка http://joxi.ru/n2Yz9Z0Fb9aVnA PostgreSQL версии 11-5-7-1C 1С клиент серверный вариант 1С:Предприятие 8.3 (8.3.15.1830) Управление нашей фирмой, редакция 1.6 (1.6.19.160) Логи PostgreSQL прикладываю ... |
|||
:
Нравится:
Не нравится:
|
|||
23.06.2020, 09:05 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
1. Проверьте на вирусы ОС 2. Отключите антивирус 3. В логе у Вас ошибка ОС Код: sql 1.
Поэтому проверьте журналы Windows. Дополнительно покажите postgresql.conf и если есть postgresql.auto.conf ... |
|||
:
Нравится:
Не нравится:
|
|||
23.06.2020, 09:51 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Guzya 1. Проверьте на вирусы ОС 2. Отключите антивирус 3. В логе у Вас ошибка ОС Код: sql 1.
Поэтому проверьте журналы Windows. Дополнительно покажите postgresql.conf и если есть postgresql.auto.conf 2. Антивиря нет postgresql.conf и если есть postgresql.auto.conf прикладываю ... |
|||
:
Нравится:
Не нравится:
|
|||
23.06.2020, 09:58 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
1. Сколько памяти на сервере? 2. Каков примерный объем данных? 3. Что в логах Windows? 4. Какая ОС Windows? 5. Вы меняли настройки в postgresql.conf ? На вирусы проверьте. ... |
|||
:
Нравится:
Не нравится:
|
|||
23.06.2020, 10:05 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
если виндовс - сразу в морг. ятаксчитаю ... |
|||
:
Нравится:
Не нравится:
|
|||
23.06.2020, 11:36 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman если виндовс - сразу в морг. ятаксчитаю Дело не в ОС, дело в... 6000+ ошибок при развёртывании бакапа? Бакап нормальный я считаю что вы просто не понимаете что делаете и пытаетесь его накатить на существующую базу. ... |
|||
:
Нравится:
Не нравится:
|
|||
23.06.2020, 15:37 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Shweik mefman если виндовс - сразу в морг. ятаксчитаю Дело не в ОС, дело в... 6000+ ошибок при развёртывании бакапа? Бакап нормальный я считаю что вы просто не понимаете что делаете и пытаетесь его накатить на существующую базу. У него еще и одноце ((( точно в морг. ... |
|||
:
Нравится:
Не нравится:
|
|||
23.06.2020, 16:15 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas, а что это за версия: "PostgreSQL версии 11-5-7-1C " ? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.06.2020, 16:55 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Ролг Хупин, Да ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 12:58 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Shweik, при попытке создать бекап падает с ошибкой: < 2020-06-25 07:08:30.822 MSK >ERROR: invalid memory alloc request size 7247872001 < 2020-06-25 07:08:30.822 MSK >STATEMENT: COPY public._inforg15978 (_fld15979rref, _fld15980rref, _fld15981, _fld15982, _fld333) TO stdout; ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 13:01 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
хехеС похожей ошибкой столкнулись в один прекрасный момент но только при попытке загрузить базу из архивного дампа. Пляски с бубнами и настройками постгря под виндой не помогли , пришлось в экстренном порядке разворачивать слона под линуксами - там дамп загрузился. С форума одноцэ Код: python 1. 2.
... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 13:11 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Ранее спрашивал: Guzya 1. Сколько памяти на сервере? 2. Каков примерный объем данных? 3. Что в логах Windows? 4. Какая ОС Windows? 5. Вы меняли настройки в postgresql.conf ? На вирусы проверьте. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 14:54 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
У Вас сервер виртуальный, если да, то на чем? ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:19 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman, там на моей текущей ошибке только в другом регистре и закончили обсуждение Я развернул линукс, но как туда перенести базы, если они не выгружаются бекапом ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:19 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Guzya, на данный момент обычный на Windows Server 2008 R2 Enterprise Линукс поднял на виртуалке ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:21 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Guzya, 1. 32 Гб 2. Базы весят под 200 Гб 3. Не проверял 4. Windows Server 2008 R2 Enterprise 64 5. Вроде нет ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:24 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas mefman, там на моей текущей ошибке только в другом регистре и закончили обсуждение Я развернул линукс, но как туда перенести базы, если они не выгружаются бекапом Команда "бекапа" какая? ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:30 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Предлагаю попробовать: в postgresql.conf вместо Код: sql 1. 2. 3.
прописать Код: sql 1. 2. 3.
и перезагрузить postgres. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:36 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Guzya, что это даст? ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:38 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman, да я пробую штатным pgadmin4 http://joxi.ru/1A59BXJcD5NLPA ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:39 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman Dimonas mefman, там на моей текущей ошибке только в другом регистре и закончили обсуждение Я развернул линукс, но как туда перенести базы, если они не выгружаются бекапом Команда "бекапа" какая? можно попробовать поиграть с --inserts --rows-per-insert ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:41 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman mefman пропущено... Команда "бекапа" какая? можно попробовать поиграть с --inserts --rows-per-insert Без понятия что это за игры ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:47 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas mefman пропущено... можно попробовать поиграть с --inserts --rows-per-insert Без понятия что это за игры какой командой делается "бекап"? ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:51 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas Guzya, что это даст? Меняем настройки памяти для postgres. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 15:58 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 16:01 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas У вас там вызывается pg_dump. Вот и попробуйте добавить к pg_dump параметр --inserts ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 16:14 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas Попробуйте найти pg_dump по пути установки postgres. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 16:16 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Guzya Dimonas Попробуйте найти pg_dump по пути установки postgres. Не надо ничего искать. У него там команда целиком отображена. Вот ее и надо выполнить руками, добавив параметров по вкусу. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 16:21 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman Guzya пропущено... Попробуйте найти pg_dump по пути установки postgres. Не надо ничего искать. У него там команда целиком отображена. Вот ее и надо выполнить руками, добавив параметров по вкусу. Мне показалось странным, что pg_dump лежит не в postgres, а в pgAdmin. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 16:29 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Guzya mefman пропущено... Не надо ничего искать. У него там команда целиком отображена. Вот ее и надо выполнить руками, добавив параметров по вкусу. Мне показалось странным, что pg_dump лежит не в postgres, а в pgAdmin. pgAdmin на виндузе вроде со своими бинарями идет. Хз, я им не пользуюсь. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 16:55 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman Dimonas У вас там вызывается pg_dump. Вот и попробуйте добавить к pg_dump параметр --inserts Вот команда бекапа, куда добавлять? C:\Program Files\PostgreSQL\11.5-7.1C\bin\pg_dump.exe --file "D:\\backup\\21-06-2020\\333.sql" --host "localhost" --port "5432" --username "postgres" --no-password --verbose --format=c --blobs "base_am" ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 17:47 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Guzya Предлагаю попробовать: в postgresql.conf вместо Код: sql 1. 2. 3.
прописать Код: sql 1. 2. 3.
и перезагрузить postgres. Не прокатило, ошибка: < 2020-06-25 18:16:38.497 MSK >ERROR: invalid memory alloc request size 8589934587 < 2020-06-25 18:16:38.497 MSK >STATEMENT: COPY public._inforg15978 (_fld15979rref, _fld15980rref, _fld15981, _fld15982, _fld333) TO stdout; < 2020-06-25 18:16:38.568 MSK >LOG: could not receive data from client: An existing connection was forcibly closed by the remote host. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 18:25 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Еще вопрос, как это сделать: Дампы процессов СУБД можно снять утилитой procdump. Для этого можно запустить procdump на ожидание завершения процесса. При этом дамп будет снят как только процесс будет завершен (ключ -t): procdump -t -ma PID_процесса Если разрядность процесса, с которого снимается дамп, x64 то укажите дополнительно ключ «-64». Дамп будет записан в каталог откуда запускался procdump. То есть Вам необходимо выяснить, сколько процессов Postgres работает в системе и для каждого настроить procdump на ожидание завершения процесса. А как только один из них аварийно завершиться (именно аварийно, а не штатно, так как дамп будет снят в обоих случаях), будет сделан дамп который и нужно прислать нам вместе с логом postgres. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 19:40 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas Еще вопрос, как это сделать: Дампы процессов СУБД можно снять утилитой procdump. Для этого можно запустить procdump на ожидание завершения процесса. При этом дамп будет снят как только процесс будет завершен (ключ -t): procdump -t -ma PID_процесса Если разрядность процесса, с которого снимается дамп, x64 то укажите дополнительно ключ «-64». Дамп будет записан в каталог откуда запускался procdump. То есть Вам необходимо выяснить, сколько процессов Postgres работает в системе и для каждого настроить procdump на ожидание завершения процесса. А как только один из них аварийно завершиться (именно аварийно, а не штатно, так как дамп будет снят в обоих случаях), будет сделан дамп который и нужно прислать нам вместе с логом postgres. это уже вопрос дебага в виндус. безотносительно субд. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.06.2020, 20:11 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Dimonas Не прокатило, ошибка: < 2020-06-25 18:16:38.497 MSK >ERROR: invalid memory alloc request size 8589934587 < 2020-06-25 18:16:38.497 MSK >STATEMENT: COPY public._inforg15978 (_fld15979rref, _fld15980rref, _fld15981, _fld15982, _fld333) TO stdout; < 2020-06-25 18:16:38.568 MSK >LOG: could not receive data from client: An existing connection was forcibly closed by the remote host. А вы просто зайдя в нужную базу и выполнив запрос вида select * from public._inforg15978; тоже получаете ошибку? Если да то у вас или база побита уже на диске (что вероятнее) либо какие то проблемы с сервером (память битая?) что сильно менее вероятно. Если база на диске побита то ничего кроме как восстановить ее из рабочего backup нормально не сделать. Или принять что вот эта конкретная таблица у вас побита физически (и какие то данные в ней не достать) и исключить ее из backup. (если такая таблица только одна наверное это самый простой путь). ps: зная любителей 1С - у вас база случайно не с fsync=off работает(работала в прошлом)? А сбоев по электричеству не было? ... |
|||
:
Нравится:
Не нравится:
|
|||
26.06.2020, 10:02 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
Maxim Boguk, В случае, если битая выгрузить построчно через pg_dump --inserts не получится? ... |
|||
:
Нравится:
Не нравится:
|
|||
26.06.2020, 10:46 |
|
Проблема с базами на PostgreSQL. Не работает. Не бекапит. Не восстанавливает.
|
|||
---|---|---|---|
#18+
mefman Maxim Boguk, В случае, если битая выгрузить построчно через pg_dump --inserts не получится? Нет... база сначала всёравно будет пытаться вычитать (всю таблицу причем в транзакции) а потом уже писать в dump (и по пути вычитывания всей таблицы и сломается). Т.е. --inserts дают построчную загрузку но не построчную (с т.з. вычитывания данных) выгрузку. другой вопрос что можно по primary key скриптом перебрать все строчки проблемной таблицы и выгрузить ПОСТРОЧНО в новую таблицу те что получилось считать из битой таблицы (а далее уже новую таблицу dump ом выгрузить). главное построчный перебор вне транзакции делать. Проще всего такие вещи через psql + /gexec делать (вообще /gexec самое лучшее добавление в psql за последние 20 лет для dba и автоматизации). ... |
|||
:
Нравится:
Не нравится:
|
|||
26.06.2020, 11:42 |
|
|
start [/forum/topic.php?all=1&fid=53&tid=1994626]: |
0ms |
get settings: |
10ms |
get forum list: |
13ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
38ms |
get topic data: |
11ms |
get forum data: |
3ms |
get page messages: |
62ms |
get tp. blocked users: |
1ms |
others: | 12ms |
total: | 158ms |
0 / 0 |