ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Не выполняется pg_basebackup
37 сообщений из 37, показаны все 2 страниц
  все  
Не выполняется pg_basebackup
    #39179306
worsvch
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
worsvch
Участник
Запускаю на выполнение
pg_basebackup.exe -U postgres -W --dbname=dbase -D c:\pg_backup
но выходит сообщение
pg_basebackup: каталог "c:\Program Files\PostgreSQL\9.4\data" существует, но он не пуст
и pg_basebackup не выполняется
Подскажите что нужно подправить
PS
postgres 9.4
Windows 7
...
Рейтинг: 0 / 0
25.02.2016, 20:49
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179419
Фотография Misha Tyurin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Misha Tyurin
Участник
http://www.postgresql.org/docs/9.5/static/app-pgbasebackup.html

-D directory
Directory to write the output to

это папка КУДА писать, она не пустая, и он не хочет дальше

The directory may already exist, but it is an error if the directory already exists and is not empty .
...
Рейтинг: 0 / 0
26.02.2016, 00:44
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179529
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
Код: vbnet
1.
2.
3.
4.
5.
6.
$ pg_basebackup -h 10.1.2.3 -U replication -D - -Ft -x -vP | tar -xzf -
pg_basebackup: could not initiate base backup: ERROR:  syntax error

gzip: stdin: unexpected end of file
tar: Child returned status 1
tar: Error is not recoverable: exiting now



а тут что не так?

или тут:

Код: vbnet
1.
2.
$ pg_basebackup -h 10.1.2.3 -U replication -D /var/lib/postgresql/backup -Ft -z -P
pg_basebackup: could not initiate base backup: ERROR:  syntax error



или так
Код: vbnet
1.
2.
$ pg_basebackup -x --format=tar -h 10.1.2.3 -U replication -D - | bzip2 -9 > /var/lib/postgresql/backup.tar.bz2
pg_basebackup: could not initiate base backup: ERROR:  syntax error
...
Рейтинг: 0 / 0
26.02.2016, 09:53
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179545
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
И ещё вопросик возник: как вывести в лог действия pg_basebackup?
...
Рейтинг: 0 / 0
26.02.2016, 10:11
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179592
worsvch
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
worsvch
Участник
Misha Tyurin,

В том то и дело что она пустая
...
Рейтинг: 0 / 0
26.02.2016, 11:15
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179643
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
worsvchMisha Tyurin,

В том то и дело что она пустая

А этот каталог пустой c:\pg_backup ?
...
Рейтинг: 0 / 0
26.02.2016, 11:56
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179716
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_dana,

Попробуйте без извращений сделать просто
pg_basebackup -h 10.1.2.3 -U replication -D /var/lib/postgresql/backup
и если это работает - уже разбирайтесь дальше что у вас не так и почему.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
26.02.2016, 12:36
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179870
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
Maxim Boguk,
Без извращений работает. С извращениями нет.
Вот я и начал разбираться и пришёл в тупик.

Я утилиту pg_basebackup запускаю на стороне бэкап сервера, 10.1.2.3 - адрес сервера БД, которую нужно бэкапить.

Ищу в гугле, беру рабочие вроде как примеры и они у меня не отрабатывают.

И ещё....просьба. Я не нашёл в гугл, как вывести в лог информацию средствами самого Pg_basebackup.
...
Рейтинг: 0 / 0
26.02.2016, 14:34
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39179981
Фотография Misha Tyurin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Misha Tyurin
Участник
> Ищу в гугле

ндааа...

а документация вам где не хватает?
http://www.postgresql.org/docs/9.5/static/app-pgbasebackup.html
-v
--verbose

вы чего-то понаписали, какие-то флаги, tar в пайп, кому это ваще интересно, какую задачу решаете?

попробуйте хоть что-то запустить (примеры есть в доке), сделайте тестовый кластер, начните от простого, подбавляйте потом флагов, когда вам его-то надо будет еще.
...
Рейтинг: 0 / 0
26.02.2016, 15:54
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180028
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_danaMaxim Boguk,
Без извращений работает. С извращениями нет.
Вот я и начал разбираться и пришёл в тупик.

Я утилиту pg_basebackup запускаю на стороне бэкап сервера, 10.1.2.3 - адрес сервера БД, которую нужно бэкапить.

Ищу в гугле, беру рабочие вроде как примеры и они у меня не отрабатывают.

И ещё....просьба. Я не нашёл в гугл, как вывести в лог информацию средствами самого Pg_basebackup.

А для чего вам это надо? Если нужен просто компактный backup базы - используйте pg_dump (он на порядок меньше места будет требовать). Если копию базы или реплику - то зачем вам сжатый tar?

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
26.02.2016, 16:33
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180087
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
Misha Tyurin> Ищу в гугле

ндааа...

а документация вам где не хватает?
http://www.postgresql.org/docs/9.5/static/app-pgbasebackup.html
-v
--verbose

вы чего-то понаписали, какие-то флаги, tar в пайп, кому это ваще интересно, какую задачу решаете?

попробуйте хоть что-то запустить (примеры есть в доке), сделайте тестовый кластер, начните от простого, подбавляйте потом флагов, когда вам его-то надо будет еще.
документации мне не хватает. Иначе бы не спрашивал.
Про -v я знаю, как и про -P.
Но у меня бэкап будет в кроне запускаться, и мне нужен текстовый лог, файл, который я себе буду ежедневно на почту отправлять.
...
Рейтинг: 0 / 0
26.02.2016, 17:37
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180089
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
Maxim Bogukinsonicum_danaMaxim Boguk,
Без извращений работает. С извращениями нет.
Вот я и начал разбираться и пришёл в тупик.

Я утилиту pg_basebackup запускаю на стороне бэкап сервера, 10.1.2.3 - адрес сервера БД, которую нужно бэкапить.
Ищу в гугле, беру рабочие вроде как примеры и они у меня не отрабатывают.
И ещё....просьба. Я не нашёл в гугл, как вывести в лог информацию средствами самого Pg_basebackup.

А для чего вам это надо? Если нужен просто компактный backup базы - используйте pg_dump (он на порядок меньше места будет требовать). Если копию базы или реплику - то зачем вам сжатый tar?

--
Maxim Boguk
www.postgresql-consulting.ru


Это задача высшего руководства. Использовать именно pg_basebackup. Формировать лог-файл и высылать его
на почту руководству и администратору.
...
Рейтинг: 0 / 0
26.02.2016, 17:38
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180094
Фотография Misha Tyurin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Misha Tyurin
Участник
> высшего руководства

ну тогда понятно...
боюсь даже представить )

шлите им "ОК"
...
Рейтинг: 0 / 0
26.02.2016, 17:41
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180100
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
Misha Tyurin> высшего руководства

ну тогда понятно...
боюсь даже представить )

шлите им "ОК"
нужен полный лог, время потраченное на выполнение бэкапа.

Как можно получить лог?

я например создал файл backup.sh со следующим содержимым:
Код: vbnet
1.
2.
#!/bin/sh
/usr/bin/pg_basebackup -x -Pv -h 10.1.12.228 -U replication -D /backup



и запустил его так:
Код: xml
1.
./backup.sh > backup_log.log



ожидая увидеть в файле backup_log.log результат вывода. но там пусто, файл весит 0.

помогите, пожалуйста получить лог.
...
Рейтинг: 0 / 0
26.02.2016, 17:52
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180159
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_danaMisha Tyurin> высшего руководства

ну тогда понятно...
боюсь даже представить )

шлите им "ОК"
нужен полный лог, время потраченное на выполнение бэкапа.

Как можно получить лог?

я например создал файл backup.sh со следующим содержимым:
Код: vbnet
1.
2.
#!/bin/sh
/usr/bin/pg_basebackup -x -Pv -h 10.1.12.228 -U replication -D /backup



и запустил его так:
Код: xml
1.
./backup.sh > backup_log.log



ожидая увидеть в файле backup_log.log результат вывода. но там пусто, файл весит 0.

помогите, пожалуйста получить лог.

1 - уберите -P
2 - подождите окончания процесса и получите лог.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
26.02.2016, 19:06
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180177
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
1 - уберите -P
2 - подождите окончания процесса и получите лог.

--
Maxim Boguk
www.postgresql-consulting.ru
Код: plsql
1.
2.
3.
4.
# ./backup.sh > backup_log.log
transaction log start point: 5/6B000028 on timeline 1
transaction log end point: 5/6B0199D0
pg_basebackup: base backup completed



# cat backup.sh
Код: plsql
1.
2.
#!/bin/sh
/usr/bin/pg_basebackup -x -v -h 10.1.12.228 -U replication -D /backup


# ls -lh backup_log.log
Код: php
1.
-rw-r--r-- 1 root root 0 Feb 26 19:14 backup_log.log


лог пустой!
...
Рейтинг: 0 / 0
26.02.2016, 19:26
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180184
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
Но! у меня уже проблема стала проясняться.

Код: vbnet
1.
pg_basebackup -U replication -h 127.0.0.1 -D /var/lib/postgresql/backup -Ft -z -P



команда на сервере БД отрабатывает без ошибки!

Но такая же команда - меняется только IP - на сервере бэкапов выдаёт ошибку.

на сервере БД

$ pg_basebackup -U replication -h 127.0.0.1 -D /var/lib/postgresql/backup -Ft -z -P
Код: plsql
1.
2.
14872387/14872387 kB (100%), 1/1 tablespace
NOTICE:  pg_stop_backup complete, all required WAL segments have been archived


------------------------------------------------------------------------------------------------------

теперь те же ключи, но на сервере бэкапов . Указываем IP сервера БД:

# pg_basebackup -U replication -h 10.1.12.228 -D /var/lib/postgresql/backup -Ft -z -P

pg_basebackup: could not initiate base backup: ERROR: syntax error

у меня единственное предположение, что может связано как-то с доступом и pg_hba.conf.
Но тогда почему в сообщение об ошибке, говорится, что синтаксис не правильный?

я этого не понимаю, увы...
...
Рейтинг: 0 / 0
26.02.2016, 19:32
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180282
worsvch
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
worsvch
Участник
insonicum_dana,
c:\Program Files\PostgreSQL\9.4\bin>pg_basebackup.exe -x -Pv -h localhost -v -U postgres -D c:\pg_backup
стартовая точка журнала транзакций: 2/7F000028 на линии времени 1
pg_basebackup: каталог "c:\Program Files\PostgreSQL\9.4\data" существует, но он не пуст

хотя на самом деле каталог c:\pg_backup - пуст
...
Рейтинг: 0 / 0
26.02.2016, 21:49
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180284
worsvch
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
worsvch
Участник
смущает сообщение:
каталог "c:\Program Files\PostgreSQL\9.4\data" существует, но он не пуст
ведь у меня указан каталог c:\pg_backup
...
Рейтинг: 0 / 0
26.02.2016, 21:50
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180288
worsvch
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
worsvch
Участник
В логах увидел следующее сообщение:
",,,,,,,,,"pg_basebackup"
2016-02-26 23:47:18.302 YEKT,"postgres","",7596,"::1:55230",56d09db3.1dac,2,"sending backup ""pg_basebackup base backup""",2016-02-26 23:47:15 YEKT,3/0,0,ОШИБКА,XX000,"в процессе базового резервного копирования не удалось передать данные, копирование прерывается",,,,,,,,,"pg_basebackup"
2016-02-26 23:47:18.302 YEKT,"postgres","",7596,"::1:55230",56d09db3.1dac,3,"idle",2016-02-26 23:47:15 YEKT,3/0,0,ВАЖНО,08006,"подключение к клиенту потеряно",,,,,,,,,"pg_basebackup"
...
Рейтинг: 0 / 0
26.02.2016, 21:55
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180386
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_dana1 - уберите -P
2 - подождите окончания процесса и получите лог.

--
Maxim Boguk
www.postgresql-consulting.ru
Код: plsql
1.
2.
3.
4.
# ./backup.sh > backup_log.log
transaction log start point: 5/6B000028 on timeline 1
transaction log end point: 5/6B0199D0
pg_basebackup: base backup completed



# cat backup.sh
Код: plsql
1.
2.
#!/bin/sh
/usr/bin/pg_basebackup -x -v -h 10.1.12.228 -U replication -D /backup


# ls -lh backup_log.log
Код: php
1.
-rw-r--r-- 1 root root 0 Feb 26 19:14 backup_log.log


лог пустой!

Вот весь лог который был это текст:
Код: plaintext
1.
2.
transaction log start point: 5/6B000028 on timeline 1
transaction log end point: 5/6B0199D0
pg_basebackup: base backup completed

Судя по всему pg_basebackup лог свой в stderr пишет а не в stdout. Но это уже вопрос про основы написания shell скриптов на Linux а не про postgres.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
27.02.2016, 04:20
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180387
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_danaНо! у меня уже проблема стала проясняться.

Код: vbnet
1.
pg_basebackup -U replication -h 127.0.0.1 -D /var/lib/postgresql/backup -Ft -z -P



команда на сервере БД отрабатывает без ошибки!

Но такая же команда - меняется только IP - на сервере бэкапов выдаёт ошибку.

на сервере БД

$ pg_basebackup -U replication -h 127.0.0.1 -D /var/lib/postgresql/backup -Ft -z -P
Код: plsql
1.
2.
14872387/14872387 kB (100%), 1/1 tablespace
NOTICE:  pg_stop_backup complete, all required WAL segments have been archived


------------------------------------------------------------------------------------------------------

теперь те же ключи, но на сервере бэкапов . Указываем IP сервера БД:

# pg_basebackup -U replication -h 10.1.12.228 -D /var/lib/postgresql/backup -Ft -z -P

pg_basebackup: could not initiate base backup: ERROR: syntax error

у меня единственное предположение, что может связано как-то с доступом и pg_hba.conf.
Но тогда почему в сообщение об ошибке, говорится, что синтаксис не правильный?

я этого не понимаю, увы...

Так совершенно примитивный вопрос а что показывает
pg_basebackup -V
на мастере и на реплике.
У меня сильное подозрение что у вас версии разные.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
27.02.2016, 04:22
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180388
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
worsvchinsonicum_dana,
c:\Program Files\PostgreSQL\9.4\bin>pg_basebackup.exe -x -Pv -h localhost -v -U postgres -D c:\pg_backup
стартовая точка журнала транзакций: 2/7F000028 на линии времени 1
pg_basebackup: каталог "c:\Program Files\PostgreSQL\9.4\data" существует, но он не пуст

хотя на самом деле каталог c:\pg_backup - пуст

Тут тоже более менее все ясно. Запустите psql и сделайте \db и пришлите результат.
Скорее всего у вас зачем то сделан tablespace в c:\Program Files\PostgreSQL\9.4\data.

PS: pg_basebackup пускать локально на сервере с базой не самая удачая идея на самом деле (если без -Ft).

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
27.02.2016, 04:26
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39180633
worsvch
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
worsvch
Участник
Maxim Boguk,
Список табличных пространств
Имя | Владелец | Расположение
------------+----------+--------------------------------------
pg_default | postgres |
pg_global | postgres |
test | postgres | c:\Program Files\PostgreSQL\9.4\data
(3 строки)
...
Рейтинг: 0 / 0
27.02.2016, 20:40
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39181030
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
worsvchMaxim Boguk,
Список табличных пространств
Имя | Владелец | Расположение
------------+----------+--------------------------------------
pg_default | postgres |
pg_global | postgres |
test | postgres | c:\Program Files\PostgreSQL\9.4\data
(3 строки)

Ну вот как и ожидалось. У вас объявлен tablespace в c:\Program Files\PostgreSQL\9.4\data (вообще забавная идея сама по себе).
Вот ЛОКАЛЬНЫЙ pg_basebackup и ломается.
Попробуйте разобраться с параметром командной строки
"
-T, --tablespace-mapping=OLDDIR=NEWDIR
relocate tablespace in OLDDIR to NEWDIR
" если вам именно локально Base backup Надо делать.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
29.02.2016, 02:53
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39181125
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
авторТак совершенно примитивный вопрос а что показывает
pg_basebackup -V
на мастере и на реплике.
У меня сильное подозрение что у вас версии разные.
9.4.5 и 9.5.1
версии действительно разные.
спасибо!
...
Рейтинг: 0 / 0
29.02.2016, 10:12
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39181442
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
авторСудя по всему pg_basebackup лог свой в stderr пишет а не в stdout. Но это уже вопрос про основы написания shell скриптов на Linux а не про postgres.

Можете любезно показать пример, как организовать такой вывод в лог?
...
Рейтинг: 0 / 0
29.02.2016, 14:30
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39182719
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
попробовал сделать так:

создал файл logic.sh с содержимым:

Код: plsql
1.
2.
#!/bin/sh
/jobs/backup.sh  >>& /jobs/bak_log.log



а в самом backup.sh

Код: plsql
1.
2.
3.
4.
5.
6.
7.
8.
#!/bin/sh
cd /backup/postgres_backup
rm -R backup1
echo '*******************************************************' >>/jobs/bak_log.log
date >>/jobs/bak_log.log
/usr/bin/pg_basebackup -x -v -h 10.1.3.4 -U replication -D /backup/postgres_backup/backup1
date >>/jobs/bak_log.log
echo '*******************************************************' >>/jobs/bak_log.log



в cron добавил запись:
Код: xml
1.
22 15 * * * /jobs/logic.sh


скрипт в запустился в 15:22, но бэкап не выполнил....лог не записал...
...
Рейтинг: 0 / 0
01.03.2016, 15:52
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39184103
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
insonicum_danaавторТак совершенно примитивный вопрос а что показывает
pg_basebackup -V
на мастере и на реплике.
У меня сильное подозрение что у вас версии разные.
9.4.5 и 9.5.1
версии действительно разные.
спасибо!

получается, что если разные версии, то pg_basebackup работать будет, но частично?
ведь обычный бкап проходит, не отрабатывает лишь бэкап в тар файл и сжатие.
...
Рейтинг: 0 / 0
02.03.2016, 17:21
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39184406
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_danainsonicum_danaпропущено...

9.4.5 и 9.5.1
версии действительно разные.
спасибо!

получается, что если разные версии, то pg_basebackup работать будет, но частично?
ведь обычный бкап проходит, не отрабатывает лишь бэкап в тар файл и сжатие.

Не гарантируется работа между разными major версиями для Pg_basebackup (уж очень он низкоуровневый).
Для pg_dump работа гарантируется только если версия pg_dump >= версии базы (Т.е. pg_dump от 9.4 может не работать с 9.5 а вот наоборот будет работать).

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
03.03.2016, 04:58
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39184774
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
Скажите, пожалуйста, если я делаю бэкап утилитой pg_basebackup со слейва и получаю сообщение
pg_basebackup fatal requested wal segment has already been removed.
Правильно я понимаю, что мне нужно увеличить число журналов транзакций на мастере
выставив wal_keep_segments в большее значение.

текущее значение 30
...
Рейтинг: 0 / 0
03.03.2016, 12:54
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39184788
Фотография vyegorov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
vyegorov
Участник
insonicum_dana,

Если вы хотите иметь возможность PITR, то вам надо настроить архивирование логов.

Увеличить `wal_keep_segments` можно, но вероятность получения такой ошибки остается.
...
Рейтинг: 0 / 0
03.03.2016, 12:59
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39184827
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_danaСкажите, пожалуйста, если я делаю бэкап утилитой pg_basebackup со слейва и получаю сообщение
pg_basebackup fatal requested wal segment has already been removed.
Правильно я понимаю, что мне нужно увеличить число журналов транзакций на мастере
выставив wal_keep_segments в большее значение.

текущее значение 30

Можно просто добавить --xlog-method=fetch чтобы требуемые wal подтягивались с самого начала.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
03.03.2016, 13:15
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39184847
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
авторМожно просто добавить --xlog-method=fetch чтобы требуемые wal подтягивались с самого начала.

--
Maxim Boguk
www.postgresql-consulting.ru
авторStream the transaction log while the backup is created. This will open a second connection to the server and start streaming the transaction log in parallel while running the backup.

наверное всё же stream?

Код: plsql
1.
-xlog-method=stream
...
Рейтинг: 0 / 0
03.03.2016, 13:27
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39184963
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
insonicum_danaавторМожно просто добавить --xlog-method=fetch чтобы требуемые wal подтягивались с самого начала.

--
Maxim Boguk
www.postgresql-consulting.ru
авторStream the transaction log while the backup is created. This will open a second connection to the server and start streaming the transaction log in parallel while running the backup.

наверное всё же stream?

Код: plsql
1.
-xlog-method=stream



да именно так.... не то скопировал
...
Рейтинг: 0 / 0
03.03.2016, 14:29
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39185629
insonicum_dana
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
insonicum_dana
Гость
На сервере slave БД конфиг Postgresql.conf
Код: vbnet
1.
2.
3.
4.
wal_level = hot_standby
max_wal_senders = 2 
#archive_mode = off
#archive_command = ''



на сервере бэкапов выполнял pg_basebackup с -xlog-method=stream:

Код: vbnet
1.
/usr/bin/pg_basebackup -xlog-method=stream -v -h 10.1.3.4 -U base_backup_user -D /home/backup/prod-db-slave/backup 2>&1



получил лог:
Код: vbnet
1.
2.
3.
4.
transaction log start point: 2BCF/A3C5A8D0 on timeline 1
pg_basebackup: could not get transaction log end position from server: 
ERROR:  requested WAL segment 0000000100002BCF000000A3 has already been removed
Thu Mar  3 21:42:02 MSK 2016



причина - отключенное архивирование archive_mode = off?
...
Рейтинг: 0 / 0
04.03.2016, 10:15
| Ответить | Цитировать | Написать  
Не выполняется pg_basebackup
    #39185783
ursido
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ursido
Гость
insonicum_dana,

Нет.
Причина - требуемый WAL файл удален в ходе ротации логов раньше, чем успел накатиться на слейве.
archive_mode = off на это влияет косвенно.

Проверьте значение wal_keep_segments ( http://www.postgresql.org/docs/9.4/static/runtime-config-replication.html). Чем выше значение, тем большую паузу сможет пережить потоковый слейв до указанной выше ошибки.
...
Рейтинг: 0 / 0
04.03.2016, 11:49
| Ответить | Цитировать | Написать  
37 сообщений из 37, показаны все 2 страниц
  все  
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Не выполняется pg_basebackup
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?all=1&fid=53&tid=1997382]:
 0ms
get settings:
 4ms
get forum list:
 16ms
check forum access:
 3ms
check topic access:
 3ms
track hit:
 156ms
get topic data:
 10ms
get forum data:
 2ms
get page messages:
 65ms
get tp. blocked users:
 2ms
others: 213ms
total:  474ms
созд. / загр.: 474ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]