ReSQL.ru
     
powered by simpleCommunicator - 2.0.53     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Разрушилась таблица pg_largeobject, как ее удалить?
25 сообщений из 38, страница 1 из 2
  1  все
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549083
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Добрый день,


Разрушилась таблица pg_largeobject.


Она была пустая,

При попытке подключения к БД ошибка


Код: sql
1.
ОШИБКА: не удалось открыть файл "base/20685/12090": No such file or directory



Этот файл соответсвует таблице pg_largeobject.



По идее, ее надо просто дропнуть и создать заново, она была пустой.


Но удалить мне ее не получается.


Код: sql
1.
2.
3.
4.
DROP TABLE pg_largeobject

ОШИБКА: доступ запрещён: "pg_largeobject" - это системный каталог
SQL-состояние: 42501





Пдскажите как пересоздать эту таблицу?
...
Рейтинг: 0 / 0
07.11.2017, 16:30
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549104
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Экспорт из БД не идет.

Даже 1 таблицы с указанием имени.
...
Рейтинг: 0 / 0
07.11.2017, 17:00
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549109
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
ай нид хелп
...
Рейтинг: 0 / 0
07.11.2017, 17:02
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549120
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Личинка DBAай нид хелп

Мммм вряд ли бы она разрушилась если бы она была пустая. ;)
Можете попробовать запустить базу в single user режиме и сделать truncate на pg_largeobject.
(но я бы предварительно бы сделал backup всего кластера).



PS: может проще будет сделать пустой файл base/20685/12090
...
Рейтинг: 0 / 0
07.11.2017, 17:17
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549146
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Maxim BogukЛичинка DBAай нид хелп

Мммм вряд ли бы она разрушилась если бы она была пустая. ;)
Можете попробовать запустить базу в single user режиме и сделать truncate на pg_largeobject.
(но я бы предварительно бы сделал backup всего кластера).



PS: может проще будет сделать пустой файл base/20685/12090



Обнаружил еще что файл индекса разрушился в табличке pg_largeobject_metadata.

аналогичная ошибка была на файл индекса.

сделал REINDEX TABLE pg_largeobject_metadata; - это устранило ошибку.


Однако количество записей в pg_largeobject_metadata около 1 млн.

есть подозрение что в pg_largeobject тоже были записи
...
Рейтинг: 0 / 0
07.11.2017, 17:43
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549150
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Maxim, пустой файлик подложил - вроде пока все в норме.


Большое спасибо!
...
Рейтинг: 0 / 0
07.11.2017, 17:46
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549156
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
А можно как-нибудь проверить были ли записи в таблице pg_largeobject ?
...
Рейтинг: 0 / 0
07.11.2017, 17:52
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549167
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Плохо дело, на аналогичном сервере в pg_largeobject 5 млн записей
...
Рейтинг: 0 / 0
07.11.2017, 18:04
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549175
qwwq
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
qwwq
Участник
Личинка DBAПлохо дело, на аналогичном сервере в pg_largeobject 5 млн записей

расскажите, пжалста, как вы этого добиваетесь.

то у вас пг_прок развалилась, то вот -- лаже--объекты пропали.

что вы там, кстати сказать хранили ? неужто файлики ? и почему не в bytea , а в лаже .
...
Рейтинг: 0 / 0
07.11.2017, 18:10
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549181
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
qwwqЛичинка DBAПлохо дело, на аналогичном сервере в pg_largeobject 5 млн записей

расскажите, пжалста, как вы этого добиваетесь.




Около тысячи отднотипных серверов на относительно слабом железе.
...
Рейтинг: 0 / 0
07.11.2017, 18:17
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549184
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
qwwq
что вы там, кстати сказать хранили ? неужто файлики ? и почему не в bytea , а в лаже .


Можете подробнее написать что вы имеете ввиду?
...
Рейтинг: 0 / 0
07.11.2017, 18:18
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549209
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
pg_largeobject, на скотлько я понял, хранит BLOB в себе.
...
Рейтинг: 0 / 0
07.11.2017, 19:02
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549210
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
МОжно как-нибудь запросом выяснить какие в каких таблицах используются данные из pg_largeobject?
...
Рейтинг: 0 / 0
07.11.2017, 19:09
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549211
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
и чем грозит потеря данных из pg_largeobject ?
...
Рейтинг: 0 / 0
07.11.2017, 19:11
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549301
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Личинка DBAМОжно как-нибудь запросом выяснить какие в каких таблицах используются данные из pg_largeobject?

Берем и читаем документацию по базе на предмет что там лежит и зачем. И дальше с учетом этой информации и данных о структуре базы - думаем как оно связано одно с другим.

PS: если проблема потери данных постоянно происходит то сервера однотипно неверно настроены. Или fsync=on/syncronous_commit=on забыли, или если это windows то забыли отключить write cache на диске где база.
Вот этой вот галочки на дисках с базой под WIN быть НЕ ДОЛЖНО (и тем более не должно быть второй галочки):


PPS: backups нужно делать а лучше base backup + wal archive для всех серверов.
...
Рейтинг: 0 / 0
08.11.2017, 02:18
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549302
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Личинка DBApg_largeobject, на скотлько я понял, хранит BLOB в себе.

Вот не надо blob использовать а надо нормально bytea поля делать. BLOB в pg реализации - дурной.
...
Рейтинг: 0 / 0
08.11.2017, 02:22
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549390
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Maxim Boguk,

спасибо, изучаю.
...
Рейтинг: 0 / 0
08.11.2017, 10:27
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549503
1xx1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
1xx1
Участник
Разрабы обещали это доработать, а от лобов отказаццо.
Только как оно сейчас - не очень понятно.
...
Рейтинг: 0 / 0
08.11.2017, 12:51
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549512
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Maxim BogukЛичинка DBAМОжно как-нибудь запросом выяснить какие в каких таблицах используются данные из pg_largeobject?

Берем и читаем документацию по базе на предмет что там лежит и зачем. И дальше с учетом этой информации и данных о структуре базы - думаем как оно связано одно с другим.


Прочел.

Понял вот что:

BLOB-ы разбиваются на куски и записываются в pg_largeobject кусками.
У каждого куска есть loid и pageno.

loid - это и есть номер BLOB,
а pageno - это номер страницы на которые разделен BLOB.

loid - пишется при востановлении в лог, например:

Код: sql
1.
pg_restore: восстановление большого объекта с OID 99993





Но я не понял как по loid понять к какой таблице относится конкретный BLOB.

Подскажите пожалуйста как связать loid с таблицей.
...
Рейтинг: 0 / 0
08.11.2017, 13:20
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549538
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Личинка DBAПодскажите пожалуйста как связать loid с таблицей.

очень надо
...
Рейтинг: 0 / 0
08.11.2017, 13:46
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549548
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Личинка DBAЛичинка DBAПодскажите пожалуйста как связать loid с таблицей.

очень надо

Никак в ту сторону что вы хотите (т.е. нет инфы о связи loid -> table, тем более что ничего не мешает иметь ссылку на один и тот же large object в нескольких таблицах или даже не иметь ссылки на loid ни в одной таблице)
Надо в таблице смотреть... там есть loid поле или как то еще называется и вот оно уже ссылается на oid в pg_largeobject.
...
Рейтинг: 0 / 0
08.11.2017, 14:03
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549559
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Maxim BogukЛичинка DBAпропущено...


очень надо

Никак в ту сторону что вы хотите (т.е. нет инфы о связи loid -> table, тем более что ничего не мешает иметь ссылку на один и тот же large object в нескольких таблицах или даже не иметь ссылки на loid ни в одной таблице)
Надо в таблице смотреть... там есть loid поле или как то еще называется и вот оно уже ссылается на oid в pg_largeobject.

Пытаюсь понять какие таблицы используют BLOB.

Создал скрипт создания таблиц БД pg_dump-ом.

Таблицы, которые используеют pg_largeobject должны иметь тип столбцов bytea ?
...
Рейтинг: 0 / 0
08.11.2017, 14:15
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549596
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Поэкспериментировал:

Код: sql
1.
2.
3.
4.
5.
create table test_b(id int, bbb bytea);


insert into test_b(id,bbb) VALUES (1,'dsfsdf');
insert into test_b(id,bbb) VALUES (2,pg_read_binary_file('postgresql.conf'));




Записи в test_b есть.



Но в pg_largeobject пусто:

Код: sql
1.
2.
3.
SELECT COUNT(*) FROM pg_largeobject

0





Значит не bytea а какой-то другой тип использует pg_largeobject.

Но какой?
...
Рейтинг: 0 / 0
08.11.2017, 14:42
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549623
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Личинка DBAПоэкспериментировал:

Код: sql
1.
2.
3.
4.
5.
create table test_b(id int, bbb bytea);


insert into test_b(id,bbb) VALUES (1,'dsfsdf');
insert into test_b(id,bbb) VALUES (2,pg_read_binary_file('postgresql.conf'));




Записи в test_b есть.



Но в pg_largeobject пусто:

Код: sql
1.
2.
3.
SELECT COUNT(*) FROM pg_largeobject

0





Значит не bytea а какой-то другой тип использует pg_largeobject.

Но какой?

Идем в https://www.postgresql.org/docs/10/static/lo-funcs.html
и видим что ссылка на LO из таблицы имеет тип oid.
Но вообще LO может существовать сам по себе без ссылки на него из таблиц.
...
Рейтинг: 0 / 0
08.11.2017, 15:06
| Ответить | Цитировать | Написать  
Разрушилась таблица pg_largeobject, как ее удалить?
    #39549625
Личинка DBA
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Личинка DBA
Участник
Восстановил БД рядом из файла экспорта, которому несколько дней и тогда все было в норме.

Таблица не пустая.

Там pg_largeobject не пустая, в ней 5 млн строк


Я вот думаю, можно ли файлы от этой таблицы из восстановленной БД подложить в рабочую?
...
Рейтинг: 0 / 0
08.11.2017, 15:06
| Ответить | Цитировать | Написать  
25 сообщений из 38, страница 1 из 2
  1  все
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Разрушилась таблица pg_largeobject, как ее удалить?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=53&msg=39549083&tid=1996121]:
 0ms
get settings:
 11ms
get forum list:
 15ms
check forum access:
 5ms
check topic access:
 5ms
track hit:
 61ms
get topic data:
 12ms
get forum data:
 3ms
get page messages:
 51ms
get tp. blocked users:
 1ms
others: 284ms
total:  448ms
созд. / загр.: 448ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]