ReSQL.ru
     
powered by simpleCommunicator - 2.0.53     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Данные по линку заталкивать, а не вытаскивать
14 сообщений из 14, страница 1 из 1
Данные по линку заталкивать, а не вытаскивать
    #39684989
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
Такая проблема.
insert в таблицу удаленную, а лучше create table на удаленную базу.
как это сделать питоном я знаю. а нет ли стандартных погресовых средств?
...
Рейтинг: 0 / 0
08.08.2018, 18:23
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39684990
Синий Слон
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Синий Слон
Участник
Rinka777Такая проблема.
insert в таблицу удаленную, а лучше create table на удаленную базу.
как это сделать питоном я знаю. а нет ли стандартных погресовых средств?

dblink
...
Рейтинг: 0 / 0
08.08.2018, 18:24
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39684995
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
Синий Слон,

надо чтобы select из текущей базы insert в удаленную.


SELECT dblink_build_sql_insert('foo', 'а вот тут должен быть select из текущей базы');

вот в этой месте я не понимаю как
...
Рейтинг: 0 / 0
08.08.2018, 18:32
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39685040
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
psql dbtest

SELECT dblink_exec
(
'dbname=postgres',
'INSERT INTO tbla
SELECT id, time
FROM dblink
(
''dbname=dbtest'',
''SELECT id, time FROM tblb''
)
AS t(id integer, time integer)
WHERE time > 1000;'
);
...
Рейтинг: 0 / 0
08.08.2018, 20:08
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39685073
Фотография vyegorov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
vyegorov
Участник
Rinka777,

Посмотрите на FDW.
...
Рейтинг: 0 / 0
08.08.2018, 21:26
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39685187
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
vyegorovRinka777,

Посмотрите на FDW.

спасибо, уже. не подходит
...
Рейтинг: 0 / 0
09.08.2018, 08:34
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39685875
qwwq
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
qwwq
Участник
Rinka777vyegorovRinka777,

Посмотрите на FDW.

спасибо, уже. не подходит
l/,/

а что не так ?
не ставится ?
или нужна ручная оптимизация ?


в дблинке вызовите тамошний дблинк, к своей базе.
если лень передаваемое мн-во со своей стороны форматировать в литералы.

типа

Код: sql
1.
дблинк_екзек('тама',$tama$insert into .... select * from dblink('tuta', $tutta$SElect ...... $tutta$) as t (fields_lists)$tama$)



и т.п.
...
Рейтинг: 0 / 0
10.08.2018, 09:47
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39686399
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
qwwq, там сложности с безопасностью. можно только в одну сторону данные передавать.

Код: sql
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
SELECT dblink_exec (
'dbname=postgres',
'INSERT INTO tbla
SELECT id, time
FROM dblink
(
''dbname=dbtest'',
''SELECT id, time FROM tblb''
)
AS t(id integer, time integer)
WHERE time > 1000;'
);



вот этот вариант тоже не прошел. по безопасности. и FDW с двойным линком безопасники забраковали.

в итоге решила так:

в функции на источнике открываю курсор с данными и инсертю на приемник через линк.
долго только работает. а так вроде норм.
...
Рейтинг: 0 / 0
11.08.2018, 14:39
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39686596
qwwq
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
qwwq
Участник
Rinka777,

1. используйте множественный insert .... values(...),(...),(...),(...),(...),(...),(...)
нарезав пакет на пачки штук по 10000 в одном вельюз.

1.1 или препаре -- екзекьют внутри линка.
можете иногда там же бегинить и ендить пачки, чтобы транз было поменьше.

должно стать быстрее.

2. используйте COPY (QUERY) в дблинке. (тут думать, как в "копи ту програм" от себя передаться на ту сторону в тмп например (или наоборот оттуда увидеть местный тмп) , если не хотите psql). скорее всего по безопасности не пролезете.


а почему с фдв проблемы шире чем с линком не понял. делаете там отдельную простую вьюху с правами на вставку. и все одинаково хоть с линком хоть с фдв, за исключением возможности в линке руками что-- то отоптимайзить. нет ?
...
Рейтинг: 0 / 0
12.08.2018, 20:15
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39687539
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
qwwqRinka777,


а почему с фдв проблемы шире чем с линком не понял. делаете там отдельную простую вьюху с правами на вставку. и все одинаково хоть с линком хоть с фдв, за исключением возможности в линке руками что-- то отоптимайзить. нет ?

вот это вот не поняла.
...
Рейтинг: 0 / 0
14.08.2018, 15:19
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39687646
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
и опять же
COPY таблица TO dblink ???
там же низя...
...
Рейтинг: 0 / 0
14.08.2018, 17:02
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39688091
qwwq
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
qwwq
Участник
Rinka777qwwqRinka777,


а почему с фдв проблемы шире чем с линком не понял. делаете там отдельную простую вьюху с правами на вставку. и все одинаково хоть с линком хоть с фдв, за исключением возможности в линке руками что-- то отоптимайзить. нет ?

вот это вот не поняла.
ставите фдв у себя. и храните внешние пассворд и юзера у себя в юзер-маппинге.
в случае дблинка -- то же самое -- те же секьюрные параметры у вас в строке подключения дблинк.

-- разницы никакой, за исключением гибкости.
...
Рейтинг: 0 / 0
15.08.2018, 13:39
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39688096
qwwq
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
qwwq
Участник
Rinka777и опять же
COPY таблица TO dblink ???
там же низя...
чиииво ?

сначала копи от себя ту програм в котором труба (пайп) в тмп удаленного. потом
~~дблинк (соединение, "копи фром....")

а лучше даже не линк, а сразу в пайпе пскл с пскл--копи из стдина на дестинешн. без тмп. и видимо кат как прокладка.
...
Рейтинг: 0 / 0
15.08.2018, 13:47
| Ответить | Цитировать | Написать  
Данные по линку заталкивать, а не вытаскивать
    #39688294
Фотография Rinka777
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Rinka777
Участник
qwwq,

да, да, да!!!
на приемнике таблица, на источнике FDW. удаляем и вставляем в FDW данные изоляцией транзакции REPEATABLE READ и все четко без задержек.

в мою оракловую голову никогда бы таких мыслей не пришло.
чудны дела твои, постгрес!
...
Рейтинг: 0 / 0
15.08.2018, 17:18
| Ответить | Цитировать | Написать  
14 сообщений из 14, страница 1 из 1
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Данные по линку заталкивать, а не вытаскивать
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=53&msg=39688091&tid=1995627]:
 0ms
get settings:
 10ms
get forum list:
 12ms
check forum access:
 3ms
check topic access:
 3ms
track hit:
 35ms
get topic data:
 10ms
get forum data:
 2ms
get page messages:
 46ms
get tp. blocked users:
 1ms
others: 15ms
total:  137ms
созд. / загр.: 137ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]