ReSQL.ru
     
powered by simpleCommunicator - 2.0.60     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Гуру: Что быстрее delete+insert или select+update+insert ?
12 сообщений из 12, страница 1 из 1
Гуру: Что быстрее delete+insert или select+update+insert ?
    #33999410
galisha
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
galisha
Участник
Добрый день!

Postgres 8.1.3 , win.
Есть таблица с расчетными данными, все поля int и numeric, количество записей порядка 1,3 млн. Порция обновляемых данных достигает от 20 до 60 записей. Индекс по полям поиска есть.

Вот вопрос: что быстрее будет работать ?

Вариант 1: Тупой delete старой порции , потом insert новой.

Вариант 2: select старой порции, смотрим на совпадение ключей, по совпавшим делаем update, новые записи инсертим.

Примечание: расчетная программа в цикле перебирает счета и обновляет данные (все 1.3 млн записей)

Спасибо заранее
...
Рейтинг: 0 / 0
20.09.2006, 12:40
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #33999423
wbear
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
wbear
Участник
а схема
update
if rows_affected==0 then
insert
end if;

не покатит?
...
Рейтинг: 0 / 0
20.09.2006, 12:44
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #33999447
galisha
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
galisha
Участник
wbearа схема
update
if rows_affected==0 then
insert
end if;


Если это про ХП, то нет. Логика не в ХП, а в отдельном приложении.

Спасибо
...
Рейтинг: 0 / 0
20.09.2006, 12:47
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #33999569
LeXa NalBat
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
LeXa NalBat
Участник
galishaВариант 1: Тупой delete старой порции , потом insert новой.

Вариант 2: select старой порции, смотрим на совпадение ключей, по совпавшим делаем update, новые записи инсертим.Или в старой порции нет ключей, отсутствующих в новой, или для того чтобы эти варианты стали эквивалентными нужно к варианту 2 добавить "старые записи удаляем".

Голосую за первый вариант, потому что в постгресе update есть маркировка старой строки как deleted (что делается в delete), и добавление новой строки (что делается в insert).
...
Рейтинг: 0 / 0
20.09.2006, 13:13
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #33999622
galisha
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
galisha
Участник
LeXa NalBatпотому что в постгресе update есть маркировка старой строки как deleted

Т.е. любой update приводит к тому, что Postgres фактически "забывает" про старую запись. Это так ?

Это ж распухание базы будет. И это лечится кажется через VACUUM ?
...
Рейтинг: 0 / 0
20.09.2006, 13:22
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #33999661
LeXa NalBat
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
LeXa NalBat
Участник
galisha LeXa NalBatпотому что в постгресе update есть маркировка старой строки как deleted Т.е. любой update приводит к тому, что Postgres фактически "забывает" про старую запись. Это так ?
Это ж распухание базы будет. И это лечится кажется через VACUUM ?В более старых версиях постгреса было именно так, и лечилось vacuum. В восьмерке вроде бы autovacuum встроен в сервер, то есть должно лечится само. Но досконально этот вопрос не исследовал.
...
Рейтинг: 0 / 0
20.09.2006, 13:29
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #33999671
galisha
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
galisha
Участник
Большое спасибо, теперь не буду мучаться с логикой: select+update.
...
Рейтинг: 0 / 0
20.09.2006, 13:31
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #34000406
wbear
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
wbear
Участник
galisha wbearа схема
update
if rows_affected==0 then
insert
end if;


Если это про ХП, то нет. Логика не в ХП, а в отдельном приложении.

Спасибо


насколько я понимаю в отдельном приложении rows_affected тоже можно получить.


и кстати вопрос
Вариант 2: select старой порции, смотрим на совпадение ключей, по совпавшим делаем update, новые записи инсертим.

а что делаем с записями которые есть в старой порции но нет в новой?

в первом ворианте они удаляются все во втором остаются.?
...
Рейтинг: 0 / 0
20.09.2006, 16:04
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #34000801
galisha
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
galisha
Участник
Там поля со значениями апдейтятся в NULL, а ключевые остаются без изменений.
...
Рейтинг: 0 / 0
20.09.2006, 17:30
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #34005034
Funny_Falcon
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Funny_Falcon
Участник
Проголосую за select+update+insert.
Как-то делал игрушечный тест (без селекта правда - delete+insert vs update) - update оказался быстрее.

Но вообще тестить надо на реальных данных.
...
Рейтинг: 0 / 0
22.09.2006, 09:50
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #34005086
glebofff
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
glebofff
Участник
galisha
Примечание: расчетная программа в цикле перебирает счета и обновляет данные (все 1.3 млн записей)


Лучше обновлять счета по факту (события). Триггерами. А вот простой пример без всяких select (делаем insert и ни о чём больше не думаем):

Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
create table counters
(
  id int4 not null default  0 ,
  counter int4 not null default  0 ,
  primary key (id)
);

create function counters_before () returns trigger as
'
declare
  numrows int4;
begin
  update counters set counter = counter + new.counter where id = new.id;
  get diagnostics numrows = row_count;
  if numrows = 0 then
    return new;
  end if;
  return null;
end;
'
language plpgsql;

create trigger counters_trig 
before insert on counters for each row execute procedure counters_before ();

Да, и логику всё-таки лучше вернуть в БД. :-)
...
Рейтинг: 0 / 0
22.09.2006, 10:04
| Ответить | Цитировать | Написать  
Гуру: Что быстрее delete+insert или select+update+insert ?
    #34010456
galisha
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
galisha
Участник
Funny_FalconНо вообще тестить надо на реальных данных
Проверил: delete+insert отработал немного быстрее. Там правда еще много разных вещей попутно делается - но тенденция к ускорению есть для варианта delete+insert.

glebofffДа, и логику всё-таки лучше вернуть в БД Иногда это не получается, требования другие.

Всем большое спасибо !
...
Рейтинг: 0 / 0
25.09.2006, 16:49
| Ответить | Цитировать | Написать  
12 сообщений из 12, страница 1 из 1
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Гуру: Что быстрее delete+insert или select+update+insert ?
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]