ReSQL.ru
     
powered by simpleCommunicator - 2.0.53     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Почему селект выполняется быстро а delete долго?
9 сообщений из 9, страница 1 из 1
Почему селект выполняется быстро а delete долго?
    #39698010
sstatistic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
sstatistic
Гость
Добрый день.

Есть запрос:



Код: sql
1.
SELECT datebegin FROM my_table WHERE datebegin <=  '2018-04-18'



план у него EXPLAIN показывает вот такой:

Код: sql
1.
2.
"Index Only Scan using my_table_datebegin_idx on my_table  (cost=0.56..209024.87 rows=235499 width=4)"
"  Index Cond: (datebegin <= '2018-04-18'::date)"





При этом, удаление по такому же условию идет оооочень долго (несколько суток).

Код: sql
1.
EXPLAIN DELETE FROM my_table WHERE datebegin <=  '2018-04-18'



План:

Код: sql
1.
2.
3.
4.
5.
"Delete on my_table  (cost=8485.68..486992.61 rows=235499 width=6)"
"  ->  Bitmap Heap Scan on my_table  (cost=8485.68..486992.61 rows=235499 width=6)"
"        Recheck Cond: (datebegin <= '2018-04-18'::date)"
"        ->  Bitmap Index Scan on my_table_datebegin_idx  (cost=0.00..8426.81 rows=235499 width=0)"
"              Index Cond: (datebegin <= '2018-04-18'::date)"







Я так понимаю что постгрес всю таблицу просматривает на этапе Recheck Cond.

Скажите, можно ли как-то ускорить удаление?
...
Рейтинг: 0 / 0
04.09.2018, 18:19
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39698019
jan2ary
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
jan2ary
Участник
sstatistic,

Предлагаю начать с подумать над причинами Index Only Scan в селекте.
...
Рейтинг: 0 / 0
04.09.2018, 18:22
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39698024
sstatistic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
sstatistic
Гость
jan2arysstatistic,

Предлагаю начать с подумать над причинами Index Only Scan в селекте.


Ну там-то все понятно.

Он усё берет из индекса.



А почему удаление так долго идет?
...
Рейтинг: 0 / 0
04.09.2018, 18:27
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39698050
Melkij
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Melkij
Участник
sstatistic,

выберите какую-нибудь одну запись и посмотрите на её удаление с explain (analyze,buffers) delete ...
Полагаю у вас там какие-нибудь триггера или FK время тратят
...
Рейтинг: 0 / 0
04.09.2018, 19:09
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39698053
Leonid Kudryavtsev
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Leonid Kudryavtsev
Участник
Про PostgreSQL не знаю, но на Oracle слова

Bitmap Index

и удаление/изменения данных меня бы испугали. Bitmap индексы не предназначены для активных операций изменения
...
Рейтинг: 0 / 0
04.09.2018, 19:12
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39698339
Павел Лузанов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Павел Лузанов
Участник
Леонид,

В PostgreSQL нет bitmap индексов. Но сканирование по индексу может выполняться с предварительным построением битовой карты, чтобы на первом проходе (bitmap index scan) построить список страниц, где есть интересующие строки, а второй проход (bitmap heap scan) делать уже только по этим страницам с перепроверкой условия (recheck condition).

2TC,

Оба приведенных плана вроде разумные.
Поэтому что-то не так идет при удалении, см. пост от Melkij.
Еще может блокировка какая висит сутками. В общем нужно искать.
...
Рейтинг: 0 / 0
05.09.2018, 12:10
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39698644
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
вообще удаление и выборка совершенно разные операции. Даже при одинаковых планах.
прочитай про MVCC в постргресе - что он делает при делите или апдейте, там много всего.
p.s. не говоря уже о FK и тригерах да
...
Рейтинг: 0 / 0
05.09.2018, 16:56
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39698740
jan2ary
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
jan2ary
Участник
sstatistic,

А сколько строк удаляется, и сколько должно остаться? Может проще перенести нужные данные в новую таблицу, а старую просто дропнуть?
...
Рейтинг: 0 / 0
05.09.2018, 20:30
| Ответить | Цитировать | Написать  
Почему селект выполняется быстро а delete долго?
    #39699228
Владимир Затуливетер
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владимир Затуливетер
Участник
Ну как бы логично что удаление идет дольше.
Select просто данные читает, они могут быть и закешированы.
А delete делает изменения, т.е. нужно какие-то страницы обновить, а это уже медленная операция.

Рассмотрите еще вариант удаления по N записей за раз, это не будет быстрее, но каждая пачка будет удаляться быстро и не будет ничего блокировать на долго.
...
Рейтинг: 0 / 0
06.09.2018, 19:16
| Ответить | Цитировать | Написать  
9 сообщений из 9, страница 1 из 1
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Почему селект выполняется быстро а delete долго?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=53&msg=39698740&tid=1995603]:
 0ms
get settings:
 8ms
get forum list:
 13ms
check forum access:
 3ms
check topic access:
 3ms
track hit:
 124ms
get topic data:
 12ms
get forum data:
 3ms
get page messages:
 65ms
get tp. blocked users:
 2ms
others: 271ms
total:  504ms
созд. / загр.: 504ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]