ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / count(*) идет крайне медленно
16 сообщений из 16, страница 1 из 1
count(*) идет крайне медленно
    #38985580
Alexey Agafonov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexey Agafonov
Участник
Всем привет.

Есть две базы - MS SQL и postgree. Структуры абсолбтно идентичные, до назания индексов и даже регистра. После миграции данных

Код: sql
1.
select count(*) from "Contract"


К примеру на MS SQL идет несколько секунд (59 млн записей), на Postrge несколько минут. В чем может быть причина? Так со всеми таблицами.
...
Рейтинг: 0 / 0
17.06.2015, 11:38
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985614
Фотография Щукина Анна
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Щукина Анна
Участник
Alexey Agafonov,

"железо" по производительности сопоставимо?
планы запросов чего показывают?
...
Рейтинг: 0 / 0
17.06.2015, 11:56
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985621
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
Alexey AgafonovВсем привет.

Есть две базы - MS SQL и postgree. Структуры абсолбтно идентичные, до назания индексов и даже регистра. После миграции данных

Код: sql
1.
select count(*) from "Contract"


К примеру на MS SQL идет несколько секунд (59 млн записей), на Postrge несколько минут. В чем может быть причина? Так со всеми таблицами.
абсолютно ли одинаковы структуры? кластерные индексы никто не отменял. Плюс размер кэша - что в мс влезло, в pg может не влезть.
Ну и планы в студию!
...
Рейтинг: 0 / 0
17.06.2015, 12:01
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985728
Alexey Agafonov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexey Agafonov
Участник
В планах PG я плохо разбираюсь, есть что-то подробнее, чем этот? Вот они.
...
Рейтинг: 0 / 0
17.06.2015, 12:57
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985730
Alexey Agafonov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexey Agafonov
Участник
...
Рейтинг: 0 / 0
17.06.2015, 12:58
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985732
Alexey Agafonov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexey Agafonov
Участник
...
Рейтинг: 0 / 0
17.06.2015, 12:58
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985742
Alexey Agafonov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexey Agafonov
Участник
Код: sql
1.
2.
3.
4.
CREATE NONCLUSTERED INDEX [IX_Contact__SupplierUid] ON [dbo].[Contact]
(
	[SupplierUid] ASC
)WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, SORT_IN_TEMPDB = OFF, DROP_EXISTING = OFF, ONLINE = OFF, ALLOW_ROW_LOCKS = ON, ALLOW_PAGE_LOCKS = ON)
...
Рейтинг: 0 / 0
17.06.2015, 13:02
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985749
tanglir
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
tanglir
Участник
Alexey AgafonovВ планах PG я плохо разбираюсь, есть что-то подробнее, чем этот? Вот они.

Тут видно фулскан, а в мсскл индекс используется.
ЗЫ. Про "поподробнее" - см. explain
...
Рейтинг: 0 / 0
17.06.2015, 13:07
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985774
Alexey Agafonov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexey Agafonov
Участник
Сделал. Интересно то, что ни JSON ни XML форматы ничего не дают (. Пусто. В обычный вот

Код: sql
1.
EXPLAIN select cast('Contact' as varchar(255)) n, cast(count(*) as bigint) cnt from "Contact";


Код: plaintext
1.
2.
"Aggregate  (cost=55606.51..55606.52 rows=1 width=0)"
"  ->  Seq Scan on "Contact"  (cost=0.00..50447.61 rows=2063561 width=0)"
...
Рейтинг: 0 / 0
17.06.2015, 13:24
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985784
tanglir
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
tanglir
Участник
tanglirТут видно фулсканА хотя он тут и должен быть, идеология-то не поменялась:
https://wiki.postgresql.org/wiki/Slow_Counting
http://www.quora.com/How-can-I-optimize-count-queries-in-PostgreSQL
http://postgresql.nabble.com/Why-count-doest-use-index-tp3408241p3411320.html
...
Рейтинг: 0 / 0
17.06.2015, 13:33
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985903
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
Alexey Agafonov
Код: sql
1.
2.
3.
4.
CREATE NONCLUSTERED INDEX [IX_Contact__SupplierUid] ON [dbo].[Contact]
(
	[SupplierUid] ASC
)WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, SORT_IN_TEMPDB = OFF, DROP_EXISTING = OFF, ONLINE = OFF, ALLOW_ROW_LOCKS = ON, ALLOW_PAGE_LOCKS = ON)



index only scan появился в пг недавно - погуглите версию с которой и сравните со своей.
А еще различие - мсскл индексирует null значения, а остальные субд (и пг в том числе) нет.
...
Рейтинг: 0 / 0
17.06.2015, 15:15
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985936
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Alexey AgafonovВсем привет.

Есть две базы - MS SQL и postgree. Структуры абсолбтно идентичные, до назания индексов и даже регистра. После миграции данных

Код: sql
1.
select count(*) from "Contract"


К примеру на MS SQL идет несколько секунд (59 млн записей), на Postrge несколько минут. В чем может быть причина? Так со всеми таблицами.

count(*) в postgres при выполнении пересчитывает все строки в таблице и эту проблемы вы не решите.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
17.06.2015, 15:47
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985943
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Ivan DurakА еще различие - мсскл индексирует null значения, а остальные субд (и пг в том числе) нет.

Как интересно а откуда вы это взяли про PostgreSQL?
На всякий случай для читателей - PostgreSQL индексирует NULL's и делает это лет 10 последних минимум если не 15.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
17.06.2015, 15:51
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985947
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Maxim Boguk
Участник
Вот кто бы мне обьяснил смысл частого и быстрого выполнения count(*) по таблице с миллионами записей?
Ну вот хоть одну реальную задачу которую этим можно решить напишите.
Я за 15 лет ни одной не видел.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
17.06.2015, 15:54
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985956
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
Maxim BogukВот кто бы мне обьяснил смысл частого и быстрого выполнения count(*) по таблице с миллионами записей?
Ну вот хоть одну реальную задачу которую этим можно решить напишите.
Я за 15 лет ни одной не видел.

--
Maxim Boguk
www.postgresql-consulting.ru
ETL тулзы иногда такие затейники - вот мой например генерит на каждую времянку select count(*).
...
Рейтинг: 0 / 0
17.06.2015, 15:58
| Ответить | Цитировать | Написать  
count(*) идет крайне медленно
    #38985959
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
Maxim BogukIvan DurakА еще различие - мсскл индексирует null значения, а остальные субд (и пг в том числе) нет.

Как интересно а откуда вы это взяли про PostgreSQL?
На всякий случай для читателей - PostgreSQL индексирует NULL's и делает это лет 10 последних минимум если не 15.

--
Maxim Boguk
www.postgresql-consulting.ru
с ораклом спутал, пардон!
...
Рейтинг: 0 / 0
17.06.2015, 16:01
| Ответить | Цитировать | Написать  
16 сообщений из 16, страница 1 из 1
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / count(*) идет крайне медленно
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=53&fpage=109&tid=1997930]:
 0ms
get settings:
 6ms
get forum list:
 10ms
check forum access:
 2ms
check topic access:
 2ms
track hit:
 15ms
get topic data:
 6ms
get forum data:
 2ms
get page messages:
 28ms
get tp. blocked users:
 1ms
others: 206ms
total:  278ms
созд. / загр.: 278ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]