Гость
Войти | Профиль | Очистить
Целевая тема:
Создать новую тему:
Автор:
Действия ...
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Непонятно долгое выполнение запроса if exists... / 19 сообщений из 19, страница 1 из 1
10.04.2018, 17:34
    #39628053
fumitox
fumitox
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
Запрос такой:
Код: sql
1.
2.
if exists (select 1 from Table1 t1 join  Table2 t2 on t1.ID = t2.ID group by t1.ID having COUNT(t1.ID)>1) 
print 1


Результат: 0 строк за 20 сек.

Код: sql
1.
2.
if exists (select 1 from Table1 t1 join  Table2 t2 on t1.ID = t2.ID group by t1.ID having COUNT(t1.ID)>2) 
print 1


Результат: 0 строк за 0 сек.

Код: sql
1.
select 1 from Table1 t1 join  Table2 t2 on t1.ID = t2.ID group by t1.ID having COUNT(t1.ID)>1


Результат: 0 строк за 0 сек.

Код: sql
1.
select 1 from Table1 t1 join  Table2 t2 on t1.ID = t2.ID group by t1.ID


Результат: 30000 строк за 0 сек.

Я вот чет не могу понять как if exists усложняет запрос?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
10.04.2018, 17:43
    #39628060
invm
invm
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitoxЯ вот чет не могу понять как if exists усложняет запрос?Никак не усложняет. Первый запрос читает данные с диска, остальные уже из кеша.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
10.04.2018, 19:25
    #39628093
fumitox
fumitox
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
invmНикак не усложняет. Первый запрос читает данные с диска, остальные уже из кеша.

Спасибо за ответ!
Почему второй запрос не читает с диска?
Где можно почитать про это? Первый раз с этим сталкиваюсь...

Я решил проблему так: having(count)>1 => having(count)>=2
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
10.04.2018, 21:33
    #39628135
invm
invm
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitoxПочему второй запрос не читает с диска?Потому что первый уже прочитал эти же данные и они теперь есть в кеше.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
10.04.2018, 21:49
    #39628141
Дедушка
Дедушка
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitox,

повыполняйте ваши запросы с холодным кешем dbcc dropcleanbuffers
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 02:18
    #39628191
fumitox
fumitox
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
Время выполнения запросов что я перечислил не зависит от последовательности, я могу проблемный запрос последним запустить, все равно он будет долго выполнятся, а остальные мгновенно...
Мне нужен был только проблемный запрос, остальные я просто изменил для наглядности.

после dbcc dropcleanbuffers - результат тот же...

Если быть совсем точным, 6 секунд выполнялся этот запрос ( без if exists мгновенно ):
Код: sql
1.
2.
if exists (select 1 from Table1 where ID in (select ID from Table2 group by ID having COUNT(ID)>1)) 
print 1



а вот этот висел 20 минут, после я его остановил ( без if exists мгновенно ):
Код: sql
1.
2.
if exists (select 1 from Table1 t1 join  Table2 t2 on t1.ID = t2.ID group by t1.ID having COUNT(t1.ID)>1) 
print 1



И я не понимаю что происходит, и дело явно не в кэше
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 08:29
    #39628227
alexeyvg
alexeyvg
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitoxИ я не понимаю что происходит, и дело явно не в кэшеДа, очень странно, конечно, от if exists не должно зависеть.
Вы планы сравните, что ли.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 09:11
    #39628242
Kopelly
Kopelly
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
ПО-моему exists ищет до первых данных, а не собирает все. За счет этого должен быть быстрее, но оптимизатор видимо думает по-другому.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 09:32
    #39628251
invm
invm
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitoxВремя выполнения запросов что я перечислил не зависит от последовательностиПланы сравнивайте.
Для exists будет генерироваться план, примерно такой как при использовании option(fast 1). И, скорее всего, таблицы там соединяются по NL.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 09:38
    #39628255
alexeyvg
alexeyvg
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
KopellyПО-моему exists ищет до первых данных, а не собирает все. За счет этого должен быть быстрее, но оптимизатор видимо думает по-другому.А, ну да, от if exists не должно зависеть, если бы запрос был с top 1
А так получается неэквивалентно, причём теоретически if exists или select top 1 должно быть быстрее, чем просто select. А на практике.... :-(
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 09:42
    #39628261
aleks222
aleks222
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
invmfumitoxВремя выполнения запросов что я перечислил не зависит от последовательностиПланы сравнивайте.
Для exists будет генерироваться план, примерно такой как при использовании option(fast 1). И, скорее всего, таблицы там соединяются по NL.

Ответ неверен.
Верный ответ: завязывайте с группировкой.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 14:04
    #39628392
fumitox
fumitox
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
Оставил запрос на ночь выполняться:
Код: sql
1.
2.
if exists (select 1 from Table1 t1 join  Table2 t2 on t1.ID = t2.ID group by t1.ID having COUNT(t1.ID)>1) 
print 1


Результат: 3 часа, 0 записей!

Сравнил планы...
Оргинал - index scan
Без if exists - parallelism, index seek
c if exists но having(count)>=2 - parallelism, index seek

В общем все модификации кроме оригинала выполняются с параллелизмом, потому и так быстро.

Вопрос... почему на оригинал не срабатывает?)))
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 14:12
    #39628397
Дедушка
Дедушка
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
статистики на обоих таблицах обновляли?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 14:23
    #39628407
fumitox
fumitox
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
Дедушка, Каждый день план обслуживания делается включая обновление статистики
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 14:54
    #39628434
Дедушка
Дедушка
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
если возможно
- приведите скрипты создания таблиц,
- сколько строк в каждой
- распределение данных (сколько у вас получается групп с count=1 и сколько >1)
- скрипт создания индекса.
попробую воспроизвести у себя...
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 15:21
    #39628468
aleks222
aleks222
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitoxВопрос... почему на оригинал не срабатывает?)))
Это оптимизатор толсто намекает на бездарно написанный запрос.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 15:26
    #39628473
dies irae
dies irae
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitoxКаждый день план обслуживания делается включая обновление статистики

а статистика с fullscan обновляется?

что если выполнить
Код: sql
1.
2.
update statistics Table1 with fullscan
update statistics Table2 with fullscan

?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 15:38
    #39628496
alexeyvg
alexeyvg
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
fumitoxСравнил планы...
Оргинал - index scan
Без if exists - parallelism, index seek
c if exists но having(count)>=2 - parallelism, index seek

В общем все модификации кроме оригинала выполняются с параллелизмом, потому и так быстро.А без if exists, но с top 1?

Видимо, хитрый оптимизатор думает, "а фигня, щас в самом начале найдётся count>1, чего мне на распараллеливание тратиться?" А там наверное мало дубликатов. для having(count)>=2 он такого предположения не делает...
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.04.2018, 16:00
    #39628526
fumitox
fumitox
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Непонятно долгое выполнение запроса if exists...
dies irae,
Код: sql
1.
2.
update statistics Table1 with fullscan
update statistics Table2 with fullscan


После выполнения включился параллелизм на проблемном запросе и теперь все со свистом выстреливает, спасибо!
Пошел план обслуживания ковырять... Всем огромное спасибо за помощь следствию!
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Непонятно долгое выполнение запроса if exists... / 19 сообщений из 19, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]