|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Ggg_oldУ оракла вроде как богатые возможности, но деталей и возможностей не знаю совсем. У Оракла есть фича, называемая stored outlines - возможность зафиксировать план запроса. То есть потребовать, чтобы некий запрос всегда-всегда-всегда выполнялся именно по тому плану, который построен для него сейчас. Технически эта фича реализована через хинты - то есть для запроса сохраняется в базе набор хинтов, фиксирующих план. Думаю, это даёт представление о соотношении "умений оптимизатора вообще" и "возможностей хинтами этим управлять". ... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 12:06 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
В MS SQL можно даже так: Код: sql 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31. 32. 33. 34. 35. 36. 37. 38. 39. 40. 41. 42. 43. 44. 45. 46. 47. 48. 49. 50. 51. 52. 53. 54. 55. 56. 57. 58. 59. 60. 61. 62. 63. 64. 65. 66. 67. 68. 69. 70. 71. 72. 73. 74. 75. 76. 77. 78. 79. 80. 81. 82. 83. 84. 85. 86. 87. 88. 89. 90. 91. 92. 93. 94. 95. 96. 97. 98. 99. 100. 101. 102. 103. 104. 105. 106. 107. 108. 109. 110. 111. 112. 113. 114. 115. 116.
... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 12:11 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
pkarklin: мне кажется,чт аналог этих опций есть в мсскл, дам вам только выдержку из док: У SqlAnywhere как на уровне всей базы так и на уровне конкретного запроса в числе хинтов есть такие опции как: optimization_workload option http://infocenter.sybase.com/help/index.jsp?docset=/com.sybase.help.sqlanywhere.12.0.1/sqlanywhere_en12/help_top_index.htm&docSetID=1744 Determines whether query processing is optimized towards a workload that is a mix of updates and reads or a workload that is predominantly read-based. The optimization_workload option controls whether SQL Anywhere optimizes queries for a workload that is a mix of updates and reads or predominantly read only. If the option is set to Mixed (the default), SQL Anywhere chooses query optimization algorithms appropriate for a workload that is a mixture of short inserts, updates, and deletes and longer running read-only queries. If the option is set to OLAP , SQL Anywhere chooses algorithms appropriate for a workload that consists for the most part of long-running queries, combined with batch updates. In particular, the optimizer may choose to use the Clustered Hash Group By query execution algorithm. When the option is set to OLAP, the Clustered Hash Group By algorithm is enabled. If the option is set to Mixed (the default), it is disabled. optimization_level option Controls the amount of effort made by the SQL Anywhere query optimizer to find an access plan for a SQL statement. optimization_goal option Determines whether query processing is optimized towards returning the first row quickly, or minimizing the cost of returning the complete result set. The optimization_goal option controls whether SQL Anywhere optimizes SQL data manipulation language (DML) statements for response time or total resource consumption. If the option is set to All-rows (the default) , then SQL Anywhere optimizes a query to choose an access plan with the minimal estimated total retrieval time. Setting optimization_goal to All-rows may be appropriate for applications that intend to process the entire result set, such as Sybase PowerBuilder DataWindow applications. A setting of All-rows is also appropriate for insensitive (ODBC static) cursors since the entire result is materialized when the cursor is opened. It may also be appropriate for scroll (ODBC keyset-driven) cursors, since the intent of such a cursor is to permit scrolling through the result set. If the option is set to First-row , SQL Anywhere chooses an access plan that is intended to reduce the time to fetch the first row of the query's result, possibly at the expense of total retrieval time. In particular, the SQL Anywhere optimizer will typically avoid, if possible, access plans that require the materialization of results to reduce the time to return the first row . With this setting, the optimizer favors access plans that utilize an index to satisfy a query's ORDER BY clause, rather than plans that require an explicit sorting operation. ... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 13:38 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
С учетом замечаний таблица выходит такая: Код: plaintext 1. 2. 3. 4. 5.
... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 13:40 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
знаком ? я указываю, что не знаю есть или нет и как оно делается, т.е. эта опция в таблице требует уточнения. ... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 13:42 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Ggg_old, Я бы добавил в список хинты блокировок (Locking Hints), как отдельный класс. Довольно часто применемая фича в OLTP. ... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 13:46 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Ggg_old, авторoptimization_workload option Прямого аналога нет. Из имеющихся серверных опций: optimize for ad hoc workloads BOLThe optimize for ad hoc workloads option is used to improve the efficiency of the plan cache for workloads that contain many single use ad hoc batches. When this option is set to 1, the Database Engine stores a small compiled plan stub in the plan cache when a batch is compiled for the first time, instead of the full compiled plan. This helps to relieve memory pressure by not allowing the plan cache to become filled with compiled plans that are not reused. The compiled plan stub allows the Database Engine to recognize that this ad hoc batch has been compiled before but has only stored a compiled plan stub, so when this batch is invoked (compiled or executed) again, the Database Engine compiles the batch, removes the compiled plan stub from the plan cache, and adds the full compiled plan to the plan cache. авторoptimization_level option Есть Trace Flag 2301 MSDNTrace flag 2301 enables advanced optimizations that are specific to decision support queries. This option applies to decision support processing of large data sets. авторoptimization_goal option Код: sql 1.
BOLSpecifies that the query is optimized for fast retrieval of the first number_rows. This is a nonnegative integer. After the first number_rows are returned, the query continues execution and produces its full result set. ... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 14:45 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
А есть спецы по PostgreSQL, как там обстоят с этим дела? ... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 16:01 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Рассмтарвиаем только хинты, влияющие на план запроса. Хинты уровня изоляции транзакций, управления кэшами, кэшированием планов, и т.п. не входят в рассмотрение. Т.е. интересно только то, как SQL превращается в алгоритмы. Код: plaintext 1. 2. 3. 4. 5. 6. 7. 8.
... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 16:15 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Ggg_old, Ок. ... |
|||
:
Нравится:
Не нравится:
|
|||
27.06.2012, 16:50 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
pkarklin optimize for ad hoc workloads BOLThe optimize for ad hoc workloads option is used to improve the efficiency of the plan cache for workloads that contain many single use ad hoc batches. When this option is set to 1, the Database Engine stores a small compiled plan stub in the plan cache when a batch is compiled for the first time, instead of the full compiled plan. This helps to relieve memory pressure by not allowing the plan cache to become filled with compiled plans that are not reused. The compiled plan stub allows the Database Engine to recognize that this ad hoc batch has been compiled before but has only stored a compiled plan stub, so when this batch is invoked (compiled or executed) again, the Database Engine compiles the batch, removes the compiled plan stub from the plan cache, and adds the full compiled plan to the plan cache. Что-то не совсем понятно написано. Т.е. optimize for ad hoc workloads нужно для минимизации: кэширования планов таких запросов, кэширования резалтсета, кэширования страниц базы. А оптимизатору время на оптимизацию плана запроса выделяется больше при включении этой опции? ... |
|||
:
Нравится:
Не нравится:
|
|||
28.06.2012, 13:24 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
ad hoc, Опция меняет механику генерации плана. Время не меняется. ... |
|||
:
Нравится:
Не нравится:
|
|||
28.06.2012, 14:44 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
А вот как обстоят дела с PostgreSQL. А в PostgreSQL что можно хинтовать? Почему не нужно хинтование Как считаете оно действительно не нужно? ... |
|||
:
Нравится:
Не нравится:
|
|||
28.06.2012, 15:13 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
FavnGgg_oldНасколько я слышал, что у DB2 прямых хинтов нет, т.к. считается что оптимизатор шибко умный, но ямогу ошибаться либо мои знания устарели.Ну, скажем так, есть, но не хинты :) В самих запросах хинты не указываются. Обычно, если что-то не так, разбираются почему и, например, меняют уровень оптимизации, от которого зависит "вдумчивость" работы оптимизатора. Да это практически везде так!! И в МССКЛ и даже в Оракле. Хорошо собранная статистика заменяет тонны лишних хинтов. ... |
|||
:
Нравится:
Не нравится:
|
|||
29.06.2012, 12:46 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Ggg_oldРассмтарвиаем только хинты, влияющие на план запроса. Хинты уровня изоляции транзакций, управления кэшами, кэшированием планов, и т.п. не входят в рассмотрение. Т.е. интересно только то, как SQL превращается в алгоритмы. Код: plaintext 1. 2. 3. 4. 5. 6. 7. 8.
Для PostgreSQL есть внешний плагин разработанный Олегом Бартуновым для отключения индексов, так что отчасти есть. А в MySQL есть хинты и что они могут? ... |
|||
:
Нравится:
Не нравится:
|
|||
01.07.2012, 03:15 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Код: plaintext 1. 2. 3. 4. 5. 6. 7. 8. 9.
А в MySQL что можно хинтовать? ... |
|||
:
Нравится:
Не нравится:
|
|||
01.07.2012, 14:50 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Код: plaintext 1. 2. 3. 4. 5. 6. 7. 8. 9.
... |
|||
:
Нравится:
Не нравится:
|
|||
01.07.2012, 14:52 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Ggg_old интересно только то, как SQL превращается в алгоритмы. Код: plaintext 1.
Индексы - да, стратегии соединения - да, план - да . С планом все сложнее, потому что DB2 - компилятор, и план всегда генерится и сохраняется как результат компиляции запроса. При желании его можно фиксировать и не пересоздавать в будущем и без хинтов. Кстати, о превращении в алгоритмы - есть возможность настроить и поведение фазы переформулирования запроса оптимизатором . Можно в профиле хинта установить значения переменных компилятора SQL , управляющих его поведением. Можно указать до запроса, какой профиль хинтов сейчас надо использовать . Использование статистики, не соответствующей текущей (скажем, выгрузка-загрузка статистики из другой БД, или фиксация плана на другой момент времени) возможно, но другими механизмами. ... |
|||
:
Нравится:
Не нравится:
|
|||
02.07.2012, 13:39 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Код: plaintext 1. 2. 3. 4. 5. 6. 7. 8. 9.
... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2012, 11:39 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
красным выделена сервера, за которые пока никто толком не дал инфу. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2012, 11:41 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Ну тогда я попробую дать за ASE. SybaseASE: индекс(+), стратегия соединения(+), внешний план(+), Метахинты: [статистика(-), параллельность(+), допхинты(уровень оптимизации) ] Смысл указанных пунктов полагаю следующим: индекс -- возможность указать явно индекс для использования для таблицы. стратегия соединения -- возможность явно задать порядок выполнения JOIN-ов в запросе. Возможность задать внешний план -- возможность задать явно полный или частичный план запроса (частичный -- это когда какие-то параметры заданы пользователем, а остальные отдаются на выбор оптимизатора. параллельность -- возможность статистика -- не уверен, что имелось в виду. В ASE есть возможность использовать явно заданную статистику для запроса, но это действует для всего сервера но в рамках одной сессии, т.е. не совсем "хинты для запроса". допхинты -- уровень оптимизации -- не понятно что такое. В ASE можно задать кол-во таблиц, участвующих в рассмотрении оптимизатором, что-то ещё такое можно тоже задать. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2012, 12:54 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
MasterZivстратегия соединения -- возможность явно задать порядок выполнения JOIN-ов в запросе. Возможность задать А к стратегии соединения относим и порядок соединения таблиц и способ их соединения? Если так, то в MySQL можно задать порядок соединения таблиц, но нельзя задать способ. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2012, 13:22 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Код: plaintext 1. 2. 3. 4. 5. 6. 7. 8.
... |
|||
:
Нравится:
Не нравится:
|
|||
05.07.2012, 16:48 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
Не знаю подходит это под хинты, но в postgres можно для всего запроса глобально отключать способы просмотра таблиц и способы соединения таблиц, плюс управлять порядком таблиц при соединении. ... |
|||
:
Нравится:
Не нравится:
|
|||
06.07.2012, 02:12 |
|
Сравнение механизмов хинтования.
|
|||
---|---|---|---|
#18+
ЁшНе знаю подходит это под хинты, но в postgres можно для всего запроса глобально отключать способы просмотра таблиц и способы соединения таблиц, плюс управлять порядком таблиц при соединении. А это делается глобально для запроса для сессии/соединения или для всей БД? И если можно пример того как управлять порядком таблиц при соединении? ... |
|||
:
Нравится:
Не нравится:
|
|||
06.07.2012, 02:28 |
|
|
start [/forum/topic.php?fid=35&msg=37861898&tid=1552536]: |
0ms |
get settings: |
10ms |
get forum list: |
13ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
55ms |
get topic data: |
11ms |
get forum data: |
3ms |
get page messages: |
52ms |
get tp. blocked users: |
1ms |
others: | 14ms |
total: | 167ms |
0 / 0 |