|
|
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Добрый день уважаемому сообществу. Пару дней назад неожиданно стали очень долго выполняться запросы, использующие ORDER BY и GROUP BY. Конфигурация сервера не менялась, запросы не менялись. Но сейчас вместо 2-4 секунд они выполняются десятки минут, что совершенно неприемлемо. Запрос висит в процесслисте со статусом "sorting result", и все. Место на диске есть, памяти для сорт буферов выделено достаточно, переменная Sort_merge_passes = 3. Скорее всего, что-то сделал хостер, но мне это нужно доказать - они на все вопросы твердят "мы ничего не меняли" Посоветуйте плиз, в какую сторону копать - а то у меня идеи уже кончились :( ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:42:19 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Посмотрите во временном каталоге ( например, /tmp), не образуются ли там файлы большого размера? Хватает ли оперативной памяти? Что показывает top ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:46:24 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
top показывает, что сервер использует 100% CPU и 53.3% MEM ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:53:01 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
в /tmp/ вроде бы нет ничего большого.... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:54:17 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Little Johntop показывает, что сервер использует 100% CPU и 53.3% MEMКакими именно процессами? 100% от одного ядра или от всех ядер? сколько всего ядер? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:56:14 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Попутно повспоминайте, может это у вас что-то изменилось? Например, данных стало заметно больше? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:57:11 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
мало того, в /tmp/ не вижу ни одного файла, созданного пользователем mysql. сейчас, в данный момент, процесслист показывает "sorting result", а в /tmp/ ничего нет, созданного mysql. это, видимо, означает, что весь датасет уместился в оперативке. почему же тогда так долго выполняется? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:57:48 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
И, если запросы не секретные, покажите здесь хотя бы один. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:58:45 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
100% - это на процессе mysqld. насчет ядер - извините, не знаю - как посмотреть? я просто выполнил команду top. по поводу данных - нет, никаких изменений - это запросы калькуляции по дням - объем данных в течении дня - тот же. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 14:59:45 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
да нет, запросы не секретные, конечно. я приведу их ниже - надеюсь, это поможет. хотя, повторюсь, они прекрасно выполнялись пару дней назад. Код: plsql 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 15:01:52 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
план выполнения: idselect_typetabletypepossible_keyskeykey_lenrefrowsExtra1PRIMARYsrefPRIMARYIndex_5cnum_serveridtime_serveridentrypointsessions_hangupcodes_fkeysessions_date_surveyid_keysessions_date_serverid_keysessions_date_serverid_key9constconst53Using where; Using temporary; Using filesort1PRIMARYhceq_refPRIMARYPRIMARY4tfsurvey.s.hangupcode1Using where1PRIMARYepeq_refPRIMARYFK_entrypoints_serverPRIMARY4tfsurvey.s.entrypointid1Using where1PRIMARYrrefPRIMARYIndex_2Index_28tfsurvey.s.idconst1Using where2DEPENDENT SUBQUERYcrangecdr_daba_anum_etc_keycdr_daba_date_anum_type_keycdr_daba_date_anum_type_key333674Using where; Using filesort ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 15:03:50 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Gfhljy? nen ajhvfnbhjdfybt cnhfyyjt/ Gjghfdbk^ idselect_typetabletypepossible_keyskeykey_lenrefrowsExtra1PRIMARYsrefPRIMARYIndex_5 cnum_serverid time_serverid entrypoint sessions_hangupcodes_fkey sessions_date_surveyid_key sessions_date_serverid_keysessions_date_serverid_key9constconst53Using where; Using temporary; Using filesort1PRIMARYhceq_refPRIMARYPRIMARY4tfsurvey.s.hangupcode1Using where1PRIMARYepeq_refPRIMARY FK_entrypoints_serverPRIMARY4tfsurvey.s.entrypointid1Using where1PRIMARYrrefPRIMARY Index_2Index_28tfsurvey.s.idconst1Using where2DEPENDENT SUBQUERYcrangecdr_daba_anum_etc_key cdr_daba_date_anum_type_keycdr_daba_date_anum_type_key333674Using where; Using filesort ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 15:05:55 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
черт, прошу прощения - не смог отформатировать как следует план выполнения ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 15:06:29 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
А какая версия? В моем древнем 5.161 изредка бывает, что оптимизатор начинает выбирать неправильный индекс. Я бы посмотрела на индексы таблички С из плана выполнения. В самом ленивом случае можно посмотреть план выполнения с другим индексом ( используя force index), и сравнить результаты. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:21:01 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Версия MySQL 5.0.26-log. Это стопудово хостер - абсолютно те же запросы на абсолютно тех же наборах данных выполнялись менее 5-ти секунд (граница sloq query log). Сейчас - от 20-ти минут. Вопрос в том, что же они наворотили... Пока не смог найти... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:23:32 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
А customerdata.cdr_daba не могла резко вырасти? Вложенные запросы на наших версиях работают ооочень медленно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:30:32 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Little JohnЭто стопудово хостерПока не факт. Мне вот тоже не нравятся индексы у таблицы С. Покажите DDL этой таблички и всех ее индексов. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:30:37 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Код: plsql 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:39:51 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
данные таблицы по датам: datecount(*)2014-02-0612014-02-102254342014-02-111946362014-02-122022152014-02-132057452014-02-141798902014-02-15204712014-02-16153522014-02-172283422014-02-182119362014-02-192020122014-02-202129362014-02-211869942014-02-22182642014-02-23153192014-02-242212892014-02-252197092014-02-262095382014-02-272201562014-02-282373852014-03-01270122014-03-02201982014-03-032598572014-03-042333372014-03-052115862014-03-062319252014-03-071974702014-03-08191872014-03-09167592014-03-102422132014-03-11334 как видите, объем данных не менялся. неделю назад запросы выполнялись быстрее 5-ти секунд ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:42:14 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
хммм, только что пришло в голову - может быть, дело в джойне MyISAM и InnoDB?! поэтому медленно????? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:43:39 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
А почему план выполнения показывает 33.674 строк для запроса, если там всего 19.187 строк с фильтром по дате? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 16:53:30 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
хороший вопрос. ответ - не знаю :) впрочем, это эстимейт, насколько знаю. The rows column indicates the number of rows MySQL believes it must examine to execute the query. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 17:02:13 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
miksoftПопутно повспоминайте, может это у вас что-то изменилось? Например, данных стало заметно больше? А нечего тут вспоминать. Изменяется время. Накапливаются данные. А значит или изменяются планы или наступает ситуация, когда буферов не хватает. Или происходят другие похожие лавинообразные процессы. Анализировать надо как обычно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 17:18:20 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
Фух. Уважаемое сообщество, всем большое спасибо за попытки помочь. Как оказалось, дело действительно в разных энжайнах. Несколько дней назад таблица была удалена, и создана заново. Перед удалением она была InnoDB, после создания заново стала MyISAM - энжайн при создании напрямую не указывали. Так как другие таблицы в запросе - InnoDB, то джойны выполнялись офигенно медленно. Сейчас я сконвертил таблицу в InnoDB, и запрос стал выполняться менее чем за секунду, слава богу. Вот такие вот дела. Я знал, что джойн InnoDB - MyISAM медленный, но не знал что НАСТОЛЬКО медленный. Еще раз всем спасибо. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 17:32:11 |
|
||
|
Неожиданно стали ОЧЕНЬ долго выполняться запросы
|
|||
|---|---|---|---|
|
#18+
netwindmiksoftПопутно повспоминайте, может это у вас что-то изменилось? Например, данных стало заметно больше?А нечего тут вспоминать.Little JohnНесколько дней назад таблица была удалена, и создана зановоТаки, оказывается, есть что вспоминать :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.03.2014, 17:34:09 |
|
||
|
|

start [/forum/topic.php?fid=47&msg=38583198&tid=1835131]: |
0ms |
get settings: |
4ms |
get forum list: |
10ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
44ms |
get topic data: |
8ms |
get forum data: |
2ms |
get page messages: |
39ms |
get tp. blocked users: |
1ms |
| others: | 216ms |
| total: | 330ms |

| 0 / 0 |
