powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Странность при импорте таблицы
8 сообщений из 8, страница 1 из 1
Странность при импорте таблицы
    #39097812
leonidus1981
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Господа, хотело бы услышать ваши идеи по поводу ситуации ниже.

На связке PHP+MySQL работает некий наш сервис. В базе есть две таблицы типа MyISAM - одна на 16 млн. записей, другая на 39 млн. В обеих разумеется настроены индексы. С этими таблицами скрипты уже несколько месяцев как работают. Все это крутится на двух выделенных серверах - скрипы на одном, а мускуль на другом. Винты под базу - SSD. Скорость добавления записей в таблицы выше скорости удаления из них устаревших данных поэтому обе таблицы растут.

Несколько дней назад мы зафиксировали резкое падение скорости работы скрипов. Ни скрипты, ни базу не трогали. Сервера тоже не тюнили но факт оставался фактом. Запросы то проскакивали быстро, но требовалось десятки секунд (начал активно расти лог медленных запросов). В итоге было решено сбэкапить эти две таблицы, грохнуть их и снова импортировать в базу. И это помогло! Вопрос - почему?? :) Что такого может произойти при импорте таблицы с нуля, что способно вернуть ей былую скорость доступа?

Заранее спасибо за идеи!
...
Рейтинг: 0 / 0
Странность при импорте таблицы
    #39097859
vkle
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
На размеры файлов таблиц до и после бекап/рестори не обратили внимания?
...
Рейтинг: 0 / 0
Странность при импорте таблицы
    #39097860
leonidus1981
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
vkle,

честно говоря не фиксировали это дело... а что?
...
Рейтинг: 0 / 0
Странность при импорте таблицы
    #39097872
vkle
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
На уровне предположения, может файлы разбухли до безобразия, так, что перестали умещаться в файловый буфер ОС. Это привело к увеличению объема дисковых операций. Когда данные загнали "с нуля" - получился файл данных меньшего размера, без пустых строк (насколько понимаю, записи из таблиц удаляются, но вопрос по оптимизации в топике пока не освещён).
...
Рейтинг: 0 / 0
Странность при импорте таблицы
    #39097945
leonidus1981
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
vkle,

По размерам файлов таблиц. Та таблица, в которой 38 млн. строк (на данный момент) она весит 6,7Гб, вторая - на 16 млн. - 1,1Гб. Думаю что ни 1 Гб, ни 6Гб не могут уместится в файловый буфер ОС, но сейчас скорость держится на высоком уровне.

Про оптимизацию не совсем понял. Вы говорите о необходимости при удалении записей не оставлять пустых строк?
...
Рейтинг: 0 / 0
Странность при импорте таблицы
    #39097979
miksoft
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
leonidus1981Про оптимизацию не совсем понял.Существует команда OPTIMIZE TABLE, которая делает примерно тоже самое, что вы делали руками - создает новую копию файла с таблицей. Попутно пересчитывая статистику. Устаревшая статистика тоже может сыграть роль, например, если стали строиться неправильные планы запросов.
...
Рейтинг: 0 / 0
Странность при импорте таблицы
    #39097980
miksoft
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
leonidus1981Думаю что ни 1 Гб, ни 6Гб не могут уместится в файловый буфер ОС, но сейчас скорость держится на высоком уровне.Целиком им не обязательно удерживаться в буферах, достаточно, если будет удерживаться "горячая" часть.
Кстати, к индексам это тоже относится. После пересоздания таблицы индексы стали меньше и им (или их "горячей" части) стало легче помещаться в key_buffer_size.
...
Рейтинг: 0 / 0
Странность при импорте таблицы
    #39101818
leonidus1981
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Ясно. Всем спасибо!
...
Рейтинг: 0 / 0
8 сообщений из 8, страница 1 из 1
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Странность при импорте таблицы
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]