|
|
|
Удаление записей из большой базы
|
|||
|---|---|---|---|
|
#18+
Здравствуйте, поступило от работодателя следующее задание: В таблице MySQL (InnoDb) хранится 50 миллионов записей логов. Каждая запись имеет проиндексированное время создания (created_at). Новые записи в таблицу добавляются в режиме реального времени, круглосуточно, примерно 100 записей в минуту. Необходимо: Удалить из таблицы логов все записи, старше одного месяца. В качестве решения задачи пришлите краткое описание вашего подхода и ключевые запросы. ================= Это задача решается одним запросом: Код: sql 1. В чем тут подвох? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.08.2018, 00:51 |
|
||
|
Удаление записей из большой базы
|
|||
|---|---|---|---|
|
#18+
pr0n1xВ чем тут подвох?В блокировках, наверное. Задача разовая или регулярная? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.08.2018, 07:47 |
|
||
|
Удаление записей из большой базы
|
|||
|---|---|---|---|
|
#18+
pr0n1xВ чем тут подвох?Формально - решение верное. А на практике всё встанет колом. Я бы удалял из хранимой процедуры - удалил, скажем, 1000 записей, подождал 5-10 секунд, удалил ещё 100 записей... и повторял, пока что-то удаляется. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.08.2018, 07:50 |
|
||
|
Удаление записей из большой базы
|
|||
|---|---|---|---|
|
#18+
miksoftЗадача разовая или регулярная? скорее тестовая, иначе о подвохах бы не спрашивал ) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.08.2018, 08:02 |
|
||
|
Удаление записей из большой базы
|
|||
|---|---|---|---|
|
#18+
Всем спасибо, подвох в том, что операция удаления медленная в MySql и удаление в такой таблице заняло бы хороший промежуток времени. Нашел выход в том, что таблицу надо разделить на партиции например по неделям и удалять записи по одной, а целыми партициями, это скорости это очень выиграшно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 28.08.2018, 16:18 |
|
||
|
|

start [/forum/topic.php?fid=47&tid=1829654]: |
0ms |
get settings: |
9ms |
get forum list: |
12ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
35ms |
get topic data: |
9ms |
get forum data: |
2ms |
get page messages: |
38ms |
get tp. blocked users: |
1ms |
| others: | 9ms |
| total: | 121ms |

| 0 / 0 |

Извините, этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
... ля, ля, ля ...