Этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
Политика конфиденциальности
|
|
|
Select 200 million of rows
|
|||
|---|---|---|---|
|
#18+
Всем привет, я собираю статистику по рекламе сжатую в 5 минутку, почасовка и за сутки. это 3 разные таблицы. В таблице которая содержит данные за сутки накопилось за предыдущий месяц 200 млн записей. Мне нужно сделать Select с группировкой за прошлый месяц и показать метрики что нереально долго. Использую MySQL 5.7 Подскажите как работать с таким объемом данных? Поможет ли шардинг через кластер ускорить выборку на 200 лямов с группировкой? Может быть нужно использовать другую базу / технологию для таких задач? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 15.11.2017, 16:56 |
|
||
|
Select 200 million of rows
|
|||
|---|---|---|---|
|
#18+
vixa2012как работать с таким объемом данных?Делать предрасчёты, ёлки-палки... прошла пятиминутка - посчитал из эвента статистику свою и скинул в отдельную таблицу... а когда потребовались данные за час-день-месяц, берёшь их и укрупняешь дальше. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 15.11.2017, 18:51 |
|
||
|
|

start [/forum/topic.php?fid=47&gotonew=1&tid=1830268]: |
0ms |
get settings: |
11ms |
get forum list: |
12ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
40ms |
get topic data: |
11ms |
get first new msg: |
7ms |
get forum data: |
2ms |
get page messages: |
50ms |
get tp. blocked users: |
2ms |
| others: | 11ms |
| total: | 154ms |

| 0 / 0 |
