Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Select 200 million of rows / 3 сообщений из 3, страница 1 из 1
15.11.2017, 16:56
    #39553726
vixa2012
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Select 200 million of rows
Всем привет, я собираю статистику по рекламе сжатую в 5 минутку, почасовка и за сутки. это 3 разные таблицы.

В таблице которая содержит данные за сутки накопилось за предыдущий месяц 200 млн записей.

Мне нужно сделать Select с группировкой за прошлый месяц и показать метрики что нереально долго.

Использую MySQL 5.7

Подскажите как работать с таким объемом данных? Поможет ли шардинг через кластер ускорить выборку на 200 лямов с группировкой?
Может быть нужно использовать другую базу / технологию для таких задач?
...
Рейтинг: 0 / 0
15.11.2017, 18:51
    #39553828
Akina
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Select 200 million of rows
vixa2012как работать с таким объемом данных?Делать предрасчёты, ёлки-палки... прошла пятиминутка - посчитал из эвента статистику свою и скинул в отдельную таблицу... а когда потребовались данные за час-день-месяц, берёшь их и укрупняешь дальше.
...
Рейтинг: 0 / 0
15.11.2017, 20:30
    #39553869
ScareCrow
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Select 200 million of rows
Яндекс Кликхаус.
...
Рейтинг: 0 / 0
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Select 200 million of rows / 3 сообщений из 3, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]