Всем большой привет. Я начинающий с SQL, Hadoop и так далее. В общем и целом стоит задача, посмотреть на Hadoop'е одну таблицу из 15000 тысяч полей, состоящей из кучи блоков, и на данный момент я рассматриваю блок и меня интересует два поля, минимальная дата и максимальная дата, но из за того что периодов дат много с 2007 года по 2017 и очень много данных, производительность сервера позволяет делать селект только по одному месяцу, и как сами понимаете рассмотреть 10 лет по одному месяцу это очень долго. Так вот вопрос в том, можено ли в хадупе как либо прописать процедуру, позволяющую менять дату. Или как мне по другому автоматизировать запрос. Большое спасибо за внимание и за помощь.
Вот мой запрос:
select 'data' as field, '201708' as period, min(day) as min, max(day) as max
from tabl w
where day between 20170801 and 20170831
and ( data is not null )
;

Следующий запрос соответственно будет про 07 месяц и период тоже будет 201707.

Дедушка,

Конкретно в Hive.

Yo.!,

Ваша идея хороша, но период у меня должен быть в 1 месяц. Вот я и ломаю голову, может быть цикл какой то использовать. Но в просторах сети я не нашёл упоминаний о том, что Hive может это прожевать.