то есть, грубо говоря это обработка данных, где одна часть уже стабильная, а вторая - это дельта подмножество, свежепоступившие данные, затем они мержатся и т.д.?
haXbatЕсли простым языком: пихаешь сырые данные в hdfs, затем на SQL подобном движке от Cloudera/Horton обрабатываешь/агрегируешь. Если бизнес логика сложна, то крутишь дальше агрегированные данные на православном PL-SQL/T-SQL через ODBC. Легко горизонтально масштабировать. В итоге получается быстрее и дешевле, чем покупать шкафы с экзадатой. Global Summit 2015 Presentations ( InterSystemsNewHadoopGateway.zip )
haXbatWinnipuhОбъясните мне, если можно простым человеческим языком что это? зачем это?
Вот тут можно послушать:
Если простым языком: пихаешь сырые данные в hdfs, затем на SQL подобном движке от Cloudera/Horton обрабатываешь/агрегируешь. Если бизнес логика сложна, то крутишь дальше агрегированные данные на православном PL-SQL/T-SQL через ODBC. Легко горизонтально масштабировать. В итоге получается быстрее и дешевле, чем покупать шкафы с экзадатой.
хороший приговор архитектуре. грамотно все минусы описаны.
