Гость
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Big Data - собирается ли кто-либо создавать здесь такой форум? / 25 сообщений из 76, страница 1 из 4
13.05.2015, 00:58
    #38956929
Big Data - собирается ли кто-либо создавать здесь такой форум?
Всем добрый день.

Вошел я наконец в big data. Скажу вам, что тема очень интересная, и очень отличается от классического DWH/ETL/OLAP.

В связи с этим вопрос: а не собираются ли уважаемые модераторы сделать отдельный форум тут по Big Data?
Я думаю в этом есть смысл.

С другой стороны, можно было этот форум "расширить", поменяв название. Но думаю это не самый хороший вариант, так как в big data такой "зоопарк" и столько вопросов, которые и близко не стояли к тем, что в классическом DWH стоят, что люди просто не будут пересекаться.

Если модераторы это видят, предлагаю свою кандидатуру на пост модератора форума.
...
Рейтинг: 0 / 0
13.05.2015, 01:36
    #38956938
vikkiv
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Так обсуждаются бигдатые вопросы по необходимости, то тут - то там бигдатость мелькает и не похоже чтобы так уж активно всё было аж до нового субфорума .. закидывай в заголовок темы это сокровенно-ключевое слово, и кому интересно - клюнут, иначе действительно потеряемся в деревьях структуры форума..
...
Рейтинг: 0 / 0
13.05.2015, 02:37
    #38956950
Критик
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Такой форум уже имеется...
...
Рейтинг: 0 / 0
13.05.2015, 09:21
    #38957050
babona
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
и что, БигДата - доходная поляна? должно быть да пока новая и моднявая тема.
CRM и BPM-ов уже наелись, а BI обещанных прибылей не приносят конторам. Так и живем'с
...
Рейтинг: 0 / 0
13.05.2015, 09:38
    #38957062
StarikNavy
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
babonaновая и моднявая тема.
ага, в ветке ("отдельный форум") - "no sql, big data" каждый месяц по новому сообщению )
...
Рейтинг: 0 / 0
13.05.2015, 10:11
    #38957090
haXbat
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
babonaи что, БигДата - доходная поляна? должно быть да пока новая и моднявая тема.
CRM и BPM-ов уже наелись, а BI обещанных прибылей не приносят конторам. Так и живем'с
Дело не моде, а в том, что данных становится все больше и больше, темпы прироста увеличиваются. Обрабатывать все это с помощью старых подходов становится слишком неэффективно.
...
Рейтинг: 0 / 0
13.05.2015, 10:57
    #38957138
babona
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
haXbat,

и чо? а то можно подумать вчерашние/текущие объемы данных научились анализировать? т.е. имеем согласованные измерения, непротиворечивые данные в атрибутах, отсутствие критически важных пропусков в данных и т. д., навели порядок в OLTP системах и бизнес-процессах
...
Рейтинг: 0 / 0
13.05.2015, 11:40
    #38957200
Ivan Durak
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
babonahaXbat,

и чо? а то можно подумать вчерашние/текущие объемы данных научились анализировать? т.е. имеем согласованные измерения, непротиворечивые данные в атрибутах, отсутствие критически важных пропусков в данных и т. д., навели порядок в OLTP системах и бизнес-процессах
и че?? можно подумать беспорядок в oltp базах помешал созданию олап и dwh.
...
Рейтинг: 0 / 0
13.05.2015, 11:50
    #38957215
Alexander Ryndin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
А есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии.
...
Рейтинг: 0 / 0
13.05.2015, 11:54
    #38957228
Ivan Durak
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Alexander RyndinА есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии.
давайте к конкретике. Бигдата это хадуп+сверху на нем все что угодно.
...
Рейтинг: 0 / 0
13.05.2015, 12:01
    #38957246
Alexander Ryndin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Ivan DurakAlexander RyndinА есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии.
давайте к конкретике. Бигдата это хадуп+сверху на нем все что угодно.Да, согласен - хорошее замечание.
...
Рейтинг: 0 / 0
13.05.2015, 12:13
    #38957270
fduch f.f.
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Игорь БобакЕсли модераторы это видят, предлагаю свою кандидатуру на пост модератора форума.

форум же вроде как есть
...
Рейтинг: 0 / 0
13.05.2015, 12:44
    #38957338
babona
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Ivan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.


Alexander Ryndin,
про успешные проекты - это смотря кого и где читать. Неужто эффективный ТОП-менеджер напишет правду, что эффект есть, но кратковременные, а в длинную - издержки очень велики и нестабильный эффект.
Глянцевые ИТ-журналы читать - так там вранье, интеграторы те еще басни нахваливают.
...
Рейтинг: 0 / 0
13.05.2015, 12:51
    #38957355
Alexander Ryndin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
babonaIvan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.Ну как и любая технология Hadoop проходит через Hype Cycle . Это нормально.
...
Рейтинг: 0 / 0
13.05.2015, 13:37
    #38957458
haXbat
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
babonaIvan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.
Так можно про любой стек технологий сказать. Oracle - разводилово!
Hadoop и прочее - это всего лишь инструмент. Если в аналитике не будут копаться модные data scientist, если топы не будут принимать решения на основе исследований, то вся Big Data становится бесполезной для бизнеса.
...
Рейтинг: 0 / 0
13.05.2015, 13:49
    #38957478
Бумбараш
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Игорь БобакВсем добрый день.

Вошел я наконец в big data. Скажу вам, что тема очень интересная, и очень отличается от классического DWH/ETL/OLAP.

YouTube Video
...
Рейтинг: 0 / 0
13.05.2015, 15:03
    #38957629
Ivan Durak
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
babonaIvan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.


Alexander Ryndin,
про успешные проекты - это смотря кого и где читать. Неужто эффективный ТОП-менеджер напишет правду, что эффект есть, но кратковременные, а в длинную - издержки очень велики и нестабильный эффект.
Глянцевые ИТ-журналы читать - так там вранье, интеграторы те еще басни нахваливают.
ну классическое BI/DWH уже давно не разводилово.
...
Рейтинг: 0 / 0
13.05.2015, 17:06
    #38957793
babona
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
классическое BI/DWH уже давно не разводилово, а унылые серые будни и неочень оплачиваемое
...
Рейтинг: 0 / 0
13.05.2015, 17:48
    #38957856
kirillss
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
babona, ага пересядем на хадуууп и будет весело
...
Рейтинг: 0 / 0
13.05.2015, 18:46
    #38957931
Очень лысый
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Ну вот опять проводят знак равенства BigData = Hadoop. BigData цэ challenge, а Hadoop - экосистема, призванная с ним бороться. Не обязательно зацикливаться на нём. Что касается выгоды, то я лично считал для телекома стоимость солюшена для хранения и обработки данных для СОРМ на hdfs и Оракле. На hdfs получилось подешевле. И, думается, что ad hoc запросы там тоже бегали бы повеселее. Но для менеджеров выгоднее чем подороже. Пересекался с парой контор: российской и буржуйской, которые тупо зарабатывают кластером деньги.
Вообще, как и любая технология, хадупный кластер просто даёт новые возможности: сохранять и обрабатывать данные, которые раньше бы удалили, либо скинули бы на ленту. Кто умеет извлекать выгоду - извлечёт выгоду, кто умеет только пилить - будет пилить, а если не получается пилить, то будет хаять.
...
Рейтинг: 0 / 0
14.05.2015, 01:26
    #38958117
Apex
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Очень лысыйНа hdfs получилось подешевле.

Хранение на HDFS безусловно дешевле.

Очень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее.

А вот это уже весьма спорно. А очень часто вообще не верно.

Очень лысыйНо для менеджеров выгоднее чем подороже.

Сразу видно человека, который никогда не был менеджером.
...
Рейтинг: 0 / 0
14.05.2015, 14:29
    #38958708
Очень лысый
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
ApexОчень лысыйНа hdfs получилось подешевле.

Хранение на HDFS безусловно дешевле.

Очень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее.

А вот это уже весьма спорно. А очень часто вообще не верно.

Очень лысыйНо для менеджеров выгоднее чем подороже.

Сразу видно человека, который никогда не был менеджером.

Лень мне расставлять тэги цитат. Так отвечу.

1. Безусловность под вопросом.
2. В общем случае всё зависит от движка, конфигурации кластера, формата хранения и т.п., речь шла о вполне конкретном частном случае, конкретном объёме данных и конкретном бюджете. В данных условиях вполне реально сделать соответствующие оценки, тесты и т.д.
3. люблю я местных "проницательных" товарищей
...
Рейтинг: 0 / 0
14.05.2015, 14:36
    #38958722
Очень лысый
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
Естесно, на конечное решение кроме "распильного" повлияли и многие другие нюансы. Я тут чисто из лени скатился в нарратив. Однако дальнейшее развитие истории показывает, что принятое решение было ошибочным. Кстати, не факт, что предложенное мной было самым лучшим. Так бывает.
...
Рейтинг: 0 / 0
17.05.2015, 19:45
    #38960906
Ivan Durak
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
ApexОчень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее.

А вот это уже весьма спорно. А очень часто вообще не верно.

Если речь о sql поверх хадуп, типа классического хайва - то это без вариантов будет медленнее.
В наших тестах на почти на порядок по сравнению с mpp субд на таком же количестве серверов.
Единственное где-то хоть как-то можно говорить о быстром выполнении - это навесить на хадуп, что-то типа спарка.
...
Рейтинг: 0 / 0
17.05.2015, 20:07
    #38960913
Бумбараш
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Big Data - собирается ли кто-либо создавать здесь такой форум?
А где вы в Минске навешиваете на хадуп типа спарка?
У вас там переполненные склады тракторов на три года вперед и постановления правительства о том, сколько должно стоять горизонтов на первой полке в магазине электроники. Просто интересно.
...
Рейтинг: 0 / 0
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Big Data - собирается ли кто-либо создавать здесь такой форум? / 25 сообщений из 76, страница 1 из 4
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]