|
|
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
Всем привет! Вопрос ораклистам. На чем вы пишите etl процессы? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.05.2018, 16:55 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
israelshamirВсем привет! Вопрос ораклистам. На чем вы пишите etl процессы? На pl/sql в основном. Разницы нет, все известные etl-и умеют работать с любой базой данных ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.05.2018, 18:12 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
Полковник., Java приходится использовать? И какие etl тулзы чаще всего используются? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.05.2018, 18:57 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
israelshamirПолковник., Java приходится использовать? И какие etl тулзы чаще всего используются? Java? А зачем, руками неделю писать то что в etl-e делается за полчаса? Сейчас модно и на python-e писать где непопадя но работать будет раз в 10 медленней бесплатной pentaho data integrator, видел такое убожество. Список etl инструментов огромен, от родного для ораклa oracle data integrator, informatica, ibm datastage, ms sql server integration services, talend, pentaho data integrator... Это из известных, но есть и другие. Погугли, кроме процедур загрузки ещё нужна оркестровка - управление процессами, логирование, работа по событию или по расписанию и т.д. руками это писать - убьешься ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.05.2018, 19:25 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
Полковник., ПолковникПогугли, кроме процедур загрузки ещё нужна оркестровка - управление процессами, логирование, работа по событию или по расписанию и т.д. руками это писать - убьешься А ты конкретно что используешь для этих задач? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.05.2018, 19:33 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
israelshamir, Все вышеперечисленные, зависит от того, что куплено заказчиком. Иногда родной pl/sql, если ХД не очень сложное - пара десятков таблиц. Приходим в банк, там говорят -мы купили хренову кучу информатики (как пример), нам нужно что бы на ней, ясно, что со своим мы туда не полезем. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.05.2018, 20:21 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
в сбере на жабе написано. Вполне себе неплохо. Лучше многих других случаев, что я видел. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.05.2018, 01:31 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
Бумбарашв сбере на жабе написано. Вполне себе неплохо. Лучше многих других случаев, что я видел. что прямо вот во ВСЕМ сбере ??? весь етл??? ха-ха. на заборе тоже написано ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.05.2018, 09:52 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
В Сбере есть всё, в том числе etl и на java, etl на informatica. Думаю, проще перечислить чего нет.... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.05.2018, 10:09 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
Основное хранилище, которое ЦХД. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.05.2018, 13:10 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
БумбарашОсновное хранилище, которое ЦХД. В сбере есть хранилище? Не смешно. Создатели ETL на джаве из сбера присылают моей старушке маме, ей под 80, пенсия 18 тыс., смс-ки с рекламой открыть вклад "помоги ветерану" с которого полпроцента бы поступало таким вот старушкам как она сама. Убил бы на..., гвоздь в башку забить за такое, что трудно посмотреть год рождения кому ты шлешь? . Поэтому то что в сбере что то слепили на джаве это для меня скорее правило, чем нет ха ха ха ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.05.2018, 14:19 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
Мужики, я правильно понимаю, express edition уже не доступна, поэтому надо 28 гб-го динозавра тянуть с https://edelivery.oracle.com? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 22.05.2018, 21:38 |
|
||
|
oracle etl
|
|||
|---|---|---|---|
|
#18+
Полковник.Java? А зачем, руками неделю писать то что в etl-e делается за полчаса? Сейчас модно и на python-e писать где непопадя но работать будет раз в 10 медленней бесплатной pentaho data integrator, видел такое убожество. Необходимость наличия ГУЯ сильно преувеличина. Тут все зависит от уровня абстракции. Тот же Cascading (RIP) не сильно уступает по лаконичности Pig-скриптам. Spark тоже вполне человеческий API предоставляет и писать маппинги на нем как раз сильно удобнее, чем возить мышей квадратики по экрану. Вот на уровне повыше (workflow management) там да, убоных альтернатив пока немного, хотя Airflow уже потихоньку и эту нишу осваивает. Из плюсов, наличие готовой инфраструктуры для контроля версий, тестирования, диплоймента и т.д. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 31.05.2018, 18:40 |
|
||
|
|
start [/forum/search_topic.php?author=Evgenye&author_mode=last_topics&do_search=1]: |
0ms |
get settings: |
9ms |
get forum list: |
13ms |
get settings: |
11ms |
get forum list: |
14ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
159ms |
get topic data: |
12ms |
get forum data: |
2ms |
get page messages: |
56ms |
get tp. blocked users: |
2ms |
| others: | 444ms |
| total: | 730ms |
| 0 / 0 |
Извините, этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
... ля, ля, ля ...
