|
Сравнение ETL tools
|
||
|---|---|---|
Участник
Откуда: никем не победимая, самая любимая
Сообщения: 1 090 |
||
| 02.06.2020, 16:28 |
|
|
|
|
|
Сравнение ETL tools
|
|||
|---|---|---|---|
|
#18+
Всем доброго времени суток. Возможно, не сюда следовало бы публиковать.... но Возникли тут проблемы с работой расширения SSIS в Visual Studio 2019. В связи с этим хотелось бы услышать, кто какими средствами разрабатывает ETL-процессы. нашел ссылку https://solutionsreview.com/data-integration/top-free-and-open-source-etl-tools-for-data-integration/ Основные требования: windows (главное требование); по-возможности free; минимальная зависимость от других программ; коннекторы (или возможность использовать родные) для MS SQL, Oracle, MS Office; доступность документации; стабильность (второе главное требование); мониторинг и оповещение. Пока как-то так Рассчитываю на понимание. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 02.06.2020, 16:09 |
|
||
|
Сравнение ETL tools
|
|||
|---|---|---|---|
|
#18+
тут все разными средствами разрабатывают ETL-процессы. Средств этих штук 20, они все подходят под ваши условия. Если брать free, то штук 10. Из перечисленных в ссылке на форуме обсуждалось и сравнивалось - Talend, Pentaho, Airflow, Nifi. Кафку сложно называть etl-em. Берёте любое название, забиваете в поиск и находите тему с обсуждением и сравнением. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 02.06.2020, 16:28 |
|
||
|
Сравнение ETL tools
|
|||
|---|---|---|---|
|
#18+
IlyamI, была хорошая ветка сравнения Pentaho и SSIS от Юрия Абеля (ФИО латиницей ) надеюсь правильно написал я смотрел ее имея приличный опыт в SSIS предполагая использовать Pentaho ( в этом же форуме спрашивал про Pentaho те вопросы что возникали ) имею опыт с Талендом (давно уже - лет 5 назад на 2 проектах на оффшор бесплатная версия имеет куча ограничений - не рекомендовал а платная стоит прилчных денег ) Мне очень понравилось Airflow по описанию (точнее то что люди показали) (Python) но он под Linux ( хотя вроде кто-то умадрялся под Windows запустить - но мне тогда не удалось ) и про коннекторы к оффису не в теме есть чат в телеграме - там можно спросить что интерсует PS как варинат sql scrtipts через link-servers и ранить их в jobs - чем не ETL на прошлой работе было - вполне себе работоспобосно (правда на ms-sql) PPS авторВозникли тут проблемы с работой расширения SSIS в Visual Studio 2019. а что за они то ? Критичные ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 02.06.2020, 16:38 |
|
||
|
Сравнение ETL tools
|
|||
|---|---|---|---|
|
#18+
IlyamI, Я использую SSIS под VS 2019 . Хотя он стал тормознее. Скорее студия стала, а на сами пакеты. При крупной перекачке деплойте на сервер и пускайте там. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 03.06.2020, 08:04 |
|
||
|
Сравнение ETL tools
|
|||
|---|---|---|---|
|
#18+
Бумбараш Из перечисленных в ссылке на форуме обсуждалось и сравнивалось - Talend, Pentaho, Airflow, Nifi. Это очень оптимистичное заявление. Берете, а потом одни грабли другие, -- объемы не переваривает, с драйверами не дружит, майкрософт не любит и т.п. С SSIS есть уверенность, что джоб с пакетами будет стабильно качать, что нужно и сколько нужно. А насчет остальных, вопрос в сталибльности сильно актуален. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 03.06.2020, 08:07 |
|
||
|
Сравнение ETL tools
|
|||
|---|---|---|---|
|
#18+
мы NIFI хадупы грузим. очень нравится. под виндой запускается ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 03.06.2020, 21:30 |
|
||
|
|
start [/forum/topic.php?fid=49&fpage=8&tid=1857309]: |
0ms |
get settings: |
11ms |
get forum list: |
10ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
33ms |
get topic data: |
10ms |
get forum data: |
3ms |
get page messages: |
46ms |
get tp. blocked users: |
2ms |
| others: | 232ms |
| total: | 353ms |
| 0 / 0 |
