|
Действия ...
|
02.06.2020, 16:28
|
|||
|---|---|---|---|
|
|||
Сравнение ETL tools |
|||
|
|
Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
|
02.06.2020, 16:09
|
|||
|---|---|---|---|
|
|||
Сравнение ETL tools |
|||
|
#18+
Всем доброго времени суток. Возможно, не сюда следовало бы публиковать.... но Возникли тут проблемы с работой расширения SSIS в Visual Studio 2019. В связи с этим хотелось бы услышать, кто какими средствами разрабатывает ETL-процессы. нашел ссылку https://solutionsreview.com/data-integration/top-free-and-open-source-etl-tools-for-data-integration/ Основные требования: windows (главное требование); по-возможности free; минимальная зависимость от других программ; коннекторы (или возможность использовать родные) для MS SQL, Oracle, MS Office; доступность документации; стабильность (второе главное требование); мониторинг и оповещение. Пока как-то так Рассчитываю на понимание. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
02.06.2020, 16:28
|
|||
|---|---|---|---|
Сравнение ETL tools |
|||
|
#18+
тут все разными средствами разрабатывают ETL-процессы. Средств этих штук 20, они все подходят под ваши условия. Если брать free, то штук 10. Из перечисленных в ссылке на форуме обсуждалось и сравнивалось - Talend, Pentaho, Airflow, Nifi. Кафку сложно называть etl-em. Берёте любое название, забиваете в поиск и находите тему с обсуждением и сравнением. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
02.06.2020, 16:38
|
|||
|---|---|---|---|
|
|||
Сравнение ETL tools |
|||
|
#18+
IlyamI, была хорошая ветка сравнения Pentaho и SSIS от Юрия Абеля (ФИО латиницей ) надеюсь правильно написал я смотрел ее имея приличный опыт в SSIS предполагая использовать Pentaho ( в этом же форуме спрашивал про Pentaho те вопросы что возникали ) имею опыт с Талендом (давно уже - лет 5 назад на 2 проектах на оффшор бесплатная версия имеет куча ограничений - не рекомендовал а платная стоит прилчных денег ) Мне очень понравилось Airflow по описанию (точнее то что люди показали) (Python) но он под Linux ( хотя вроде кто-то умадрялся под Windows запустить - но мне тогда не удалось ) и про коннекторы к оффису не в теме есть чат в телеграме - там можно спросить что интерсует PS как варинат sql scrtipts через link-servers и ранить их в jobs - чем не ETL на прошлой работе было - вполне себе работоспобосно (правда на ms-sql) PPS авторВозникли тут проблемы с работой расширения SSIS в Visual Studio 2019. а что за они то ? Критичные ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
03.06.2020, 08:04
|
|||
|---|---|---|---|
Сравнение ETL tools |
|||
|
#18+
IlyamI, Я использую SSIS под VS 2019 . Хотя он стал тормознее. Скорее студия стала, а на сами пакеты. При крупной перекачке деплойте на сервер и пускайте там. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
03.06.2020, 08:07
|
|||
|---|---|---|---|
Сравнение ETL tools |
|||
|
#18+
Бумбараш Из перечисленных в ссылке на форуме обсуждалось и сравнивалось - Talend, Pentaho, Airflow, Nifi. Это очень оптимистичное заявление. Берете, а потом одни грабли другие, -- объемы не переваривает, с драйверами не дружит, майкрософт не любит и т.п. С SSIS есть уверенность, что джоб с пакетами будет стабильно качать, что нужно и сколько нужно. А насчет остальных, вопрос в сталибльности сильно актуален. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
03.06.2020, 21:30
|
|||
|---|---|---|---|
Сравнение ETL tools |
|||
|
#18+
мы NIFI хадупы грузим. очень нравится. под виндой запускается ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
start [/forum/topic.php?fid=49&mobile=1&tid=1857309]: |
0ms |
get settings: |
11ms |
get forum list: |
14ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
62ms |
get topic data: |
13ms |
get forum data: |
3ms |
get page messages: |
46ms |
get tp. blocked users: |
2ms |
| others: | 243ms |
| total: | 402ms |
| 0 / 0 |
Извините, этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
... ля, ля, ля ...
