|
|
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
Здравствуйте, хоче немного поучиться в направлении BigData, Messaging Systems, Cassandra, Spark и так д.. Теории уже обчитался, но без хотя бы малейшей практики нельзя сказать, что понимаю как работает.. Хочу поменять немного профиль в этом направлении, сейчас работаю Java разработчиком. Так вот - в чем вопрос. Подскажите как, как лучше - настраивать рабочую среду, чтоб была возможность реально развернуть несколько микросервисов, настроить ZooKeeper или Consul, установить Cassandra, ElasticSearch и так д, чтоб хотя бы "пощупать", посмотреть, чтоб хотя бы была возможность для себя определить, что да, минимальный опыт и понимание есть.. На одной машине - как-то не оч по "фэн-шую". Хочется чтоб все по "взрослому". По взрослому, для обучения и тестирования ничего не нашел.. Например на AWS есть бесплатный аккаунт, но там только 1 "инстанц" бесплатно дается... Может Vagrant с виртуалками? Я надеюсь, что вопрос мой понятен и кто-то что-то подскажет. Чтоб бесплатно или с минимальными затратами.. Можно взять виртуальный VDS - тоже копейки стоит, но это же тоже одна машина.. Или все-таки локальная машина с различными виртуальными хостами единственный выход? Спасибо! ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 20:21 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
_webdev_Или все-таки локальная машина с различными виртуальными хостами единственный выход?На начальном этапе - да, и главное в этом деле - по больше оперативки. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 20:31 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
Usman_webdev_Или все-таки локальная машина с различными виртуальными хостами единственный выход?На начальном этапе - да, и главное в этом деле - по больше оперативки. - да, это понятно. )) Сейчас 16, придется тогда 32 докупать. )) Может гугл что-то такое предлагает для обучения? Спасибо за ответ, интересны также другие мнения.. Ну и если локальная машина, то как наименее болезненно сконфигурировать и управлять например 10 хостами? Vagrant+Ansible или играться с Docker? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 20:36 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
_webdev_, тема вроде бы не про программирование. Раз управлять хостами. Если руками, то клонируешь папки с виртуалкой и запуск. Назначить разные адреса IP пара минут. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 21:00 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
Petro123_webdev_, тема вроде бы не про программирование. Раз управлять хостами. Если руками, то клонируешь папки с виртуалкой и запуск. Назначить разные адреса IP пара минут. - Да, согласен, что тема не очень по программированию. Но если есть здесь люди которые работают с данными технологиями, то очевидно, что у них есть и такой опыт. Не у всех фирмах присутствует DevOps и зачастую такие задачи делают сами программисты. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 21:16 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
_webdev_, я же вам ответил свой вариант. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 21:33 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
Petro123_webdev_, я же вам ответил свой вариант. - Я Вас услышал. Спасибо! А такой вариант имеет право быть? Я правильно понимаю, что Docker Swarm https://github.com/docker/swarm - Это среда для управления контейнерами(теми самыми виртуалками)? Можно его на локальной машине установить, потому управлять например 10мя контейнерами? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 21:41 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
_webdev_, рядом ветка форума и вот, ваша тема http://www.sql.ru/forum/1047998/test-dannye-dlya-hadoop-a?hl=???????????? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 22:00 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
Petro123_webdev_, рядом ветка форума и вот, ваша тема http://www.sql.ru/forum/1047998/test-dannye-dlya-hadoop-a?hl=???????????? - не доглядел.. А есть здесь модератор? Перенесите пожалуйста. Спасибо. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 22:11 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
_webdev_, мы тут без модера все взрослые)). - заведи там новую тему. Удачи! ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.12.2016, 22:47 |
|
||
|
Система(создание тестовой среды) для практического обучения в области Big Data?
|
|||
|---|---|---|---|
|
#18+
Petro123_webdev_, мы тут без модера все взрослые)). - заведи там новую тему. Удачи! Пасиб, так и сделал. http://www.sql.ru/forum/1244303-a/sistema-sozdanie-testovoy-sredy-dlya-prakticheskogo-obucheniya-v-oblasti-big-data ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 28.12.2016, 00:15 |
|
||
|
|

start [/forum/topic.php?fid=59&tid=2123323]: |
0ms |
get settings: |
4ms |
get forum list: |
18ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
52ms |
get topic data: |
9ms |
get forum data: |
2ms |
get page messages: |
44ms |
get tp. blocked users: |
1ms |
| others: | 194ms |
| total: | 330ms |

| 0 / 0 |
