Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / Java [игнор отключен] [закрыт для гостей] / Система(создание тестовой среды) для практического обучения в области Big Data? / 11 сообщений из 11, страница 1 из 1
27.12.2016, 20:21
    #39376351
_webdev_
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
Здравствуйте,

хоче немного поучиться в направлении BigData, Messaging Systems, Cassandra, Spark и так д..
Теории уже обчитался, но без хотя бы малейшей практики нельзя сказать, что понимаю как работает..
Хочу поменять немного профиль в этом направлении, сейчас работаю Java разработчиком.

Так вот - в чем вопрос.

Подскажите как, как лучше - настраивать рабочую среду, чтоб была возможность реально развернуть несколько микросервисов, настроить ZooKeeper или Consul, установить Cassandra, ElasticSearch и так д, чтоб хотя бы "пощупать", посмотреть, чтоб хотя бы была возможность для себя определить, что да, минимальный опыт и понимание есть..

На одной машине - как-то не оч по "фэн-шую". Хочется чтоб все по "взрослому".
По взрослому, для обучения и тестирования ничего не нашел..
Например на AWS есть бесплатный аккаунт, но там только 1 "инстанц" бесплатно дается...
Может Vagrant с виртуалками?

Я надеюсь, что вопрос мой понятен и кто-то что-то подскажет. Чтоб бесплатно или с минимальными затратами.. Можно взять виртуальный VDS - тоже копейки стоит, но это же тоже одна машина..
Или все-таки локальная машина с различными виртуальными хостами единственный выход?

Спасибо!
...
Рейтинг: 0 / 0
27.12.2016, 20:31
    #39376353
Usman
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
_webdev_Или все-таки локальная машина с различными виртуальными хостами единственный выход?На начальном этапе - да, и главное в этом деле - по больше оперативки.
...
Рейтинг: 0 / 0
27.12.2016, 20:36
    #39376355
_webdev_
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
Usman_webdev_Или все-таки локальная машина с различными виртуальными хостами единственный выход?На начальном этапе - да, и главное в этом деле - по больше оперативки. - да, это понятно. )) Сейчас 16, придется тогда 32 докупать. )) Может гугл что-то такое предлагает для обучения?
Спасибо за ответ, интересны также другие мнения..
Ну и если локальная машина, то как наименее болезненно сконфигурировать и управлять например 10 хостами? Vagrant+Ansible или играться с Docker?
...
Рейтинг: 0 / 0
27.12.2016, 21:00
    #39376369
Petro123
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
_webdev_,
тема вроде бы не про программирование. Раз управлять хостами.
Если руками, то клонируешь папки с виртуалкой и запуск. Назначить разные адреса IP пара минут.
...
Рейтинг: 0 / 0
27.12.2016, 21:16
    #39376380
_webdev_
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
Petro123_webdev_,
тема вроде бы не про программирование. Раз управлять хостами.
Если руками, то клонируешь папки с виртуалкой и запуск. Назначить разные адреса IP пара минут. - Да, согласен, что тема не очень по программированию. Но если есть здесь люди которые работают с данными технологиями, то очевидно, что у них есть и такой опыт. Не у всех фирмах присутствует DevOps и зачастую такие задачи делают сами программисты.
...
Рейтинг: 0 / 0
27.12.2016, 21:33
    #39376385
Petro123
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
_webdev_,
я же вам ответил свой вариант.
...
Рейтинг: 0 / 0
27.12.2016, 21:41
    #39376387
_webdev_
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
Petro123_webdev_,
я же вам ответил свой вариант. - Я Вас услышал. Спасибо!
А такой вариант имеет право быть?
Я правильно понимаю, что Docker Swarm https://github.com/docker/swarm - Это среда для управления контейнерами(теми самыми виртуалками)? Можно его на локальной машине установить, потому управлять например 10мя контейнерами?
...
Рейтинг: 0 / 0
27.12.2016, 22:00
    #39376396
Petro123
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
_webdev_,
рядом ветка форума и вот, ваша тема
http://www.sql.ru/forum/1047998/test-dannye-dlya-hadoop-a?hl=????????????
...
Рейтинг: 0 / 0
27.12.2016, 22:11
    #39376402
_webdev_
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
Petro123_webdev_,
рядом ветка форума и вот, ваша тема
http://www.sql.ru/forum/1047998/test-dannye-dlya-hadoop-a?hl=???????????? - не доглядел.. А есть здесь модератор? Перенесите пожалуйста. Спасибо.
...
Рейтинг: 0 / 0
27.12.2016, 22:47
    #39376417
Petro123
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
_webdev_,
мы тут без модера все взрослые)).
- заведи там новую тему.
Удачи!
...
Рейтинг: 0 / 0
28.12.2016, 00:15
    #39376454
_webdev_
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Система(создание тестовой среды) для практического обучения в области Big Data?
Petro123_webdev_,
мы тут без модера все взрослые)).
- заведи там новую тему.
Удачи!
Пасиб, так и сделал.
http://www.sql.ru/forum/1244303-a/sistema-sozdanie-testovoy-sredy-dlya-prakticheskogo-obucheniya-v-oblasti-big-data
...
Рейтинг: 0 / 0
Форумы / Java [игнор отключен] [закрыт для гостей] / Система(создание тестовой среды) для практического обучения в области Big Data? / 11 сообщений из 11, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]