powered by simpleCommunicator - 2.0.49     © 2025 Programmizd 02
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
25 сообщений из 75, страница 3 из 3
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39229347
mishanya3624
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

Разворачивал все с нуля да.
поле data source name тоже самое , что и у меня data source , это название источника данных и всего, в этом проблемы не должно быть.
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39229350
mishanya3624
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Если пользовательский создать источник, та же фигня?
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39229360
mishanya3624
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

p.s. у меня cloudera просто ставил не quikstart а отдельно через manager
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39230413
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
mishanya3624,

А можно поподробнее? С скачал на виртуальную машину cloudera на свой компьютер под виндой
Если я правильно понял, чтобы развернуть через manager , нужно самому развернуть виртуальную машину, скачать дистрибутивы, сделать несколько кластеров

Ничего не пропустил?
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39230421
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

Просто у меня всего 8 гб оперативки
Пробовал ставить horton но он вообще не загрузился
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39230861
mishanya3624
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1mishanya3624,

А можно поподробнее? С скачал на виртуальную машину cloudera на свой компьютер под виндой
Если я правильно понял, чтобы развернуть через manager , нужно самому развернуть виртуальную машину, скачать дистрибутивы, сделать несколько кластеров

Ничего не пропустил?
Да, все верно, чтоб не создавать ноды каждый по отдельности, можно клонировать.
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231324
Вжик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Всем привет.
По ссылке, может кому поможет.
http://webfiles.ru/files/44991504
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231654
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Вжик,

пока не помогла , половина файла о том как устанавливать virtualbox
и ни слова что когда запускаю файл cloudera-manager-installer.bin
из адреса " http://archive.cloudera.com/cm5/installer/latest/cloudera-manager-installer.bin"

появляется ошибка "отказано в доступе"
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231655
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

вот тут

http://www.cloudera.com/downloads/manager/5-7-0.html

написано надо дать права
$ chmod u+x cloudera-manager-installer.bin

я дал появилась другая ошибка

"SELinux is enabled it must be desabled"
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231657
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

Security- Enhanced Linux (SELinux) является особенностью механизма в Linux, что обеспечивает поддержку политик безопасности контроля доступа.

отключается здесь
cat /etc/sysconfig/selinux
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231664
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

установилось, а что дальше? )

где кластеры hdfs , hue и прочие hive?
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231665
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

надо отдельно скачать cdh5

http://www.cloudera.com/downloads/cdh/5-7-0.html
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231666
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

или нет. читаю статью
Installation Path A - Automated Installation by Cloudera Manager

http://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_install_path_a.html#cmig_topic_6_5_unique_2
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231669
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

http://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_permissions.html#xd_583c10bfdbd326ba--6eed2fb8-14349d04bee--7eb1

Permission Requirements for Package-based Installations and Upgrades of CDH

Запускаем службу

service cloudera-scm-server start
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231716
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1мигель1,

или нет. читаю статью
Installation Path A - Automated Installation by Cloudera Manager

http://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_install_path_a.html#cmig_topic_6_5_unique_2

после распаковки в папке cloudera есть 2 файла CSD , parcel-repo
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231718
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1мигель1мигель1,

или нет. читаю статью
Installation Path A - Automated Installation by Cloudera Manager

http://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_install_path_a.html#cmig_topic_6_5_unique_2

после распаковки в папке cloudera есть 2 файла CSD , parcel-repo

2 папки. и обе пустые...
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231724
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

если я правильно понял логику, после установки нужно создать репозиторий
Сделать это можно 2 путями (Parcel или Package)

Cloudera рекомендует Creating and Using a Parcel Repository for Cloudera Manager
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39231727
Вжик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Тут еще одна, по Cloudera, посмотрите, может поможет
http://webfiles.ru/files/44995389

В ней установка делалась на амазоне + SSH по ключу, но сам путь с Cloudera должен быть таким, с поправкой на новую версию.
По мне так Hortonworks ставится проще и документация у них лучше.
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39232546
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Вжик,

Встрял на точке: перейти по URL откуда URl в линуксе?
это же командная строка
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39232555
mishanya3624
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1,

ifconfig посмотри ip машины линуксовой и с винды зайди, если у тебя гуев на линуксе нет.
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39232624
Вжик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Да, все верно, через web интерфейс с другой любой тачки управляем процессом установки. Далее через такой же веб интерфейс с другой тачки можно будет рулить конфигурацией.
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39233035
Вжик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Если кому интересно, то есть вакансия, довести BI до совершенства, далее идти в Big Data, Machine Learning, строить решения на основе Lambda-architecture, Data Lake, практиковаться в решении прикладных задач:
http://www.sql.ru/forum/1212997/vakansiya-bi-developer-moskva
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39234425
мигель1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
ВжикЕсли кому интересно, то есть вакансия, довести BI до совершенства, далее идти в Big Data, Machine Learning, строить решения на основе Lambda-architecture, Data Lake, практиковаться в решении прикладных задач:
http://www.sql.ru/forum/1212997/vakansiya-bi-developer-moskva

битая ссылка
Запрашиваемая страница была удалена.
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39234443
servit
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
мигель1битая ссылка
Запрашиваемая страница была удалена.Оно же:

Код: plaintext
Запрашиваемая страница была удалена.
...
Рейтинг: 0 / 0
Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
    #39429008
JJZ
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Можете посоветовать книгу по Big Data (где встречаются все основные технологии Hadoop, Spark, ...), где много примеров. Желательно, чтобы примеры можно было с сайта скачать и запустить.

Нашел пока только одну по Spark: Big Data Analytics with Spark: A Practitioner's Guide to Using Spark for Large Scale Data Analysis ( https://www.amazon.com/Big-Data-Analytics-Spark-Practitioners/dp/1484209656).

А то в основном книги по терии Big Data, а хотелось бы со множеством примеров + обзор + все в одной книге.

Спасибо
...
Рейтинг: 0 / 0
25 сообщений из 75, страница 3 из 3
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Где взять хорошие учебники/видео по Hadoop, MapReduce, Hive и т.д.?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]