Здравствуйте, lari,

Как у вас успехи - удалось запустить hadoop кластер?
Вроде бы с момента сообщения прошло 5 месяцев - я надеюсь что да. Раскажете о своём опыте?

Судя по отсутствию ответов, эта тема либо никого не интересует, либо немногие устанавливали кластер.
Я хочу поделиться своими наблюдениями.

По-моему, самый лучший способ начать работу с hadoop - виртуальная демо-машина от Cloudera.
Я на ней всегда тестирую скрипты, исправляю ошибки в логике, исходных данных и прочие важные мелочи.
У меня на сайте есть заметка с несколькими примерами использования hadoop - называется "Примеры использования Hadoop без программирования на Java" - если кому интересно - добро пожаловать.

После виртуальной машины я переношу те-же самые, уже проверенные, скрипты на настоящий кластер - либо на Амазоне, либо у себя, если могу пробиться :-)

Из моего опыта, для самой безболезненной установки кластера - опять же лучшее средство Cloudera с её бесплатным продуктом.

И уж последний вариант - ставить код из самого проекта Apache Hadoop.

Кроме того, я пришёл к выводу что чем проще mappers/reducers - тем быстрее всё начинает работать.
Если нужна сложная обработка - лучше сделать несколько последовательных "проходов", но с простыми алгоритмами, чем сразу пытаться сделать всё.

Удачи вам в "слоноводстве" :-)

=================================================
С уважением,
Денис

Библия для людей, работающих с командной строкой.
http://www.read-and-think.org/
=================================================