Гость
Map
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Выполнение задания MapReduce / 3 сообщений из 3, страница 1 из 1
06.02.2014, 17:45
    #38552228
alex_101010
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Выполнение задания MapReduce
Выполнение задания MapReduce :
/usr/lib/hadoop/bin/hadoop jar /usr/lib/hadoop/hadoop-exam­ples.jar teragen 100000000 /test/10gsort/input
получаю ошибку:
ERROR security.UserGroupInformation: PriviledgedActionException as:hdfs cause:org.apache.hadoop.ipc.RemoteException: java.io.IOException: java.io.IOException: No valid local directories in property: mapred.local.dir
------------------------------------------------------------------------------------------
mapred.local.dir смотрел, права на каталог тоже, в чем может быть ошибка, помогите.
...
Рейтинг: 0 / 0
16.02.2014, 12:23
    #38562197
mijatovic
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Выполнение задания MapReduce
похоже ошибка позникает, когда TT (пользователь mapred) пытается записать файлы в mapred.local.dir, а прав на это нет.
Надо дать права на эту дирректорию.
+ можно попробовать запуститься:
Код: powershell
1.
sudo -u mapred /usr/lib/hadoop/bin/hadoop jar /usr/lib/hadoop/hadoop-exam­ples.jar teragen 100000000 /test/10gsort/input


что бы проверить это.
...
Рейтинг: 0 / 0
18.02.2014, 22:59
    #38565282
alex_101010
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Выполнение задания MapReduce
mijatovic,

Спасибо, попробую.)
...
Рейтинг: 0 / 0
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Выполнение задания MapReduce / 3 сообщений из 3, страница 1 из 1
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]