Гость
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Import csv/json into DynamoDB AWS / 7 сообщений из 7, страница 1 из 1
11.12.2015, 14:57
    #39125887
ora601
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Import csv/json into DynamoDB AWS
Кто нибудь, грузил csv/json данные в AWS dynamoDB ?

При загрузке через Datapipeline сталкиваюсь с : Failed to complete EMR transform.

Есть способы через Java/.NET но ими не хочется пользоваться.
...
Рейтинг: 0 / 0
12.12.2015, 04:23
    #39126275
Apex
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Import csv/json into DynamoDB AWS
ora601Кто нибудь, грузил csv/json данные в AWS dynamoDB ?

При загрузке через Datapipeline сталкиваюсь с : Failed to complete EMR transform.

Есть способы через Java/.NET но ими не хочется пользоваться.

А support чего говорит?
...
Рейтинг: 0 / 0
12.12.2015, 04:37
    #39126277
Apex
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Import csv/json into DynamoDB AWS
ora601 Есть способы через Java/.NET но ими не хочется пользоваться.
Есть вариант попроще, через boto.

А вообще, дай pipeline ID, попробую глянуть.
...
Рейтинг: 0 / 0
12.12.2015, 13:43
    #39126360
ora601
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Import csv/json into DynamoDB AWS
Apex,

df-0140516RZXOQTHR5C5L


Вообще я уже нашел другой способ, через hive script который пишет в dynamoDB. Но просто иногда эти ошибки хадупа еще та темень :)
...
Рейтинг: 0 / 0
12.12.2015, 22:45
    #39126534
Apex
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Import csv/json into DynamoDB AWS
Код: java
1.
Exception in thread "main" java.io.IOException: Input path not a directory: s3://bckt2/csv/1.csv
...
Рейтинг: 0 / 0
19.02.2016, 09:27
    #39174936
Leoris
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Import csv/json into DynamoDB AWS
Apex,

судя по тексту ошибки, нужно указать путь к папке, а не к конкретному файлу.
...
Рейтинг: 0 / 0
20.02.2016, 01:28
    #39175718
Apex
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Import csv/json into DynamoDB AWS
LeorisApex,

судя по тексту ошибки, нужно указать путь к папке, а не к конкретному файлу.
Да вы, я смотрю, не просто капитан Очевидность, я прямо таки адмирал Ясен х.й!:)

Я в курсе, что значит эта ошибка, это был не вопрос с моей стороны, это был мой ответ автору топика, на вопрос почему падает его pipeline.
...
Рейтинг: 0 / 0
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Import csv/json into DynamoDB AWS / 7 сообщений из 7, страница 1 из 1
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]