ReSQL.ru
     
powered by simpleCommunicator - 2.0.59     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Import csv/json into DynamoDB AWS
7 сообщений из 7, страница 1 из 1
Import csv/json into DynamoDB AWS
    #39125887
ora601
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ora601
Участник
Кто нибудь, грузил csv/json данные в AWS dynamoDB ?

При загрузке через Datapipeline сталкиваюсь с : Failed to complete EMR transform.

Есть способы через Java/.NET но ими не хочется пользоваться.
...
Рейтинг: 0 / 0
11.12.2015, 14:57
| Ответить | Цитировать | Написать  
Import csv/json into DynamoDB AWS
    #39126275
Фотография Apex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Apex
Участник
ora601Кто нибудь, грузил csv/json данные в AWS dynamoDB ?

При загрузке через Datapipeline сталкиваюсь с : Failed to complete EMR transform.

Есть способы через Java/.NET но ими не хочется пользоваться.

А support чего говорит?
...
Рейтинг: 0 / 0
12.12.2015, 04:23
| Ответить | Цитировать | Написать  
Import csv/json into DynamoDB AWS
    #39126277
Фотография Apex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Apex
Участник
ora601 Есть способы через Java/.NET но ими не хочется пользоваться.
Есть вариант попроще, через boto.

А вообще, дай pipeline ID, попробую глянуть.
...
Рейтинг: 0 / 0
12.12.2015, 04:37
| Ответить | Цитировать | Написать  
Import csv/json into DynamoDB AWS
    #39126360
ora601
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ora601
Участник
Apex,

df-0140516RZXOQTHR5C5L


Вообще я уже нашел другой способ, через hive script который пишет в dynamoDB. Но просто иногда эти ошибки хадупа еще та темень :)
...
Рейтинг: 0 / 0
12.12.2015, 13:43
| Ответить | Цитировать | Написать  
Import csv/json into DynamoDB AWS
    #39126534
Фотография Apex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Apex
Участник
Код: java
1.
Exception in thread "main" java.io.IOException: Input path not a directory: s3://bckt2/csv/1.csv
...
Рейтинг: 0 / 0
12.12.2015, 22:45
| Ответить | Цитировать | Написать  
Import csv/json into DynamoDB AWS
    #39174936
Leoris
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Leoris
Гость
Apex,

судя по тексту ошибки, нужно указать путь к папке, а не к конкретному файлу.
...
Рейтинг: 0 / 0
19.02.2016, 09:27
| Ответить | Цитировать | Написать  
Import csv/json into DynamoDB AWS
    #39175718
Фотография Apex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Apex
Участник
LeorisApex,

судя по тексту ошибки, нужно указать путь к папке, а не к конкретному файлу.
Да вы, я смотрю, не просто капитан Очевидность, я прямо таки адмирал Ясен х.й!:)

Я в курсе, что значит эта ошибка, это был не вопрос с моей стороны, это был мой ответ автору топика, на вопрос почему падает его pipeline.
...
Рейтинг: 0 / 0
20.02.2016, 01:28
| Ответить | Цитировать | Написать  
7 сообщений из 7, страница 1 из 1
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Import csv/json into DynamoDB AWS
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=48&tid=1856770]:
 0ms
get settings:
 10ms
get forum list:
 12ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 168ms
get topic data:
 10ms
get forum data:
 3ms
get page messages:
 40ms
get tp. blocked users:
 1ms
others: 10ms
total:  262ms
созд. / загр.: 262ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]