Гость
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Хранение данных в hdfs / 7 сообщений из 7, страница 1 из 1
06.03.2014, 07:56
    #38579681
reistlin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хранение данных в hdfs
Господа, добрый день!
У нашего руководства возникла идея хранить данные (бэкапы, просто файловая помойка) в hadoop. Можно ли это организовать на hdfs, чтобы был доступ по какому-нибудь распространенному протоколу(samba,nfs).
Или может существуют обертки к СУБД на hadoop типа hive,hbase,cassandra, чтобы превращать эти базы в файловые храналища.
...
Рейтинг: 0 / 0
07.03.2014, 09:45
    #38580827
Birkhoff
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хранение данных в hdfs
reistlin,
А какое количество одновременных пользователей может быть (порядок)?
...
Рейтинг: 0 / 0
07.03.2014, 15:15
    #38581227
BlackEric
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хранение данных в hdfs
Зачем hadoop для файлопомойки? Это не его задача.

здесь обсуждали кое-что.
...
Рейтинг: 0 / 0
08.03.2014, 00:24
    #38581658
mijatovic
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хранение данных в hdfs
я бы смотрел в сторону NoSQL баз данных (наверное в сторону самых простых, типа key-value).
например, Oracle NoSQL Database:
http://www.oracle.com/us/products/database/nosql/overview/index.html
http://oracle-nosql.blogspot.com
...
Рейтинг: 0 / 0
09.03.2014, 00:44
    #38581952
BlackEric
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хранение данных в hdfs
mijatovic,

И писать специального клиента для того что бы сохранять и читать файлы?
...
Рейтинг: 0 / 0
11.03.2014, 17:53
    #38583240
mijatovic
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хранение данных в hdfs
День добрый!

Да совершенно верно. Но это не так сложно как кажется. Клиентскую часть придется разрабытвать в любом случае (Hadoop, NoSQL, RDBMS)...
...
Рейтинг: 0 / 0
12.03.2014, 14:32
    #38584041
reistlin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хранение данных в hdfs
mijatovicДень добрый!

Да совершенно верно. Но это не так сложно как кажется. Клиентскую часть придется разрабытвать в любом случае (Hadoop, NoSQL, RDBMS)...
Для hdfs я нашел вот что:
http://wiki.apache.org/hadoop/MountableHDFS contrib/fuse-dfs is built on fuse, some C glue, libhdfs and the hadoop-dev.jar
fuse-j-hdfs is built on fuse, fuse for java, and the hadoop-dev.jar
hdfs-fuse - a google code project is very similar to contrib/fuse-dfs
webdav - hdfs exposed as a webdav resource
mapR - contains a closed source hdfs compatible file system that supports read/write NFS access
HDFS NFS Proxy - exports HDFS as NFS without use of fuse. Supports Kerberos and re-orders writes so they are written to hdfs sequentially.

Причем нормально работает только contrib/fuse-dfs, где надо ставить клиент, которого под windows нет.
...
Рейтинг: 0 / 0
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Хранение данных в hdfs / 7 сообщений из 7, страница 1 из 1
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]