powered by simpleCommunicator - 2.0.27     © 2024 Programmizd 02
Map
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Хранение данных в hdfs
7 сообщений из 7, страница 1 из 1
Хранение данных в hdfs
    #38579681
reistlin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Господа, добрый день!
У нашего руководства возникла идея хранить данные (бэкапы, просто файловая помойка) в hadoop. Можно ли это организовать на hdfs, чтобы был доступ по какому-нибудь распространенному протоколу(samba,nfs).
Или может существуют обертки к СУБД на hadoop типа hive,hbase,cassandra, чтобы превращать эти базы в файловые храналища.
...
Рейтинг: 0 / 0
Хранение данных в hdfs
    #38580827
Birkhoff
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
reistlin,
А какое количество одновременных пользователей может быть (порядок)?
...
Рейтинг: 0 / 0
Хранение данных в hdfs
    #38581227
BlackEric
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Зачем hadoop для файлопомойки? Это не его задача.

здесь обсуждали кое-что.
...
Рейтинг: 0 / 0
Хранение данных в hdfs
    #38581658
mijatovic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
я бы смотрел в сторону NoSQL баз данных (наверное в сторону самых простых, типа key-value).
например, Oracle NoSQL Database:
http://www.oracle.com/us/products/database/nosql/overview/index.html
http://oracle-nosql.blogspot.com
...
Рейтинг: 0 / 0
Хранение данных в hdfs
    #38581952
BlackEric
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
mijatovic,

И писать специального клиента для того что бы сохранять и читать файлы?
...
Рейтинг: 0 / 0
Хранение данных в hdfs
    #38583240
mijatovic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
День добрый!

Да совершенно верно. Но это не так сложно как кажется. Клиентскую часть придется разрабытвать в любом случае (Hadoop, NoSQL, RDBMS)...
...
Рейтинг: 0 / 0
Хранение данных в hdfs
    #38584041
reistlin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
mijatovicДень добрый!

Да совершенно верно. Но это не так сложно как кажется. Клиентскую часть придется разрабытвать в любом случае (Hadoop, NoSQL, RDBMS)...
Для hdfs я нашел вот что:
http://wiki.apache.org/hadoop/MountableHDFS contrib/fuse-dfs is built on fuse, some C glue, libhdfs and the hadoop-dev.jar
fuse-j-hdfs is built on fuse, fuse for java, and the hadoop-dev.jar
hdfs-fuse - a google code project is very similar to contrib/fuse-dfs
webdav - hdfs exposed as a webdav resource
mapR - contains a closed source hdfs compatible file system that supports read/write NFS access
HDFS NFS Proxy - exports HDFS as NFS without use of fuse. Supports Kerberos and re-orders writes so they are written to hdfs sequentially.

Причем нормально работает только contrib/fuse-dfs, где надо ставить клиент, которого под windows нет.
...
Рейтинг: 0 / 0
7 сообщений из 7, страница 1 из 1
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Хранение данных в hdfs
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]