|
Хранение данных в hdfs
|
|||
---|---|---|---|
#18+
Господа, добрый день! У нашего руководства возникла идея хранить данные (бэкапы, просто файловая помойка) в hadoop. Можно ли это организовать на hdfs, чтобы был доступ по какому-нибудь распространенному протоколу(samba,nfs). Или может существуют обертки к СУБД на hadoop типа hive,hbase,cassandra, чтобы превращать эти базы в файловые храналища. ... |
|||
:
Нравится:
Не нравится:
|
|||
06.03.2014, 07:56 |
|
Хранение данных в hdfs
|
|||
---|---|---|---|
#18+
reistlin, А какое количество одновременных пользователей может быть (порядок)? ... |
|||
:
Нравится:
Не нравится:
|
|||
07.03.2014, 09:45 |
|
Хранение данных в hdfs
|
|||
---|---|---|---|
#18+
я бы смотрел в сторону NoSQL баз данных (наверное в сторону самых простых, типа key-value). например, Oracle NoSQL Database: http://www.oracle.com/us/products/database/nosql/overview/index.html http://oracle-nosql.blogspot.com ... |
|||
:
Нравится:
Не нравится:
|
|||
08.03.2014, 00:24 |
|
Хранение данных в hdfs
|
|||
---|---|---|---|
#18+
mijatovic, И писать специального клиента для того что бы сохранять и читать файлы? ... |
|||
:
Нравится:
Не нравится:
|
|||
09.03.2014, 00:44 |
|
Хранение данных в hdfs
|
|||
---|---|---|---|
#18+
День добрый! Да совершенно верно. Но это не так сложно как кажется. Клиентскую часть придется разрабытвать в любом случае (Hadoop, NoSQL, RDBMS)... ... |
|||
:
Нравится:
Не нравится:
|
|||
11.03.2014, 17:53 |
|
Хранение данных в hdfs
|
|||
---|---|---|---|
#18+
mijatovicДень добрый! Да совершенно верно. Но это не так сложно как кажется. Клиентскую часть придется разрабытвать в любом случае (Hadoop, NoSQL, RDBMS)... Для hdfs я нашел вот что: http://wiki.apache.org/hadoop/MountableHDFS contrib/fuse-dfs is built on fuse, some C glue, libhdfs and the hadoop-dev.jar fuse-j-hdfs is built on fuse, fuse for java, and the hadoop-dev.jar hdfs-fuse - a google code project is very similar to contrib/fuse-dfs webdav - hdfs exposed as a webdav resource mapR - contains a closed source hdfs compatible file system that supports read/write NFS access HDFS NFS Proxy - exports HDFS as NFS without use of fuse. Supports Kerberos and re-orders writes so they are written to hdfs sequentially. Причем нормально работает только contrib/fuse-dfs, где надо ставить клиент, которого под windows нет. ... |
|||
:
Нравится:
Не нравится:
|
|||
12.03.2014, 14:32 |
|
|
Start [/forum/topic.php?fid=48&fpage=11&tid=1856905]: |
0ms |
get settings: |
25ms |
get forum list: |
8ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
59ms |
get topic data: |
13ms |
get forum data: |
3ms |
get page messages: |
274ms |
get tp. blocked users: |
2ms |
others: | 182ms |
total: | 574ms |
0 / 0 |