DFS関係備忘録
分散ファイルシステム(Distributed File System)関連の覚え書き.
まずはHadoop.Amazonなどでの利用実績も多数存在.
▽ Apache Hadoop
http://hadoop.apache.org/
CloudStoreは,以前Kosmos File System(KFS)と呼ばれていたもの.
▽ CloudStore(Kosmos File System)
http://kosmosfs.sourceforge.net/
Hypertableは,HadoopやCloudStoreをベースに動作する分散データベースの実装.
▽ Hypertable
http://www.hypertable.org/
もちろん,HDFS(Hadoop Distributed File System)をベースに動作する
分散データベース実装には,HBaseが基本なのだろう.
ただ,HDFSやHBaseはJavaで実装されており,CloudStore,Hypertableは
C++で実装されている.
あと,FUSE(Filesystem in Userspace)と連携すれば,
HDFSやKFSをmountできるようだ.
もちろん,ファイルを直接編集できないようだけど.
いずれにせよ,地味に検証を進めておいた方が良さそう.
まずはHadoop.Amazonなどでの利用実績も多数存在.
▽ Apache Hadoop
http://hadoop.apache.org/
CloudStoreは,以前Kosmos File System(KFS)と呼ばれていたもの.
▽ CloudStore(Kosmos File System)
http://kosmosfs.sourceforge.net/
Hypertableは,HadoopやCloudStoreをベースに動作する分散データベースの実装.
▽ Hypertable
http://www.hypertable.org/
もちろん,HDFS(Hadoop Distributed File System)をベースに動作する
分散データベース実装には,HBaseが基本なのだろう.
ただ,HDFSやHBaseはJavaで実装されており,CloudStore,Hypertableは
C++で実装されている.
あと,FUSE(Filesystem in Userspace)と連携すれば,
HDFSやKFSをmountできるようだ.
もちろん,ファイルを直接編集できないようだけど.
いずれにせよ,地味に検証を進めておいた方が良さそう.