10 0 0 0 買い物自慢:高速・大容量NASで快適生活
画像をはじめとする大容量のデータを取り扱う際,クラウドストレージだけではアクセス性能要件を満たせない場合がある.そこで,大容量かつ高速アクセスが可能なストレージシステムの構築作業を低予算で一から行った.記憶装置は安価なHDDを採用しながらも,ZFSによるソフトウェアRAIDを用いることで十分な性能と信頼性を確保することができた.また,アクセス用ネットワークにはスパコンで用いられるInfiniBandを採用し,56 Gbpsのスループットを確保した.このような装置を個人で構築・運用した事例について紹介する.
2 0 0 0 RDMAによる低オーバヘッドファイルアクセスと冗長記録
- 著者
- 大辻弘貴 建部修見
- 雑誌
- 研究報告ハイパフォーマンスコンピューティング(HPC)
- 巻号頁・発行日
- vol.2012, no.29, pp.1-6, 2012-12-06
大容量のデータ処理にあたって,高性能な共有ファイルシステムが求められている.共有ファイルシステムにおいては,アプリケーションはネットワークを介してデータアクセスを行うが,この部分がボトルネックになると十分にシステムの性能を発揮することが出来ない.従って,高性能なネットワークを効率よく使用する必要がある.そこで,ここでは, Infiniband に備わる RDMA (Remote Direct Memory Access) を用い,低オーバヘッドのファイルアクセスを行う.また,大容量データの保管にあたり,ストレージ領域を節約するための冗長記録についても評価を行った.さらに,冗長記録されたデータをストレージノードの負荷分散に用いる方法についても提案し,それを評価した.