Cloudian presentation for OSCA

Cloudian（クラウディアン）のご紹介
OSCA クラウドソリューションセミナー

2012年10月16日
クラウディアン株式会社

Copyright © 2012 Cloudian Inc. & KK All Rights Reserved. Page 1

Agenda

 Cloudianとは

 Cloudianの差別化ポイント

 Cloudianのアーキテクチャ


Cloudian（クラウディアン）とは
 商用実績のある大規模分散オブジェクトストレージ

 Amazon S3互換の豊富なAPI
 デファクトスタンダード
 オープンなAPI仕様
 既存のS3対応アプリケーションが
そのまま利用できる

 異種混在、低コスト汎用サーバー
利用のソフトウェア製品


Cloudian（クラウディアン）とは
 耐障害性、エラスティック性（弾力性）
 データをノード間で複製、データセンター間で複製
 サービス無停止でノードを追加できる（容量が拡大できる）

 マルチテナント、豊富な管理機能（課金、QoSなど）


S3 APIの例 - オブジェクトの格納
PUT /my-image.jpg HTTP/1.1
Host: my-bucket.s3.mydomain.jp
Date: Fri, 14 Sep 2012 17:50:00 GMT
Authorization: アクセスキー:シグネチャー
Content-Type: text/plain
Content-Length: 11434
Expect: 100-continue
…（以降、オブジェクトのデータ）

 REST - HTTP/HTTPSによるステートレスな通信
 シグネチャーは、リクエストの内容と時刻をシークレットキーで
ハッシュ値化したもの
 第３者が傍受しても、シークレットキーなしでは再実行や改ざん不可


S3 APIの例 - オブジェクトの取り出し
GET /my-image.jpg HTTP/1.1
Host: my-bucket.s3.mydomain.jp
Date: Fri, 14 Sep 2012 21:32:02 GMT
Range: bytes=0-500
Authorization:…


S3 APIによるアクセス
アプリケーションユーザー
クライアント・ライブラリー

ロード・バランサーロード・バランサー

Web画面（CMC）
S3 互換 REST API

Cloudian S3
ストレージノード


ネットワークファイルサーバー（NFS/CIFS）

アプリケーションユーザー
NFS / CIFS

S3対応ゲートウェイ（他社製品）
NAS ゲートウェイ
でファイルサーバー化
ロード・バランサー

S3 互換 REST API

Cloudian S3
ストレージノード


管理API
RESTful API
ユーザーシステム管理者課金システム
JSON形式のデータ


Web画面（CMC）

管理API

Cloudian
管理機能


Agenda

 Cloudianとは




高度なS3機能をカバー＋独自の追加機能

将来のS3機能

高度なS3機能
マルチパート・アップロード
Cloudian独自追加機能
ACL、オブジェクト・バージョニング
ロケーション・コンストレイン
マルチ・テナント
公開URLアクセス等
利用量制御（QoS）
基本S3 API互換
Put、Get、Head、Delete、等利用量レポート
基本オブジェクトストレージ機能
バーチャル・バケット
RESTful API、メタデータ付与
オブジェクトをバケットに格納、分散と複製マルチ・データセンター


高度なS3 APIの例 - オブジェクト・バージョニング

http://docs.amazonwebservices.com/AmazonS3/latest/dev/ObjectVersioning.html


高度なS3 APIの例 - ロケーション・コンストレイン


数多くのS3エコシステム製品で接続性を実証済み

代表的なS3エコシステム製品


複数データセンター対応

論理リング内のノード
数は2127まで理論的に
は可能（ほぼ無制限）

ただし、運用面では、
100台～400台
データを
論理リング複数のノード
に自動複製

DC1

DC2

複数データセンターや
ラック単位で指定可能
ノード追加や縮退時に、
自動でデータリバランス


マルチテナント、利用量制御（QoS）

格納容量バイト規制要求数規制


利用量レポート

• CMC上で統計情報をグラフ表示
• 管理APIを通じて利用実績
データをエクスポート


巨大オブジェクトも効率的に格納
オブジェクトのサイズに応じて最適な格納先を選択

小さなオブジェクト

HyperStore
Manager NOSQLデータベース

（特許申請中）
大きなオブジェクト

仮想マシンの
ムービー
VMイメージ

ファイルシステム

巨大オブジェクトも効率的に格納
 HyperStoreを利用しない時と比較して
 書き込み：約30％高速化
 読み出し：約400％高速化
 ディスク容量の利用効率：50％→80％に向上

HyperStore無し HyperStore有り

iostat %
utilization

io read/write
(MB)


ユーザー数、グループ数、格納サイズを無制限に拡張
バーチャル・バケット機能の例本年10月アルファ版リリース予定

１リージョンの容量を超えるバケットを実現
リージョン A リージョン B

１PB × 5＝5PB

例：1PB 例：1PB

リージョン C リージョン D リージョン E
例：1PB 例：1PB 例：1PB


Zabbixによるモニタリング
• CPU使用率、ディスク使用率
• S3オペレーションごとの統計データ（回数、遅延時間）
• Cassandraの統計データ


Agenda

 Cloudianとは




ストレージには実績のあるOSSを採用
Redis Apache Hyper-
超高速
インメモリDB Cassandra Store
大規模分散DB

データ分散参照

認証情報アカウント情報

QoSカウンタオブジェクト・メタデータ

オブジェクト・データ

利用実績データ


単一故障点を解消（No SPOF）
DC1 DC2

S3API/管理API S3API/管理API S3API/管理API S3API/管理API
サーバーサーバーサーバーサーバー

Redisマスタ Redisスレーブ Redisスレーブ Redisスレーブ

Cassandra Cassandra Cassandra Cassandra

HyperStore HyperStore HyperStore HyperStore

S3API/管理API S3API/管理API S3API/管理API S3API/管理API
サーバーサーバーサーバーサーバー

Cassandra Cassandra Cassandra Cassandra

HyperStore HyperStore HyperStore HyperStore


まとめ
 Cloudianは商用実績のある大規模分散オブジェクトストレージ

 高度なS3 APIをサポート
 マルチパート・アップロード、ACL、オブジェクト・バージョニング、
ロケーション・コンストレイン、公開URLアクセス等
 既存のS3対応アプリケーションがそのまま利用できる

 独自の追加機能
 複数データセンター対応
 マルチテナント、利用量制御（QoS）
 巨大なオブジェクトを効率的に格納
 ユーザー数、グループ数、格納サイズを無制限に拡張

 実績あるOSSの採用により堅牢性を実現


Cloudian評価版申し込み：
http://cloudian.jp/cloud-storage-products/cloudian_eval_agr.php

Homepage: cloudian.jp

Cloudian Twitter:@cloudian_kk

Cloudian Facebook Page:
http://www.facebook.com/cloudian.cloudstorage.S3

Cloudian Blog:
http://www.gemini-bigdata.com/

Copyright © 2012 Cloudian Inc. & KK All Rights Reserved.

Cloudian presentation for OSCA

Recomendados

Recomendados

Más contenido relacionado

La actualidad más candente

La actualidad más candente (20)

Destacado

Destacado (20)

Similar a Cloudian presentation for OSCA

Similar a Cloudian presentation for OSCA (20)

Más de CLOUDIAN KK

Más de CLOUDIAN KK (13)

Último

Último (9)

Cloudian presentation for OSCA