SlideShare una empresa de Scribd logo
1 de 35
Descargar para leer sin conexión
Cloudera:
 エンタープライズにおけるHadoopの標準




川崎 達夫
Cloudera株式会社 エデュケーションサービス
本日のアジェンダ	

•  エンタープライズにおける
  –  ポジション
        とは
  –  イノベーション

•  Cloudera University
  –  最新のトレーニングと認定資格




                  **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**
            Public use or redistribution prior to the embargo date is strictly prohibited.
製品テーマ




  2010
  Cloudera は
                 2012           2011
 エンタープライズに         Cloudera は   Cloudera は
               エンタープライズにおける     Hadoop の
   Hadoop を
                                リーダーです
   提供します        Hadoop の標準です
なぜ Cloudera がエンタープライズにおける
             なのか?



ポジション               イノベーション

我々の完全なソリューションは全ての   CDH4 + Cloudera Enterprise 4 は最
領域においてリードしています      先端の Hadoop プラットフォームです
完全なソリューションを持つ唯一のベンダー
CDH4

  Cloudera’s Distribution Including Apache Hadoop (CDH)
                                                          ストレージ      計算処理         アクセス     統合
  Apache Hadoop ベースのビッグデータ蓄積・処理・解析プラットフォーム
  – 100% オープンソース




Cloudera Enterprise 4.0
  Cloudera Manager
  CDHの構築と運用のための完全な管理アプリ                                    構築         設定          監視     検査とレポート
  ケーション




  製品サポート
  お客様のサービスレベル(SLA)維持を弊社エキス                                問題解決      エスカレーション      最適化    ナレッジベース
  パートチームが強力に支援します




                                                            Cloudera University
パートナーエコシステム                                                 ビッグデータ要員への技術付与 - 12,000人以上をトレーニング
ハード、ソフト、プラットフォーム、サービスでの250社以上のパートナー


                                                            プロフェッショナルサービス
                                                            ユースケース分析、パイロット、プロセスとチーム立ち上げ
CDH: 最高のプラットフォーム – 100% オープンソース
CDH4

 CDH              ストレージ       計算処理    アクセス    インテグレーション




                          最も普及している Apache Hadoop ディストリビュー
                          ション

                          エンタープライズの本番環境での実績でスケーラビ
                          リティは証明済み

                          100% オープンソースで、エンタープライズ向けに開
                          発されている


       安心してHadoopをご使用いただけます
Cloudera Manager 4: 比類なく強力
CDH4

 CDH                            ストレージ      計算処理     アクセス   インテグレーション




Cloudera Enterprise 4.0
 Cloudera Manager                構築         設定      監視     検査とレポート




                                        エンタープライズで利用可能な唯一の Hadoop 管
                                        理アプリケーション

                                        組み込まれているベストプラクティスとノウハウ

                                        Cloudera サポートと密に連携している




                    Hadoop を簡単かつ効率よく管理できます
製品サポート: 専門性で比肩するものなし
CDH4

 CDH                      ストレージ      計算処理      アクセス   インテグレーション




Cloudera Enterprise 4.0
 Cloudera Manager          構築         設定       監視     検査とレポート




 製品サポート                   問題解決      エスカレーション   最適化    ナレッジベース




                                  様々な産業分野における、1万ノード以上のクラスタ
                                  を管理してきた経験

                                  CDHの全てのコンポーネントにおける専任エキス
                                  パート

                                  全てのプロジェクトにコントリビュータとコミッタが存
                                  在


          性能の最適化と稼働時間の最大化を確実なものにします
パートナーエコシステム: 幅広い領域での統合
CDH4

  CDH                                 ストレージ      計算処理      アクセス   インテグレーション




Cloudera Enterprise 4.0
  Cloudera Manager                     構築         設定       監視     検査とレポート




  製品サポート                              問題解決      エスカレーション   最適化    ナレッジベース




パートナーエコシステム                                   あらゆる最先端のハードウェア、プラットフォーム、
ハード、ソフト、プラットフォーム、サービスでの250社以上のパートナー           データベース、データ統合基盤、BIソリューションと
                                              の連携を証明済み

                                              業界唯一のHadoop技術認定プログラム




             あらゆる業界のトップ企業がCDH上で開発しています
なぜ Cloudera がエンタープライズにおける
             なのか?



ポジション                              イノベーション

我々の完全なソリューションは全ての                  CDH4 + Cloudera Enterprise 4 は最
領域においてリードしています                     先端の Hadoop プラットフォームです


                        CDH
            Cloudera’s distribution including
                   Apache Hadoop
CDHとは何か?	

  Cloudera’s Distribution Including
  Apache Hadoop (CDH) はエンタープライズ対応の
  Hadoopディストリビューションです	
  	
  
   ü    100%	
  ピュア Apache	
  Hadoop	
  
   ü    導入に必要な全てのコンポーネントを含んでいます	
   ü    お客様の既存のインフラへの統合は簡単です	
   ü    全てドキュメント化されていてサポートがあります	




         成功への最短距離	
                               安定性と信頼性	
                                              完全なオープンソース	
  
	
                                 	
                                                               	
  
§  全てのコンポーネントバージョンと依存関            §  ClouderaのQAチームによって完璧にテ                                       §  オープンソースコミュニティのメインライ
     係が管理された完全なHadoopスタックを              ストされています	
                                                       ンコンポーネントだけを含みます。
     提供します	
                       §  多数のエンタープライズ環境でスケール                                                フォークもなくプロプライエタリ基盤もあ
                                                                                                         りません	
§  様々なOS、ハードウェア、データベース、               することが証明されています	
    データウェアハウス、BIツールと連携でき                                                                            §  自由にダウンロードできます	
    ます	




                              **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**
                        Public use or redistribution prior to the embargo date is strictly prohibited.
CDH: Cloudera’s Distribution Including Apache Hadoop	


                              File System Mount                      UI Framework/SDK                                       Data Mining
 Build/Test: APACHE BIGTOP

                                        FUSE-DFS                                    HUE                                    APACHE MAHOUT


                                   Workflow                                 Scheduling                                      Metadata
                                   APACHE OOZIE                               APACHE OOZIE                                   APACHE HIVE


                                                                 Languages / Compilers
                                                                    APACHE PIG, APACHE HIVE                                 Fast Read/Write
                             Data Integration
                                                                                                                                Access

                             APACHE FLUME,
                             APACHE SQOOP                                                                                  APACHE HBASE


                             APACHE WHIRR                                 Coordination                         APACHE ZOOKEEPER




                                                **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**
                                          Public use or redistribution prior to the embargo date is strictly prohibited.
MapReduceとHDFS	
Trunk development (source of new features)

                                                                                                               0.23   0.23.1   2.0


         0.20.1           0.20.2                  0.21                                                      0.22




                                           “0.20.append”


                                                                             0.20.203             0.20.205
                                           “0.20.security”

                                                                                         0.20.204              1.0


CDH development

 CDH1                     CDH2            U1         U2           U3 CDH3               U1          U2                   U3    CDH4



      2009                      2010                                                  2011                                2012


                                 **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**
                           Public use or redistribution prior to the embargo date is strictly prohibited.
なぜCDHなのか?	
⻑⾧長所                   ユーザのどういう部分に関係するか

パッケージ化済み               他のどの形態のHadoopよりもはるかに簡単にインストールすることが
                       できます。
パッチ適⽤用済み               Apacheブランチをただダウンロードするよりも安定かつセキュアにし
                       てくれます。
実績の証明済み                数千もの組織が既にCDHを使っているため、利利⽤用リスクが低くなって
                       います。
⾼高機能                   CDHはより多くのユースケースをカバーし、ユーザはコアのHadoopだ
                       けを使っていたときよりも⽣生産性を向上できます。
統合済み                   全体を把握するための時間を節約し、バージョン間あるいはパッチ間
	
                     依存に基づく障害のリスクを減らします。
標準と認められている             既に多額の投資をしているRDBMS,  ETL,  そしてBIなどとCDHは最も
                       うまく連携できます。
サポートあり                 CDHは商業組織が⽀支援しているディストリビューションです。

100%Apacheライセンス        この技術への投資は保障されています。




                        **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**
                  Public use or redistribution prior to the embargo date is strictly prohibited.
なぜ Cloudera がエンタープライズにおける
             なのか?



ポジション               イノベーション

我々の完全なソリューションは全ての   CDH4 + Cloudera Enterprise 4 は最
領域においてリードしています      先端の Hadoop プラットフォームです
CDH4 + Cloudera Enterprise 4.0:"
エンタープライズの要件とは…


1                  4
    他のITとの統合           高可用性




2   セキュリティ

                   5
                       設定と構築の単純化




3                  6
    スケーラビリティと拡張性       グローバルサポートとサービス
CDH4 + Cloudera Enterprise 4.0:"
もっとハードルを上げてみる…
CDH4
                                                         §    高可用性
 Cloudera’s Distribution Including Apache Hadoop (CDH)
 Apache Hadoop ベースのビッグデータ蓄積・処理・解析プラットフォーム                §    セキュリティ
 – 100% オープンソース
                                                         §    拡張性



Cloudera Enterprise 4.0
 Cloudera Manager 4                                      §    簡単
 CDHの構築と運用のための完全な管理アプリケーション                              §    強力
                                                         §    統合


 製品サポート
 お客様のサービスレベル(SLA)維持を弊社
 エキスパートチームが強力に支援します
CDH4: 高可用性


ミッションクリティカル領域における使いやすさを向上さ
せる




高可用性ネームノード                    ヘテロジニアスクラスタ
機能: セカンダリネームノードをホットスタンバイとし、   機能: ユーザは異なるバージョンのHadoopノードを混
フェイルオーバさせることができる              在させることができる

利点: HDFSにおける唯一の単一障害点をなくすことが   利点: クラスタのノードを一つ一つ更新していくことでダ
できる                           ウンタイムを削減できる
CDH4: セキュリティ


CDHにより機密性の高いデータを保存し、マルチテナント
実現のためのきめ細かいアクセスコントロールを提供する




HBase のテーブル及びカラム                FairスケジューラのACL
のパーミッション                        機能: グループが異なるFairスケジューラプールへジョ
                                ブを送信したり制御したりできるようになる
機能: ユーザ/グループのHBaseテーブルとカラムへのア
クセス制御                           利点: マルチテナントクラスタを管理しやすくなる

利点: HBase に機密情報を保存できるようになる。マル
チテナントを実現しやすくなる
CDH4: 拡張性


CDHは他のデータ管理システムに比べて幅広い領域の問題を
解決することができるようになる




HBase コプロセッサ                    オープンリソースマネジメント
機能: ユーザ独自のプログラムを使ってリアルタイムに      (MapReduce2)
データを処理できるようになる
                                機能: 単一のHadoopクラスタ上で複数のデータ処理フレー
利点: 開発者はHBase上でより高度なリアルタイムアプリ   ムワークを実行できる
ケーションを作成できるようになる
                                利点: 同一ストレージ及びクラスタリソース上で多くのアプリ
                                ケーションを実行できるようになり、コストを削減できる
CDH4: その他の機能

§    汎用圧縮コーデック(Snappy)
§    汎用ファイルフォーマット(Avro)
§    HDFS への REST over HTTP アクセス
§    ネームノードフェデレーションによる無制限のファイル管理
§    Web 上から Pig、HBase、Flumeを操作するシェル
§    スロットレスリソースマネージャ
§    Hive での並列クエリのサポート
§    ファイルシステム I/O 性能が 100% 向上
§    HBase のランダム読み込み速度が 100% 向上
§    Flume のデータ処理速度が 200% 向上
§    MapReduce のシャッフル速度が 30% 向上
  A MRv1のアーキテクチャ	
     client submits a job to the JobTracker
     –  JobTracker assigns a job ID
     –  Client calculates the input splits for the job
     –  JobTrackerとTaskTracker	
     •  Client adds job code and configuration to HDFS


        Client                                                                                                   TaskTracker

                                                          JobTracker




         TaskTracker                                                                                             TaskTracker

                                                          TaskTracker




                 Copyright © 2010-2012 Cloudera. All rights reserved. Not to be reproduced without prior written consent.
                                    **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**                                           04
                                Public use or redistribution prior to the embargo date is strictly prohibited.
  For each job, one slave node is Application Master
     –  MRv2のアーキテクチャ	
        Manages application lifecycle
     –  Negotiates resource “containers” from Resource Manager
     –  Monitors tasks running on the other slave nodes
     •  Resource ManagerとNodeManager	

        Node Manager                                                                                              Node Manager
                                                                                                              App Master - Job #2
                                            Resource Manager

                                                     Scheduler
                                                     Application Manager
       App Master - Job #1

        Node Manager                                                                                              Node Manager




               Copyright © 2010-2012 Cloudera. All rights reserved. Not to be reproduced without prior written consent.             0


                                       **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**
                                 Public use or redistribution prior to the embargo date is strictly prohibited.
Cloudera Manager 4: 簡単


 Cloudera Enterprise は構築と管理の最も簡単な Hadoop
 ソリューションです




3ステップのHA設定            複数クラスタ管理                      後方互換性
機能: ネームノードの高可用設定を3ス   機能: 単一の Cloudera Manager イン   機能: Cloudera Manager 4 は CDH3
テップで実行可能にする           スタンスから複数のクラスタを管理              と CDH4 の両方をサポート

利点: 10数ステップにわたる手動設定   利点: 全ての CDH 環境の管理を集約          利点: 管理の柔軟性
を3ステップに削減
Cloudera Manager 4: 強力


Cloudera Manager は巨大なクラスタを確実に管理するための
様々な可視化機能と柔軟な自動化機能を提供します




ヒートマップ                        ネームノードフェデレーションの管理
機能: サーバステータスとメトリクスを可視化
                              機能: ネームノードフェデレーションの設定と管理
利点: 巨大なクラスタにおいて問題のあるノードを高速に
                              利点: CDH が数千ノード、数十億ファイルの規模に成長しても
特定
                              シンプルに管理できる
Cloudera Manager 4: 統合


 Cloudera Enterprise は既存のインフラとプロセスとのシーム
 レスに連携します




Cloudera Manager             LDAP 認証                 様々な環境のサポート
API                          機能: 管理ユーザログインを Active   機能: Cloudera Manager は Debian/Ubuntu
                             Directory で認証           のパッケージも提供する。Oracle や
機能: Cloudera Manager の全機能の                           PostgreSQL もバックエンドDBとしてサポート
API を提供                                              する
                             利点: 管理者ユーザの認証情報管理を
利点: Cloudera Manager とユーザの   容易にする                   利点: 構築における柔軟性の向上
システム上に既存のエンタープライズク
ラスの管理・監視ツールとの連携を簡
単にする
Cloudera Manager 4: その他の機能

§  プラットフォームを導入するのを簡単にする
  §    クライアント設定ファイルを生成する
  §    Hadoop システムとして問題ないか、パラメータチェックをする
  §    ローカルリポジトリからの CDH インストールのサポート
  §    複数のデータ処理フレームワークの管理と設定
  §    HBase コプロセッサや HttpFS/Hoop など、CDH4 の新機能をサポート。

§  管理と監視の強化
  §    自動設定とパラメータチェックのアルゴリズムの強化
  §    クォータ管理とファイルブラウザ
  §    新しいヘルスチェック
  §    ホスト監視の強化
  §    サポートとの統合を強化
  §    ユーザインタフェースの国際化(日本語対応!)
Cloudera Manager Free Edition   Cloudera Manager Ent. Edition

自動構築                                                                       Yes                             Yes

API                                                                        Yes                             Yes

サービス及び設定管理

  HDFS, MapReduce, MR2, HBase, Hue, Oozie, Zookeeper の管理                   Yes                             Yes

  高可用性と名前空間管理のサポート                                                         Yes                             Yes

  設定の自動化                                                                   Yes                             Yes

  クライアント設定管理                                                               Yes                             Yes

  監査と追跡                                                                    Yes                             Yes

  追加/再起動/デコミッションロールインスタンス                                                  Yes                             Yes

  設定のバージョン管理                                                                                               Yes

サービス監視

  プロアクティブ・ヘルスチェック                                                                                          Yes

  ステータスサマリー                                                                                                Yes

  ヒートマップと性能監視                                                                                              Yes

  ホスト監視                                                                                                    Yes

セキュリティ

  LDAP 認証                                                                                                  Yes

  Kerberos 設定                                                                                              Yes

マルチクラスタ管理                                                                                                  Yes

インテリジェント・ログ管理                                                                                              Yes

イベントマネジメントとアラート                                                                                            Yes

アクティビティ監視                                                                                                  Yes

運用レポート                                                                                                     Yes

ファイルブラウザとクォータ管理                                                                                            Yes

グローバルタイムコントロール                                                                                             Yes

サポート統合                                                                                                     Yes
なぜ Cloudera か?

         ビッグデータ管理のための統合された、ボタン一つで起動
         できるぐらい簡単なシステム


         全くの新機能を継続的に市場に提供しています

         数年間にわたるスケジュール済みのリリースの元に第4世代の
         製品を輩出しました。アップグレードのリスクを低く抑え、強い互
         換性保証をしています

         CDH は 100% Apache ライセンスで、フォークもしていない
         しプロプライエタリパッチも一切含んでいません
         あらゆるソリューションのうち最も多くのエンタープライズ環
         境で Cloudera が稼働し、最も多くのベンダーが Cloudera
         の認証を取得しています
Cloudera University:
              トレーニングと認定資格
トレーニング	

        	
  ビジネスを成功に導くためのパブリックおよびプライベートトレーニング

                                                 http://www.jp.cloudera.com/university
コース                                説明
Cloudera Apache Hadoop 開発者向け       データを分析したいと考えているが、Apache Hadoopを新し
トレーニング(4日間)                        く使い始めようとしている開発者向けの、ハンズオン形式のト
                                   レーニングと認定試験
Cloudera Apache Hadoop 管理者向け       Apache Hadoop クラスタのセットアップ、設定、監視を行う
トレーニング (3日間)                       管理者向けの、ハンズオン形式のトレーニングと認定試験


Cloudera Apache HBase トレーニング       HBaseのアーキテクチャ、データモデル、Java API、および
(2日間)                              追加のトピックとベストプラクティスを網羅

Cloudera Apache Hive & Pig トレーニン   Hive & Pig トレーニングはApache Hadoopがどのように動
グ(2日間) − 開催予定                      作しているかの基本的な知識があり、これらの言語を使って
                                   データを分析したい方向けに用意されたトレーニング

Cloudera Apache Hadoop エッセンシャル     Apache Hadoopについての知識を得たい方向けに、座学形
(1日)                               式でのトレーニング
認定資格	

•  スキルを客観的に証明する認定資格
•  トレーニングと独立した認定試験
 –  PearsonVUEで日時、会場を予約
 –  トレーニングを受講しなくても受験できる
  •  合計スコアおよびセクション毎のスコアが表示される
 –  トレーニングコースには試験のバウチャーが1回
    分含まれる
 –  近日模擬テストを公開予定
トレーニング、認定資格最新情報	

•  HBaseトレーニング(日本語)を開始
 –  7月30日〜
•  HBase認定資格開始(英語)
 –  日本語版は7月30日から開始予定
•  CDH4対応
 –  9月の実施コースから順次対応予定
メーリングリスト	

•  メーリングリスト(日本語)
 cdh-user-jp@cloudera.org
   •  CDH/Cloudera Managerに関するオープンなメーリン
      グリスト
   •  誰でも質問、回答、閲覧できます。

                                                                              積極的にご参加
                                                                               下さい!!	




                 **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012**
           Public use or redistribution prior to the embargo date is strictly prohibited.
Thank   ご質問はこちらまで:

 You!   info-jp@cloudera.com




        03(6228)7930   cloudera.co.jp    twitter.com/
                                        ClouderaJP

                                        facebook.com/
                                          cloudera

Más contenido relacionado

La actualidad más candente

Hadoopビッグデータ基盤の歴史を振り返る #cwt2015
Hadoopビッグデータ基盤の歴史を振り返る #cwt2015Hadoopビッグデータ基盤の歴史を振り返る #cwt2015
Hadoopビッグデータ基盤の歴史を振り返る #cwt2015Cloudera Japan
 
Hadoop Trends & Hadoop on EC2
Hadoop Trends & Hadoop on EC2Hadoop Trends & Hadoop on EC2
Hadoop Trends & Hadoop on EC2Yifeng Jiang
 
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」オラクルエンジニア通信
 
#cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング
#cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング #cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング
#cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング Cloudera Japan
 
SDN Conference 2014 Tokyo / Osaka , HP presentation
SDN Conference 2014 Tokyo / Osaka , HP presentationSDN Conference 2014 Tokyo / Osaka , HP presentation
SDN Conference 2014 Tokyo / Osaka , HP presentationToru Ozaki
 
Strata + Hadoop World 2014 レポート #cwt2014
Strata + Hadoop World 2014 レポート #cwt2014Strata + Hadoop World 2014 レポート #cwt2014
Strata + Hadoop World 2014 レポート #cwt2014Cloudera Japan
 
CDHの歴史とCDH5新機能概要 #at_tokuben
CDHの歴史とCDH5新機能概要 #at_tokubenCDHの歴史とCDH5新機能概要 #at_tokuben
CDHの歴史とCDH5新機能概要 #at_tokubenCloudera Japan
 
機械学習の定番プラットフォームSparkの紹介
機械学習の定番プラットフォームSparkの紹介機械学習の定番プラットフォームSparkの紹介
機械学習の定番プラットフォームSparkの紹介Cloudera Japan
 
Troubleshooting Using Cloudera Manager #cwt2015
Troubleshooting Using Cloudera Manager #cwt2015Troubleshooting Using Cloudera Manager #cwt2015
Troubleshooting Using Cloudera Manager #cwt2015Cloudera Japan
 
簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015
簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015
簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015Naomi Yamasaki
 
Apache Ambari Overview -- Hadoop for Everyone
Apache Ambari Overview -- Hadoop for EveryoneApache Ambari Overview -- Hadoop for Everyone
Apache Ambari Overview -- Hadoop for EveryoneYifeng Jiang
 
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...Insight Technology, Inc.
 
HBase Meetup Tokyo Summer 2015 #hbasejp
HBase Meetup Tokyo Summer 2015 #hbasejpHBase Meetup Tokyo Summer 2015 #hbasejp
HBase Meetup Tokyo Summer 2015 #hbasejpCloudera Japan
 
基礎から学ぶ超並列SQLエンジンImpala #cwt2015
基礎から学ぶ超並列SQLエンジンImpala #cwt2015基礎から学ぶ超並列SQLエンジンImpala #cwt2015
基礎から学ぶ超並列SQLエンジンImpala #cwt2015Cloudera Japan
 
最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)
最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)
最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)オラクルエンジニア通信
 
Apache Hadoop YARNとマルチテナントにおけるリソース管理
Apache Hadoop YARNとマルチテナントにおけるリソース管理Apache Hadoop YARNとマルチテナントにおけるリソース管理
Apache Hadoop YARNとマルチテナントにおけるリソース管理Cloudera Japan
 
#cwt2016 Apache Kudu 構成とテーブル設計
#cwt2016 Apache Kudu 構成とテーブル設計#cwt2016 Apache Kudu 構成とテーブル設計
#cwt2016 Apache Kudu 構成とテーブル設計Cloudera Japan
 
プロダクトアップデートセミナー資料(2020年10月29日開催)
プロダクトアップデートセミナー資料(2020年10月29日開催)プロダクトアップデートセミナー資料(2020年10月29日開催)
プロダクトアップデートセミナー資料(2020年10月29日開催)Rescale Japan株式会社
 
SAP HANA SP10最新情報詳細版
SAP HANA SP10最新情報詳細版SAP HANA SP10最新情報詳細版
SAP HANA SP10最新情報詳細版Mana Matsudate
 
マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014
マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014
マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014Cloudera Japan
 

La actualidad más candente (20)

Hadoopビッグデータ基盤の歴史を振り返る #cwt2015
Hadoopビッグデータ基盤の歴史を振り返る #cwt2015Hadoopビッグデータ基盤の歴史を振り返る #cwt2015
Hadoopビッグデータ基盤の歴史を振り返る #cwt2015
 
Hadoop Trends & Hadoop on EC2
Hadoop Trends & Hadoop on EC2Hadoop Trends & Hadoop on EC2
Hadoop Trends & Hadoop on EC2
 
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」
 
#cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング
#cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング #cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング
#cwt2016 Cloudera Managerを用いた Hadoop のトラブルシューティング
 
SDN Conference 2014 Tokyo / Osaka , HP presentation
SDN Conference 2014 Tokyo / Osaka , HP presentationSDN Conference 2014 Tokyo / Osaka , HP presentation
SDN Conference 2014 Tokyo / Osaka , HP presentation
 
Strata + Hadoop World 2014 レポート #cwt2014
Strata + Hadoop World 2014 レポート #cwt2014Strata + Hadoop World 2014 レポート #cwt2014
Strata + Hadoop World 2014 レポート #cwt2014
 
CDHの歴史とCDH5新機能概要 #at_tokuben
CDHの歴史とCDH5新機能概要 #at_tokubenCDHの歴史とCDH5新機能概要 #at_tokuben
CDHの歴史とCDH5新機能概要 #at_tokuben
 
機械学習の定番プラットフォームSparkの紹介
機械学習の定番プラットフォームSparkの紹介機械学習の定番プラットフォームSparkの紹介
機械学習の定番プラットフォームSparkの紹介
 
Troubleshooting Using Cloudera Manager #cwt2015
Troubleshooting Using Cloudera Manager #cwt2015Troubleshooting Using Cloudera Manager #cwt2015
Troubleshooting Using Cloudera Manager #cwt2015
 
簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015
簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015
簡単!お手軽!!RDSでDR環境構築 - JAWS DAYS 2015
 
Apache Ambari Overview -- Hadoop for Everyone
Apache Ambari Overview -- Hadoop for EveryoneApache Ambari Overview -- Hadoop for Everyone
Apache Ambari Overview -- Hadoop for Everyone
 
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
[db tech showcase Tokyo 2015] B27:インメモリーDBとスケールアップマシンによりBig Dataの課題を解決する by S...
 
HBase Meetup Tokyo Summer 2015 #hbasejp
HBase Meetup Tokyo Summer 2015 #hbasejpHBase Meetup Tokyo Summer 2015 #hbasejp
HBase Meetup Tokyo Summer 2015 #hbasejp
 
基礎から学ぶ超並列SQLエンジンImpala #cwt2015
基礎から学ぶ超並列SQLエンジンImpala #cwt2015基礎から学ぶ超並列SQLエンジンImpala #cwt2015
基礎から学ぶ超並列SQLエンジンImpala #cwt2015
 
最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)
最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)
最強のデータベース基盤“Exadata”をパブリック・クラウドで活用!(Oracle Cloud Days Tokyo 2015)
 
Apache Hadoop YARNとマルチテナントにおけるリソース管理
Apache Hadoop YARNとマルチテナントにおけるリソース管理Apache Hadoop YARNとマルチテナントにおけるリソース管理
Apache Hadoop YARNとマルチテナントにおけるリソース管理
 
#cwt2016 Apache Kudu 構成とテーブル設計
#cwt2016 Apache Kudu 構成とテーブル設計#cwt2016 Apache Kudu 構成とテーブル設計
#cwt2016 Apache Kudu 構成とテーブル設計
 
プロダクトアップデートセミナー資料(2020年10月29日開催)
プロダクトアップデートセミナー資料(2020年10月29日開催)プロダクトアップデートセミナー資料(2020年10月29日開催)
プロダクトアップデートセミナー資料(2020年10月29日開催)
 
SAP HANA SP10最新情報詳細版
SAP HANA SP10最新情報詳細版SAP HANA SP10最新情報詳細版
SAP HANA SP10最新情報詳細版
 
マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014
マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014
マルチテナント化に向けたHadoopの最新セキュリティ事情 #hcj2014
 

Similar a CDH4セミナー資料

CDH4.1オーバービュー
CDH4.1オーバービューCDH4.1オーバービュー
CDH4.1オーバービューCloudera Japan
 
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)NTT DATA OSS Professional Services
 
PaaS勉強会#25 Helion Development Platform Tech Overview
PaaS勉強会#25 Helion Development Platform Tech OverviewPaaS勉強会#25 Helion Development Platform Tech Overview
PaaS勉強会#25 Helion Development Platform Tech OverviewToru Makabe
 
2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記
2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記
2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記Yoshiyuki Nakamura
 
CDH5最新情報 #cwt2013
CDH5最新情報 #cwt2013CDH5最新情報 #cwt2013
CDH5最新情報 #cwt2013Cloudera Japan
 
【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情
【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情
【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情Hideo Takagi
 
Yifeng hadoop-present-public
Yifeng hadoop-present-publicYifeng hadoop-present-public
Yifeng hadoop-present-publicYifeng Jiang
 
Hadoopの標準GUI Hueの最新情報2
Hadoopの標準GUI Hueの最新情報2Hadoopの標準GUI Hueの最新情報2
Hadoopの標準GUI Hueの最新情報2Cloudera Japan
 
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たちATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たちAdvancedTechNight
 
Cloud Native Hadoop #cwt2016
Cloud Native Hadoop #cwt2016Cloud Native Hadoop #cwt2016
Cloud Native Hadoop #cwt2016Cloudera Japan
 
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組みNTT DATA OSS Professional Services
 
9/26 CUPA Cafe ~押し寄せる海外クラウド~
9/26 CUPA Cafe ~押し寄せる海外クラウド~9/26 CUPA Cafe ~押し寄せる海外クラウド~
9/26 CUPA Cafe ~押し寄せる海外クラウド~Toru Makabe
 
Hadoopの標準GUI HUEの最新情報
Hadoopの標準GUI HUEの最新情報Hadoopの標準GUI HUEの最新情報
Hadoopの標準GUI HUEの最新情報Cloudera Japan
 
Impala概要 道玄坂LT祭り 20150312 #dogenzakalt
Impala概要 道玄坂LT祭り 20150312 #dogenzakaltImpala概要 道玄坂LT祭り 20150312 #dogenzakalt
Impala概要 道玄坂LT祭り 20150312 #dogenzakaltCloudera Japan
 
TokyoWebminig カジュアルなHadoop
TokyoWebminig カジュアルなHadoopTokyoWebminig カジュアルなHadoop
TokyoWebminig カジュアルなHadoopTeruo Kawasaki
 
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~NTT DATA OSS Professional Services
 
レッドハット様講演 OpenStack最新情報セミナー 2014年8月
レッドハット様講演 OpenStack最新情報セミナー 2014年8月レッドハット様講演 OpenStack最新情報セミナー 2014年8月
レッドハット様講演 OpenStack最新情報セミナー 2014年8月VirtualTech Japan Inc.
 
楽天がCloud foundryを選んだ理由
楽天がCloud foundryを選んだ理由楽天がCloud foundryを選んだ理由
楽天がCloud foundryを選んだ理由Rakuten Group, Inc.
 

Similar a CDH4セミナー資料 (20)

CDH4.1オーバービュー
CDH4.1オーバービューCDH4.1オーバービュー
CDH4.1オーバービュー
 
Osdt s3
Osdt s3Osdt s3
Osdt s3
 
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
 
PaaS勉強会#25 Helion Development Platform Tech Overview
PaaS勉強会#25 Helion Development Platform Tech OverviewPaaS勉強会#25 Helion Development Platform Tech Overview
PaaS勉強会#25 Helion Development Platform Tech Overview
 
2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記
2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記
2014-07-26 Exploration into HDInsight Tuning Maniax 2014 Hadoopコース参戦記
 
CDH5最新情報 #cwt2013
CDH5最新情報 #cwt2013CDH5最新情報 #cwt2013
CDH5最新情報 #cwt2013
 
【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情
【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情
【ウェブセミナー】マネージドな 100% OSS アナリティクス プラットフォーム HDInsight の最新事情
 
Yifeng hadoop-present-public
Yifeng hadoop-present-publicYifeng hadoop-present-public
Yifeng hadoop-present-public
 
Hadoopの標準GUI Hueの最新情報2
Hadoopの標準GUI Hueの最新情報2Hadoopの標準GUI Hueの最新情報2
Hadoopの標準GUI Hueの最新情報2
 
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たちATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
ATN No.1 MapReduceだけでない!? Hadoopとその仲間たち
 
Cloud Native Hadoop #cwt2016
Cloud Native Hadoop #cwt2016Cloud Native Hadoop #cwt2016
Cloud Native Hadoop #cwt2016
 
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
分散処理基盤Apache Hadoopの現状と、NTTデータのHadoopに対する取り組み
 
9/26 CUPA Cafe ~押し寄せる海外クラウド~
9/26 CUPA Cafe ~押し寄せる海外クラウド~9/26 CUPA Cafe ~押し寄せる海外クラウド~
9/26 CUPA Cafe ~押し寄せる海外クラウド~
 
Hadoopの標準GUI HUEの最新情報
Hadoopの標準GUI HUEの最新情報Hadoopの標準GUI HUEの最新情報
Hadoopの標準GUI HUEの最新情報
 
Impala概要 道玄坂LT祭り 20150312 #dogenzakalt
Impala概要 道玄坂LT祭り 20150312 #dogenzakaltImpala概要 道玄坂LT祭り 20150312 #dogenzakalt
Impala概要 道玄坂LT祭り 20150312 #dogenzakalt
 
Oracle Big Data SQL3.1のご紹介
Oracle Big Data SQL3.1のご紹介Oracle Big Data SQL3.1のご紹介
Oracle Big Data SQL3.1のご紹介
 
TokyoWebminig カジュアルなHadoop
TokyoWebminig カジュアルなHadoopTokyoWebminig カジュアルなHadoop
TokyoWebminig カジュアルなHadoop
 
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
NTTデータ流 Hadoop活用のすすめ ~インフラ構築・運用の勘所~
 
レッドハット様講演 OpenStack最新情報セミナー 2014年8月
レッドハット様講演 OpenStack最新情報セミナー 2014年8月レッドハット様講演 OpenStack最新情報セミナー 2014年8月
レッドハット様講演 OpenStack最新情報セミナー 2014年8月
 
楽天がCloud foundryを選んだ理由
楽天がCloud foundryを選んだ理由楽天がCloud foundryを選んだ理由
楽天がCloud foundryを選んだ理由
 

Más de Cloudera Japan

Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)Cloudera Japan
 
HDFS Supportaiblity Improvements
HDFS Supportaiblity ImprovementsHDFS Supportaiblity Improvements
HDFS Supportaiblity ImprovementsCloudera Japan
 
分散DB Apache Kuduのアーキテクチャ DBの性能と一貫性を両立させる仕組み 「HybridTime」とは
分散DB Apache KuduのアーキテクチャDBの性能と一貫性を両立させる仕組み「HybridTime」とは分散DB Apache KuduのアーキテクチャDBの性能と一貫性を両立させる仕組み「HybridTime」とは
分散DB Apache Kuduのアーキテクチャ DBの性能と一貫性を両立させる仕組み 「HybridTime」とはCloudera Japan
 
Apache Impalaパフォーマンスチューニング #dbts2018
Apache Impalaパフォーマンスチューニング #dbts2018Apache Impalaパフォーマンスチューニング #dbts2018
Apache Impalaパフォーマンスチューニング #dbts2018Cloudera Japan
 
HBase Across the World #LINE_DM
HBase Across the World #LINE_DMHBase Across the World #LINE_DM
HBase Across the World #LINE_DMCloudera Japan
 
Cloudera のサポートエンジニアリング #supennight
Cloudera のサポートエンジニアリング #supennightCloudera のサポートエンジニアリング #supennight
Cloudera のサポートエンジニアリング #supennightCloudera Japan
 
Train, predict, serve: How to go into production your machine learning model
Train, predict, serve: How to go into production your machine learning modelTrain, predict, serve: How to go into production your machine learning model
Train, predict, serve: How to go into production your machine learning modelCloudera Japan
 
Apache Kuduを使った分析システムの裏側
Apache Kuduを使った分析システムの裏側Apache Kuduを使った分析システムの裏側
Apache Kuduを使った分析システムの裏側Cloudera Japan
 
Cloudera in the Cloud #CWT2017
Cloudera in the Cloud #CWT2017Cloudera in the Cloud #CWT2017
Cloudera in the Cloud #CWT2017Cloudera Japan
 
先行事例から学ぶ IoT / ビッグデータの始め方
先行事例から学ぶ IoT / ビッグデータの始め方先行事例から学ぶ IoT / ビッグデータの始め方
先行事例から学ぶ IoT / ビッグデータの始め方Cloudera Japan
 
Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017
Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017
Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017Cloudera Japan
 
How to go into production your machine learning models? #CWT2017
How to go into production your machine learning models? #CWT2017How to go into production your machine learning models? #CWT2017
How to go into production your machine learning models? #CWT2017Cloudera Japan
 
Apache Kudu - Updatable Analytical Storage #rakutentech
Apache Kudu - Updatable Analytical Storage #rakutentechApache Kudu - Updatable Analytical Storage #rakutentech
Apache Kudu - Updatable Analytical Storage #rakutentechCloudera Japan
 
Hue 4.0 / Hue Meetup Tokyo #huejp
Hue 4.0 / Hue Meetup Tokyo #huejpHue 4.0 / Hue Meetup Tokyo #huejp
Hue 4.0 / Hue Meetup Tokyo #huejpCloudera Japan
 
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017Cloudera Japan
 
Cloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadeda
Cloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadedaCloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadeda
Cloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadedaCloudera Japan
 
Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016
Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016
Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016Cloudera Japan
 
大規模データに対するデータサイエンスの進め方 #CWT2016
大規模データに対するデータサイエンスの進め方 #CWT2016大規模データに対するデータサイエンスの進め方 #CWT2016
大規模データに対するデータサイエンスの進め方 #CWT2016Cloudera Japan
 
Ibis: すごい pandas ⼤規模データ分析もらっくらく #summerDS
Ibis: すごい pandas ⼤規模データ分析もらっくらく #summerDSIbis: すごい pandas ⼤規模データ分析もらっくらく #summerDS
Ibis: すごい pandas ⼤規模データ分析もらっくらく #summerDSCloudera Japan
 
クラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakalt
クラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakaltクラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakalt
クラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakaltCloudera Japan
 

Más de Cloudera Japan (20)

Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
Impala + Kudu を用いたデータウェアハウス構築の勘所 (仮)
 
HDFS Supportaiblity Improvements
HDFS Supportaiblity ImprovementsHDFS Supportaiblity Improvements
HDFS Supportaiblity Improvements
 
分散DB Apache Kuduのアーキテクチャ DBの性能と一貫性を両立させる仕組み 「HybridTime」とは
分散DB Apache KuduのアーキテクチャDBの性能と一貫性を両立させる仕組み「HybridTime」とは分散DB Apache KuduのアーキテクチャDBの性能と一貫性を両立させる仕組み「HybridTime」とは
分散DB Apache Kuduのアーキテクチャ DBの性能と一貫性を両立させる仕組み 「HybridTime」とは
 
Apache Impalaパフォーマンスチューニング #dbts2018
Apache Impalaパフォーマンスチューニング #dbts2018Apache Impalaパフォーマンスチューニング #dbts2018
Apache Impalaパフォーマンスチューニング #dbts2018
 
HBase Across the World #LINE_DM
HBase Across the World #LINE_DMHBase Across the World #LINE_DM
HBase Across the World #LINE_DM
 
Cloudera のサポートエンジニアリング #supennight
Cloudera のサポートエンジニアリング #supennightCloudera のサポートエンジニアリング #supennight
Cloudera のサポートエンジニアリング #supennight
 
Train, predict, serve: How to go into production your machine learning model
Train, predict, serve: How to go into production your machine learning modelTrain, predict, serve: How to go into production your machine learning model
Train, predict, serve: How to go into production your machine learning model
 
Apache Kuduを使った分析システムの裏側
Apache Kuduを使った分析システムの裏側Apache Kuduを使った分析システムの裏側
Apache Kuduを使った分析システムの裏側
 
Cloudera in the Cloud #CWT2017
Cloudera in the Cloud #CWT2017Cloudera in the Cloud #CWT2017
Cloudera in the Cloud #CWT2017
 
先行事例から学ぶ IoT / ビッグデータの始め方
先行事例から学ぶ IoT / ビッグデータの始め方先行事例から学ぶ IoT / ビッグデータの始め方
先行事例から学ぶ IoT / ビッグデータの始め方
 
Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017
Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017
Clouderaが提供するエンタープライズ向け運用、データ管理ツールの使い方 #CW2017
 
How to go into production your machine learning models? #CWT2017
How to go into production your machine learning models? #CWT2017How to go into production your machine learning models? #CWT2017
How to go into production your machine learning models? #CWT2017
 
Apache Kudu - Updatable Analytical Storage #rakutentech
Apache Kudu - Updatable Analytical Storage #rakutentechApache Kudu - Updatable Analytical Storage #rakutentech
Apache Kudu - Updatable Analytical Storage #rakutentech
 
Hue 4.0 / Hue Meetup Tokyo #huejp
Hue 4.0 / Hue Meetup Tokyo #huejpHue 4.0 / Hue Meetup Tokyo #huejp
Hue 4.0 / Hue Meetup Tokyo #huejp
 
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
Apache Kuduは何がそんなに「速い」DBなのか? #dbts2017
 
Cloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadeda
Cloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadedaCloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadeda
Cloudera Data Science WorkbenchとPySparkで 好きなPythonライブラリを 分散で使う #cadeda
 
Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016
Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016
Cloudera + MicrosoftでHadoopするのがイイらしい。 #CWT2016
 
大規模データに対するデータサイエンスの進め方 #CWT2016
大規模データに対するデータサイエンスの進め方 #CWT2016大規模データに対するデータサイエンスの進め方 #CWT2016
大規模データに対するデータサイエンスの進め方 #CWT2016
 
Ibis: すごい pandas ⼤規模データ分析もらっくらく #summerDS
Ibis: すごい pandas ⼤規模データ分析もらっくらく #summerDSIbis: すごい pandas ⼤規模データ分析もらっくらく #summerDS
Ibis: すごい pandas ⼤規模データ分析もらっくらく #summerDS
 
クラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakalt
クラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakaltクラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakalt
クラウド上でHadoopを構築できる Cloudera Director 2.0 の紹介 #dogenzakalt
 

Último

2024 01 Virtual_Counselor
2024 01 Virtual_Counselor 2024 01 Virtual_Counselor
2024 01 Virtual_Counselor arts yokohama
 
2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~
2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~
2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~arts yokohama
 
情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法
情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法
情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法ssuser370dd7
 
「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-Loopへ
「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-Loopへ「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-Loopへ
「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-LoopへTetsuya Nihonmatsu
 
IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)
IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)
IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)ssuser539845
 
ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦
ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦
ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦Sadao Tokuyama
 
TaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdf
TaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdfTaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdf
TaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdfMatsushita Laboratory
 
持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見
持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見
持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見Shumpei Kishi
 
Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...
Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...
Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...yoshidakids7
 
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也harmonylab
 

Último (13)

2024 01 Virtual_Counselor
2024 01 Virtual_Counselor 2024 01 Virtual_Counselor
2024 01 Virtual_Counselor
 
2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~
2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~
2024 02 Nihon-Tanken ~Towards a More Inclusive Japan~
 
情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法
情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法
情報処理学会86回全国大会_Generic OAMをDeep Learning技術によって実現するための課題と解決方法
 
「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-Loopへ
「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-Loopへ「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-Loopへ
「今からでも間に合う」GPTsによる 活用LT会 - 人とAIが協調するHumani-in-the-Loopへ
 
IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)
IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)
IFIP IP3での資格制度を対象とする国際認定(IPSJ86全国大会シンポジウム)
 
ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦
ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦
ARスタートアップOnePlanetの Apple Vision Proへの情熱と挑戦
 
TaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdf
TaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdfTaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdf
TaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdf
 
持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見
持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見
持続可能なDrupal Meetupのコツ - Drupal Meetup Tokyoの知見
 
Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...
Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...
Summary of "ChatDoctor: A Medical Chat Model Fine-Tuned on a Large Language M...
 
2024 04 minnanoito
2024 04 minnanoito2024 04 minnanoito
2024 04 minnanoito
 
What is the world where you can make your own semiconductors?
What is the world where you can make your own semiconductors?What is the world where you can make your own semiconductors?
What is the world where you can make your own semiconductors?
 
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也
 
2024 03 CTEA
2024 03 CTEA2024 03 CTEA
2024 03 CTEA
 

CDH4セミナー資料

  • 2. 本日のアジェンダ •  エンタープライズにおける –  ポジション とは –  イノベーション •  Cloudera University –  最新のトレーニングと認定資格 **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** Public use or redistribution prior to the embargo date is strictly prohibited.
  • 3. 製品テーマ 2010 Cloudera は 2012 2011 エンタープライズに Cloudera は Cloudera は エンタープライズにおける Hadoop の Hadoop を リーダーです 提供します Hadoop の標準です
  • 4. なぜ Cloudera がエンタープライズにおける なのか? ポジション イノベーション 我々の完全なソリューションは全ての CDH4 + Cloudera Enterprise 4 は最 領域においてリードしています 先端の Hadoop プラットフォームです
  • 5. 完全なソリューションを持つ唯一のベンダー CDH4 Cloudera’s Distribution Including Apache Hadoop (CDH) ストレージ 計算処理 アクセス 統合 Apache Hadoop ベースのビッグデータ蓄積・処理・解析プラットフォーム – 100% オープンソース Cloudera Enterprise 4.0 Cloudera Manager CDHの構築と運用のための完全な管理アプリ 構築 設定 監視 検査とレポート ケーション 製品サポート お客様のサービスレベル(SLA)維持を弊社エキス 問題解決 エスカレーション 最適化 ナレッジベース パートチームが強力に支援します Cloudera University パートナーエコシステム ビッグデータ要員への技術付与 - 12,000人以上をトレーニング ハード、ソフト、プラットフォーム、サービスでの250社以上のパートナー プロフェッショナルサービス ユースケース分析、パイロット、プロセスとチーム立ち上げ
  • 6. CDH: 最高のプラットフォーム – 100% オープンソース CDH4 CDH ストレージ 計算処理 アクセス インテグレーション 最も普及している Apache Hadoop ディストリビュー ション エンタープライズの本番環境での実績でスケーラビ リティは証明済み 100% オープンソースで、エンタープライズ向けに開 発されている 安心してHadoopをご使用いただけます
  • 7. Cloudera Manager 4: 比類なく強力 CDH4 CDH ストレージ 計算処理 アクセス インテグレーション Cloudera Enterprise 4.0 Cloudera Manager 構築 設定 監視 検査とレポート エンタープライズで利用可能な唯一の Hadoop 管 理アプリケーション 組み込まれているベストプラクティスとノウハウ Cloudera サポートと密に連携している Hadoop を簡単かつ効率よく管理できます
  • 8. 製品サポート: 専門性で比肩するものなし CDH4 CDH ストレージ 計算処理 アクセス インテグレーション Cloudera Enterprise 4.0 Cloudera Manager 構築 設定 監視 検査とレポート 製品サポート 問題解決 エスカレーション 最適化 ナレッジベース 様々な産業分野における、1万ノード以上のクラスタ を管理してきた経験 CDHの全てのコンポーネントにおける専任エキス パート 全てのプロジェクトにコントリビュータとコミッタが存 在 性能の最適化と稼働時間の最大化を確実なものにします
  • 9. パートナーエコシステム: 幅広い領域での統合 CDH4 CDH ストレージ 計算処理 アクセス インテグレーション Cloudera Enterprise 4.0 Cloudera Manager 構築 設定 監視 検査とレポート 製品サポート 問題解決 エスカレーション 最適化 ナレッジベース パートナーエコシステム あらゆる最先端のハードウェア、プラットフォーム、 ハード、ソフト、プラットフォーム、サービスでの250社以上のパートナー データベース、データ統合基盤、BIソリューションと の連携を証明済み 業界唯一のHadoop技術認定プログラム あらゆる業界のトップ企業がCDH上で開発しています
  • 10. なぜ Cloudera がエンタープライズにおける なのか? ポジション イノベーション 我々の完全なソリューションは全ての CDH4 + Cloudera Enterprise 4 は最 領域においてリードしています 先端の Hadoop プラットフォームです CDH Cloudera’s distribution including Apache Hadoop
  • 11. CDHとは何か? Cloudera’s Distribution Including Apache Hadoop (CDH) はエンタープライズ対応の Hadoopディストリビューションです   ü  100%  ピュア Apache  Hadoop   ü  導入に必要な全てのコンポーネントを含んでいます ü  お客様の既存のインフラへの統合は簡単です ü  全てドキュメント化されていてサポートがあります 成功への最短距離 安定性と信頼性 完全なオープンソース         §  全てのコンポーネントバージョンと依存関 §  ClouderaのQAチームによって完璧にテ §  オープンソースコミュニティのメインライ 係が管理された完全なHadoopスタックを ストされています ンコンポーネントだけを含みます。 提供します §  多数のエンタープライズ環境でスケール フォークもなくプロプライエタリ基盤もあ りません §  様々なOS、ハードウェア、データベース、 することが証明されています データウェアハウス、BIツールと連携でき §  自由にダウンロードできます ます **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** Public use or redistribution prior to the embargo date is strictly prohibited.
  • 12. CDH: Cloudera’s Distribution Including Apache Hadoop File System Mount UI Framework/SDK Data Mining Build/Test: APACHE BIGTOP FUSE-DFS HUE APACHE MAHOUT Workflow Scheduling Metadata APACHE OOZIE APACHE OOZIE APACHE HIVE Languages / Compilers APACHE PIG, APACHE HIVE Fast Read/Write Data Integration Access APACHE FLUME, APACHE SQOOP APACHE HBASE APACHE WHIRR Coordination APACHE ZOOKEEPER **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** Public use or redistribution prior to the embargo date is strictly prohibited.
  • 13. MapReduceとHDFS Trunk development (source of new features) 0.23 0.23.1 2.0 0.20.1 0.20.2 0.21 0.22 “0.20.append” 0.20.203 0.20.205 “0.20.security” 0.20.204 1.0 CDH development CDH1 CDH2 U1 U2 U3 CDH3 U1 U2 U3 CDH4 2009 2010 2011 2012 **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** Public use or redistribution prior to the embargo date is strictly prohibited.
  • 14. なぜCDHなのか? ⻑⾧長所 ユーザのどういう部分に関係するか パッケージ化済み 他のどの形態のHadoopよりもはるかに簡単にインストールすることが できます。 パッチ適⽤用済み Apacheブランチをただダウンロードするよりも安定かつセキュアにし てくれます。 実績の証明済み 数千もの組織が既にCDHを使っているため、利利⽤用リスクが低くなって います。 ⾼高機能 CDHはより多くのユースケースをカバーし、ユーザはコアのHadoopだ けを使っていたときよりも⽣生産性を向上できます。 統合済み 全体を把握するための時間を節約し、バージョン間あるいはパッチ間 依存に基づく障害のリスクを減らします。 標準と認められている 既に多額の投資をしているRDBMS,  ETL,  そしてBIなどとCDHは最も うまく連携できます。 サポートあり CDHは商業組織が⽀支援しているディストリビューションです。 100%Apacheライセンス この技術への投資は保障されています。 **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** Public use or redistribution prior to the embargo date is strictly prohibited.
  • 15. なぜ Cloudera がエンタープライズにおける なのか? ポジション イノベーション 我々の完全なソリューションは全ての CDH4 + Cloudera Enterprise 4 は最 領域においてリードしています 先端の Hadoop プラットフォームです
  • 16. CDH4 + Cloudera Enterprise 4.0:" エンタープライズの要件とは… 1 4 他のITとの統合 高可用性 2 セキュリティ 5 設定と構築の単純化 3 6 スケーラビリティと拡張性 グローバルサポートとサービス
  • 17. CDH4 + Cloudera Enterprise 4.0:" もっとハードルを上げてみる… CDH4 §  高可用性 Cloudera’s Distribution Including Apache Hadoop (CDH) Apache Hadoop ベースのビッグデータ蓄積・処理・解析プラットフォーム §  セキュリティ – 100% オープンソース §  拡張性 Cloudera Enterprise 4.0 Cloudera Manager 4 §  簡単 CDHの構築と運用のための完全な管理アプリケーション §  強力 §  統合 製品サポート お客様のサービスレベル(SLA)維持を弊社 エキスパートチームが強力に支援します
  • 18. CDH4: 高可用性 ミッションクリティカル領域における使いやすさを向上さ せる 高可用性ネームノード ヘテロジニアスクラスタ 機能: セカンダリネームノードをホットスタンバイとし、 機能: ユーザは異なるバージョンのHadoopノードを混 フェイルオーバさせることができる 在させることができる 利点: HDFSにおける唯一の単一障害点をなくすことが 利点: クラスタのノードを一つ一つ更新していくことでダ できる ウンタイムを削減できる
  • 19. CDH4: セキュリティ CDHにより機密性の高いデータを保存し、マルチテナント 実現のためのきめ細かいアクセスコントロールを提供する HBase のテーブル及びカラム FairスケジューラのACL のパーミッション 機能: グループが異なるFairスケジューラプールへジョ ブを送信したり制御したりできるようになる 機能: ユーザ/グループのHBaseテーブルとカラムへのア クセス制御 利点: マルチテナントクラスタを管理しやすくなる 利点: HBase に機密情報を保存できるようになる。マル チテナントを実現しやすくなる
  • 20. CDH4: 拡張性 CDHは他のデータ管理システムに比べて幅広い領域の問題を 解決することができるようになる HBase コプロセッサ オープンリソースマネジメント 機能: ユーザ独自のプログラムを使ってリアルタイムに (MapReduce2) データを処理できるようになる 機能: 単一のHadoopクラスタ上で複数のデータ処理フレー 利点: 開発者はHBase上でより高度なリアルタイムアプリ ムワークを実行できる ケーションを作成できるようになる 利点: 同一ストレージ及びクラスタリソース上で多くのアプリ ケーションを実行できるようになり、コストを削減できる
  • 21. CDH4: その他の機能 §  汎用圧縮コーデック(Snappy) §  汎用ファイルフォーマット(Avro) §  HDFS への REST over HTTP アクセス §  ネームノードフェデレーションによる無制限のファイル管理 §  Web 上から Pig、HBase、Flumeを操作するシェル §  スロットレスリソースマネージャ §  Hive での並列クエリのサポート §  ファイルシステム I/O 性能が 100% 向上 §  HBase のランダム読み込み速度が 100% 向上 §  Flume のデータ処理速度が 200% 向上 §  MapReduce のシャッフル速度が 30% 向上
  • 22.   A MRv1のアーキテクチャ client submits a job to the JobTracker –  JobTracker assigns a job ID –  Client calculates the input splits for the job –  JobTrackerとTaskTracker •  Client adds job code and configuration to HDFS Client TaskTracker JobTracker TaskTracker TaskTracker TaskTracker Copyright © 2010-2012 Cloudera. All rights reserved. Not to be reproduced without prior written consent. **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** 04 Public use or redistribution prior to the embargo date is strictly prohibited.
  • 23.   For each job, one slave node is Application Master –  MRv2のアーキテクチャ Manages application lifecycle –  Negotiates resource “containers” from Resource Manager –  Monitors tasks running on the other slave nodes •  Resource ManagerとNodeManager Node Manager Node Manager App Master - Job #2 Resource Manager Scheduler Application Manager App Master - Job #1 Node Manager Node Manager Copyright © 2010-2012 Cloudera. All rights reserved. Not to be reproduced without prior written consent. 0 **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** Public use or redistribution prior to the embargo date is strictly prohibited.
  • 24. Cloudera Manager 4: 簡単 Cloudera Enterprise は構築と管理の最も簡単な Hadoop ソリューションです 3ステップのHA設定 複数クラスタ管理 後方互換性 機能: ネームノードの高可用設定を3ス 機能: 単一の Cloudera Manager イン 機能: Cloudera Manager 4 は CDH3 テップで実行可能にする スタンスから複数のクラスタを管理 と CDH4 の両方をサポート 利点: 10数ステップにわたる手動設定 利点: 全ての CDH 環境の管理を集約 利点: 管理の柔軟性 を3ステップに削減
  • 25. Cloudera Manager 4: 強力 Cloudera Manager は巨大なクラスタを確実に管理するための 様々な可視化機能と柔軟な自動化機能を提供します ヒートマップ ネームノードフェデレーションの管理 機能: サーバステータスとメトリクスを可視化 機能: ネームノードフェデレーションの設定と管理 利点: 巨大なクラスタにおいて問題のあるノードを高速に 利点: CDH が数千ノード、数十億ファイルの規模に成長しても 特定 シンプルに管理できる
  • 26. Cloudera Manager 4: 統合 Cloudera Enterprise は既存のインフラとプロセスとのシーム レスに連携します Cloudera Manager LDAP 認証 様々な環境のサポート API 機能: 管理ユーザログインを Active 機能: Cloudera Manager は Debian/Ubuntu Directory で認証 のパッケージも提供する。Oracle や 機能: Cloudera Manager の全機能の PostgreSQL もバックエンドDBとしてサポート API を提供 する 利点: 管理者ユーザの認証情報管理を 利点: Cloudera Manager とユーザの 容易にする 利点: 構築における柔軟性の向上 システム上に既存のエンタープライズク ラスの管理・監視ツールとの連携を簡 単にする
  • 27. Cloudera Manager 4: その他の機能 §  プラットフォームを導入するのを簡単にする §  クライアント設定ファイルを生成する §  Hadoop システムとして問題ないか、パラメータチェックをする §  ローカルリポジトリからの CDH インストールのサポート §  複数のデータ処理フレームワークの管理と設定 §  HBase コプロセッサや HttpFS/Hoop など、CDH4 の新機能をサポート。 §  管理と監視の強化 §  自動設定とパラメータチェックのアルゴリズムの強化 §  クォータ管理とファイルブラウザ §  新しいヘルスチェック §  ホスト監視の強化 §  サポートとの統合を強化 §  ユーザインタフェースの国際化(日本語対応!)
  • 28. Cloudera Manager Free Edition Cloudera Manager Ent. Edition 自動構築 Yes Yes API Yes Yes サービス及び設定管理 HDFS, MapReduce, MR2, HBase, Hue, Oozie, Zookeeper の管理 Yes Yes 高可用性と名前空間管理のサポート Yes Yes 設定の自動化 Yes Yes クライアント設定管理 Yes Yes 監査と追跡 Yes Yes 追加/再起動/デコミッションロールインスタンス Yes Yes 設定のバージョン管理 Yes サービス監視 プロアクティブ・ヘルスチェック Yes ステータスサマリー Yes ヒートマップと性能監視 Yes ホスト監視 Yes セキュリティ LDAP 認証 Yes Kerberos 設定 Yes マルチクラスタ管理 Yes インテリジェント・ログ管理 Yes イベントマネジメントとアラート Yes アクティビティ監視 Yes 運用レポート Yes ファイルブラウザとクォータ管理 Yes グローバルタイムコントロール Yes サポート統合 Yes
  • 29. なぜ Cloudera か? ビッグデータ管理のための統合された、ボタン一つで起動 できるぐらい簡単なシステム 全くの新機能を継続的に市場に提供しています 数年間にわたるスケジュール済みのリリースの元に第4世代の 製品を輩出しました。アップグレードのリスクを低く抑え、強い互 換性保証をしています CDH は 100% Apache ライセンスで、フォークもしていない しプロプライエタリパッチも一切含んでいません あらゆるソリューションのうち最も多くのエンタープライズ環 境で Cloudera が稼働し、最も多くのベンダーが Cloudera の認証を取得しています
  • 30. Cloudera University:   トレーニングと認定資格
  • 31. トレーニング ビジネスを成功に導くためのパブリックおよびプライベートトレーニング http://www.jp.cloudera.com/university コース 説明 Cloudera Apache Hadoop 開発者向け データを分析したいと考えているが、Apache Hadoopを新し トレーニング(4日間) く使い始めようとしている開発者向けの、ハンズオン形式のト レーニングと認定試験 Cloudera Apache Hadoop 管理者向け Apache Hadoop クラスタのセットアップ、設定、監視を行う トレーニング (3日間) 管理者向けの、ハンズオン形式のトレーニングと認定試験 Cloudera Apache HBase トレーニング HBaseのアーキテクチャ、データモデル、Java API、および (2日間) 追加のトピックとベストプラクティスを網羅 Cloudera Apache Hive & Pig トレーニン Hive & Pig トレーニングはApache Hadoopがどのように動 グ(2日間) − 開催予定 作しているかの基本的な知識があり、これらの言語を使って データを分析したい方向けに用意されたトレーニング Cloudera Apache Hadoop エッセンシャル Apache Hadoopについての知識を得たい方向けに、座学形 (1日) 式でのトレーニング
  • 32. 認定資格 •  スキルを客観的に証明する認定資格 •  トレーニングと独立した認定試験 –  PearsonVUEで日時、会場を予約 –  トレーニングを受講しなくても受験できる •  合計スコアおよびセクション毎のスコアが表示される –  トレーニングコースには試験のバウチャーが1回 分含まれる –  近日模擬テストを公開予定
  • 33. トレーニング、認定資格最新情報 •  HBaseトレーニング(日本語)を開始 –  7月30日〜 •  HBase認定資格開始(英語) –  日本語版は7月30日から開始予定 •  CDH4対応 –  9月の実施コースから順次対応予定
  • 34. メーリングリスト •  メーリングリスト(日本語) cdh-user-jp@cloudera.org •  CDH/Cloudera Managerに関するオープンなメーリン グリスト •  誰でも質問、回答、閲覧できます。 積極的にご参加 下さい!! **THIS CONTENT IS UNDER EMBARGO UNTIL 6/5/2012** Public use or redistribution prior to the embargo date is strictly prohibited.
  • 35. Thank ご質問はこちらまで: You! info-jp@cloudera.com 03(6228)7930 cloudera.co.jp twitter.com/ ClouderaJP facebook.com/ cloudera