Enviar búsqueda
Cargar
スモールデータから始めるHadoop
•
Descargar como PPT, PDF
•
3 recomendaciones
•
509 vistas
J
jem_3
Seguir
nseg39回の
Leer menos
Leer más
Empresariales
Denunciar
Compartir
Denunciar
Compartir
1 de 18
Descargar ahora
Recomendados
Thunderbus はクラウドからオンプレミス側のデータを読み書きできるようにする、あたらしい「つなぐ」技術の製品です。 例えば、クラウド上のDataSpiderから、会社の社内LANの中にあるExcelファイルのデータを読み書きできるようになり、いわば「クラウド」と自分のPC上のExcelを「つなぐ」ことができる、クラウドの新しい活用方法を提案する製品です。 また、Thunderbusは複雑な設定も不要で、インターネットが使える環境なら特別な設定(VPNなどのネットワーク設定など)なしに利用できる点も特徴です。
2015年2月26日 dsthHUB 『オンプレミスとクラウドをシームレスに"つなぐ" 新製品「Thunderbus」の全貌』
2015年2月26日 dsthHUB 『オンプレミスとクラウドをシームレスに"つなぐ" 新製品「Thunderbus」の全貌』
dstn
2014年4月17日 dstnHub発表スライド「dataspiderインターナル:アーキテクチャ編」
2014年4月17日 dstnHub発表スライド「dataspiderインターナル:アーキテクチャ編」
dstn
2017年12月3日に永田町GRIDで開催された「IBM Cloud (Bluemix) 冬の大勉強会」で発表させていただいた資料です。 DALIという照明のオープンプロトコルを使えばNode-REDから照明が制御できます。IoT機器と組み合わせ照明を制御するとどんな付加価値を空間につけることができるのかを紹介いたします。
Bluemix(Node-RED)を使った空間の付加価値提案
Bluemix(Node-RED)を使った空間の付加価値提案
Takahiro Nakahata
■Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料) 2014/11/06 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 土橋 昌
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
NTT DATA OSS Professional Services
これからはじめるHadoop/Spark発表資料 http://hadoop.connpass.com/event/27345/
Hadoopことはじめ
Hadoopことはじめ
Katsunori Kanda
データ活用をもっともっと円滑に!~データ処理・分析基盤編を少しだけ~ 2016/7/26 Spark Summit2016報告会&データ分析勉強会
データ活用をもっともっと円滑に!~データ処理・分析基盤編を少しだけ~
データ活用をもっともっと円滑に!~データ処理・分析基盤編を少しだけ~
NTT DATA OSS Professional Services
https://softwaredesign.connpass.com/event/155331/
20200114 sd#9 kitazaki_t1
20200114 sd#9 kitazaki_t1
Ayachika Kitazaki
Jubatus Casual Talks #1, 2013/06/02
世界征服を目指す Jubatus だからこそ期待する 5 つのポイント
世界征服を目指す Jubatus だからこそ期待する 5 つのポイント
Toru Shimogaki
Recomendados
Thunderbus はクラウドからオンプレミス側のデータを読み書きできるようにする、あたらしい「つなぐ」技術の製品です。 例えば、クラウド上のDataSpiderから、会社の社内LANの中にあるExcelファイルのデータを読み書きできるようになり、いわば「クラウド」と自分のPC上のExcelを「つなぐ」ことができる、クラウドの新しい活用方法を提案する製品です。 また、Thunderbusは複雑な設定も不要で、インターネットが使える環境なら特別な設定(VPNなどのネットワーク設定など)なしに利用できる点も特徴です。
2015年2月26日 dsthHUB 『オンプレミスとクラウドをシームレスに"つなぐ" 新製品「Thunderbus」の全貌』
2015年2月26日 dsthHUB 『オンプレミスとクラウドをシームレスに"つなぐ" 新製品「Thunderbus」の全貌』
dstn
2014年4月17日 dstnHub発表スライド「dataspiderインターナル:アーキテクチャ編」
2014年4月17日 dstnHub発表スライド「dataspiderインターナル:アーキテクチャ編」
dstn
2017年12月3日に永田町GRIDで開催された「IBM Cloud (Bluemix) 冬の大勉強会」で発表させていただいた資料です。 DALIという照明のオープンプロトコルを使えばNode-REDから照明が制御できます。IoT機器と組み合わせ照明を制御するとどんな付加価値を空間につけることができるのかを紹介いたします。
Bluemix(Node-RED)を使った空間の付加価値提案
Bluemix(Node-RED)を使った空間の付加価値提案
Takahiro Nakahata
■Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料) 2014/11/06 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 土橋 昌
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
NTT DATA OSS Professional Services
これからはじめるHadoop/Spark発表資料 http://hadoop.connpass.com/event/27345/
Hadoopことはじめ
Hadoopことはじめ
Katsunori Kanda
データ活用をもっともっと円滑に!~データ処理・分析基盤編を少しだけ~ 2016/7/26 Spark Summit2016報告会&データ分析勉強会
データ活用をもっともっと円滑に!~データ処理・分析基盤編を少しだけ~
データ活用をもっともっと円滑に!~データ処理・分析基盤編を少しだけ~
NTT DATA OSS Professional Services
https://softwaredesign.connpass.com/event/155331/
20200114 sd#9 kitazaki_t1
20200114 sd#9 kitazaki_t1
Ayachika Kitazaki
Jubatus Casual Talks #1, 2013/06/02
世界征服を目指す Jubatus だからこそ期待する 5 つのポイント
世界征服を目指す Jubatus だからこそ期待する 5 つのポイント
Toru Shimogaki
Ansible Pracrice MeetupでのLT資料です。
AnsibleによるHWプロビジョニング -OneViewの連携-
AnsibleによるHWプロビジョニング -OneViewの連携-
Takahiro Kida
■Hadoop 2.6の最新機能 2014年11月6日 日本Hadoopユーザー会 ライトニングトーク(Cloudera World Tokyo 2014会場内) 講演資料 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 鯵坂 明 http://oss.nttdata.co.jp/hadoop/
Hadoop 2.6の最新機能(Cloudera World Tokyo 2014 LT講演資料)
Hadoop 2.6の最新機能(Cloudera World Tokyo 2014 LT講演資料)
NTT DATA OSS Professional Services
Hadoop User Conference 2014のHueのセッション資料です
Hadoopの標準GUI HUEの最新情報
Hadoopの標準GUI HUEの最新情報
Cloudera Japan
Spark Casual Talk #1の発表資料です。 spark summit 2015の
Spark Summit 2015 参加報告
Spark Summit 2015 参加報告
Katsunori Kanda
2016/12/6のJAZUGで登壇した内容です。
20181206 Jazug DataScience TeamBuilding and DevOps
20181206 Jazug DataScience TeamBuilding and DevOps
Yukako Shimizu
Node-REDについて
Node-REDについて
Atsushi Kojo
#pbtech 第1回ペパボテックカンファレンス http://pepabo.connpass.com/event/13208/
20150419_pbtech_openstack_nyah #pbtech
20150419_pbtech_openstack_nyah #pbtech
ume3_
エヌビディア合同会社 エンタープライズマーケティング 佐々木邦暢 (@_ksasaki)
NVIDIA ディープラーニング最新情報
NVIDIA ディープラーニング最新情報
Hirono Jumpei
Apache Hadoop ミートアップ Apache Hadoop 2.8.0 の新機能 (抜粋)
Apache Hadoop 2.8.0 の新機能 (抜粋)
Apache Hadoop 2.8.0 の新機能 (抜粋)
NTT DATA OSS Professional Services
Hadoopソースコードリーディング 第18回 (2014/12/18) 講演資料 『Hadoop2.6の最新機能+』 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 鯵坂 明 (Hadoopコミッタ)
Hadoop2.6の最新機能+
Hadoop2.6の最新機能+
NTT DATA OSS Professional Services
https://softwaredesign.connpass.com/event/160692/
20200228 sd#10 kitazaki_t1
20200228 sd#10 kitazaki_t1
Ayachika Kitazaki
データサイエンティスト協会 セミナー2016 第2回目 講演資料
データ分析に必要なスキルをつけるためのツール~Jupyter notebook、r連携、機械学習からsparkまで~
データ分析に必要なスキルをつけるためのツール~Jupyter notebook、r連携、機械学習からsparkまで~
The Japan DataScientist Society
JJUG ナイト・セミナー「機械学習・自然言語処理特集!」(2014/12/17) 講演資料 『Spark MLlibではじめるスケーラブルな機械学習』 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 猿田 浩輔
Spark MLlibではじめるスケーラブルな機械学習
Spark MLlibではじめるスケーラブルな機械学習
NTT DATA OSS Professional Services
Hadoop / Spark Conference 2016 LT資料 山田 雄(株式会社リクルートライフスタイル)
僕の考える最強のビックデータエンジニア
僕の考える最強のビックデータエンジニア
Yu Yamada
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~ 2017年7月28日に開催されたDevelopers Summit 2017 Summerでの講演資料です。
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~
NTT DATA OSS Professional Services
Spark Meetup Tokyo 2015 (2015/9/9) 講演資料 「Sparkコミュニティに飛び込もう!」 NTTデータ (NTT DATA) 基盤システム事業本部 OSSプロフェッショナルサービス 猿田 浩輔 (Apache Sparkコミッタ、主要開発者) http://oss.nttdata.co.jp/hadoop/
Sparkコミュニティに飛び込もう!(Spark Meetup Tokyo 2015 講演資料、NTTデータ 猿田 浩輔)
Sparkコミュニティに飛び込もう!(Spark Meetup Tokyo 2015 講演資料、NTTデータ 猿田 浩輔)
NTT DATA OSS Professional Services
Developers Summit 2015 Summer ランチセッション亀井様の資料です
【デブサミ夏AL】グリーのboxの使い方
【デブサミ夏AL】グリーのboxの使い方
Developers Summit
Hadoop ~Yahoo! JAPANの活用について~
Hadoop ~Yahoo! JAPANの活用について~
Yahoo!デベロッパーネットワーク
正式版は下記URLをご参照ください。 http://www.slideshare.net/hadoopxnttdata/pgbigm-39739507
pg_bigm(ピージー・バイグラム)を用いた全文検索のしくみ(後編)
pg_bigm(ピージー・バイグラム)を用いた全文検索のしくみ(後編)
Masahiko Sawada
Kondo-san
GDLC11 oracle-ai
GDLC11 oracle-ai
Hirokuni Uchida
■オープンソースカンファレンス 2015 Tokyo/Spring 講演資料(2015/02/28) 『分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向』 株式会社NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 吉田 耕陽
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
NTT DATA OSS Professional Services
■オープンソースカンファレンス 2015 Tokyo/Spring 講演資料(2015/02/28) 『分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向』 株式会社NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 吉田 耕陽
Hadoop ecosystem NTTDATA osc15tk
Hadoop ecosystem NTTDATA osc15tk
NTT DATA OSS Professional Services
Más contenido relacionado
La actualidad más candente
Ansible Pracrice MeetupでのLT資料です。
AnsibleによるHWプロビジョニング -OneViewの連携-
AnsibleによるHWプロビジョニング -OneViewの連携-
Takahiro Kida
■Hadoop 2.6の最新機能 2014年11月6日 日本Hadoopユーザー会 ライトニングトーク(Cloudera World Tokyo 2014会場内) 講演資料 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 鯵坂 明 http://oss.nttdata.co.jp/hadoop/
Hadoop 2.6の最新機能(Cloudera World Tokyo 2014 LT講演資料)
Hadoop 2.6の最新機能(Cloudera World Tokyo 2014 LT講演資料)
NTT DATA OSS Professional Services
Hadoop User Conference 2014のHueのセッション資料です
Hadoopの標準GUI HUEの最新情報
Hadoopの標準GUI HUEの最新情報
Cloudera Japan
Spark Casual Talk #1の発表資料です。 spark summit 2015の
Spark Summit 2015 参加報告
Spark Summit 2015 参加報告
Katsunori Kanda
2016/12/6のJAZUGで登壇した内容です。
20181206 Jazug DataScience TeamBuilding and DevOps
20181206 Jazug DataScience TeamBuilding and DevOps
Yukako Shimizu
Node-REDについて
Node-REDについて
Atsushi Kojo
#pbtech 第1回ペパボテックカンファレンス http://pepabo.connpass.com/event/13208/
20150419_pbtech_openstack_nyah #pbtech
20150419_pbtech_openstack_nyah #pbtech
ume3_
エヌビディア合同会社 エンタープライズマーケティング 佐々木邦暢 (@_ksasaki)
NVIDIA ディープラーニング最新情報
NVIDIA ディープラーニング最新情報
Hirono Jumpei
Apache Hadoop ミートアップ Apache Hadoop 2.8.0 の新機能 (抜粋)
Apache Hadoop 2.8.0 の新機能 (抜粋)
Apache Hadoop 2.8.0 の新機能 (抜粋)
NTT DATA OSS Professional Services
Hadoopソースコードリーディング 第18回 (2014/12/18) 講演資料 『Hadoop2.6の最新機能+』 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 鯵坂 明 (Hadoopコミッタ)
Hadoop2.6の最新機能+
Hadoop2.6の最新機能+
NTT DATA OSS Professional Services
https://softwaredesign.connpass.com/event/160692/
20200228 sd#10 kitazaki_t1
20200228 sd#10 kitazaki_t1
Ayachika Kitazaki
データサイエンティスト協会 セミナー2016 第2回目 講演資料
データ分析に必要なスキルをつけるためのツール~Jupyter notebook、r連携、機械学習からsparkまで~
データ分析に必要なスキルをつけるためのツール~Jupyter notebook、r連携、機械学習からsparkまで~
The Japan DataScientist Society
JJUG ナイト・セミナー「機械学習・自然言語処理特集!」(2014/12/17) 講演資料 『Spark MLlibではじめるスケーラブルな機械学習』 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 猿田 浩輔
Spark MLlibではじめるスケーラブルな機械学習
Spark MLlibではじめるスケーラブルな機械学習
NTT DATA OSS Professional Services
Hadoop / Spark Conference 2016 LT資料 山田 雄(株式会社リクルートライフスタイル)
僕の考える最強のビックデータエンジニア
僕の考える最強のビックデータエンジニア
Yu Yamada
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~ 2017年7月28日に開催されたDevelopers Summit 2017 Summerでの講演資料です。
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~
NTT DATA OSS Professional Services
Spark Meetup Tokyo 2015 (2015/9/9) 講演資料 「Sparkコミュニティに飛び込もう!」 NTTデータ (NTT DATA) 基盤システム事業本部 OSSプロフェッショナルサービス 猿田 浩輔 (Apache Sparkコミッタ、主要開発者) http://oss.nttdata.co.jp/hadoop/
Sparkコミュニティに飛び込もう!(Spark Meetup Tokyo 2015 講演資料、NTTデータ 猿田 浩輔)
Sparkコミュニティに飛び込もう!(Spark Meetup Tokyo 2015 講演資料、NTTデータ 猿田 浩輔)
NTT DATA OSS Professional Services
Developers Summit 2015 Summer ランチセッション亀井様の資料です
【デブサミ夏AL】グリーのboxの使い方
【デブサミ夏AL】グリーのboxの使い方
Developers Summit
Hadoop ~Yahoo! JAPANの活用について~
Hadoop ~Yahoo! JAPANの活用について~
Yahoo!デベロッパーネットワーク
正式版は下記URLをご参照ください。 http://www.slideshare.net/hadoopxnttdata/pgbigm-39739507
pg_bigm(ピージー・バイグラム)を用いた全文検索のしくみ(後編)
pg_bigm(ピージー・バイグラム)を用いた全文検索のしくみ(後編)
Masahiko Sawada
Kondo-san
GDLC11 oracle-ai
GDLC11 oracle-ai
Hirokuni Uchida
La actualidad más candente
(20)
AnsibleによるHWプロビジョニング -OneViewの連携-
AnsibleによるHWプロビジョニング -OneViewの連携-
Hadoop 2.6の最新機能(Cloudera World Tokyo 2014 LT講演資料)
Hadoop 2.6の最新機能(Cloudera World Tokyo 2014 LT講演資料)
Hadoopの標準GUI HUEの最新情報
Hadoopの標準GUI HUEの最新情報
Spark Summit 2015 参加報告
Spark Summit 2015 参加報告
20181206 Jazug DataScience TeamBuilding and DevOps
20181206 Jazug DataScience TeamBuilding and DevOps
Node-REDについて
Node-REDについて
20150419_pbtech_openstack_nyah #pbtech
20150419_pbtech_openstack_nyah #pbtech
NVIDIA ディープラーニング最新情報
NVIDIA ディープラーニング最新情報
Apache Hadoop 2.8.0 の新機能 (抜粋)
Apache Hadoop 2.8.0 の新機能 (抜粋)
Hadoop2.6の最新機能+
Hadoop2.6の最新機能+
20200228 sd#10 kitazaki_t1
20200228 sd#10 kitazaki_t1
データ分析に必要なスキルをつけるためのツール~Jupyter notebook、r連携、機械学習からsparkまで~
データ分析に必要なスキルをつけるためのツール~Jupyter notebook、r連携、機械学習からsparkまで~
Spark MLlibではじめるスケーラブルな機械学習
Spark MLlibではじめるスケーラブルな機械学習
僕の考える最強のビックデータエンジニア
僕の考える最強のビックデータエンジニア
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~
SIerとオープンソースの美味しい関係 ~コミュニティの力を活かして世界を目指そう~
Sparkコミュニティに飛び込もう!(Spark Meetup Tokyo 2015 講演資料、NTTデータ 猿田 浩輔)
Sparkコミュニティに飛び込もう!(Spark Meetup Tokyo 2015 講演資料、NTTデータ 猿田 浩輔)
【デブサミ夏AL】グリーのboxの使い方
【デブサミ夏AL】グリーのboxの使い方
Hadoop ~Yahoo! JAPANの活用について~
Hadoop ~Yahoo! JAPANの活用について~
pg_bigm(ピージー・バイグラム)を用いた全文検索のしくみ(後編)
pg_bigm(ピージー・バイグラム)を用いた全文検索のしくみ(後編)
GDLC11 oracle-ai
GDLC11 oracle-ai
Similar a スモールデータから始めるHadoop
■オープンソースカンファレンス 2015 Tokyo/Spring 講演資料(2015/02/28) 『分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向』 株式会社NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 吉田 耕陽
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
NTT DATA OSS Professional Services
■オープンソースカンファレンス 2015 Tokyo/Spring 講演資料(2015/02/28) 『分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向』 株式会社NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 吉田 耕陽
Hadoop ecosystem NTTDATA osc15tk
Hadoop ecosystem NTTDATA osc15tk
NTT DATA OSS Professional Services
日本マイクロソフト様主催のイベント「リアルタイムデータ分析の最新動向と取り組み方」にて登壇させていただきました。 https://www.microsoftevents.com/profile/3210203
現場の”今”を知る、これからのビッグデータ分析・活用のすすめ
現場の”今”を知る、これからのビッグデータ分析・活用のすすめ
yuji suzuki
はやわかりHadoop
はやわかりHadoop
Shinpei Ohtani
Impala Meetup 2014/10/31 @Tokyo 講演資料 【注意事項】 本資料で紹介している検証結果は2014年当時のものです。当該ソフトウェアは成長や改善が早く、現時点のバージョンでは大きく異なる機能や性能となっています。 SQL on Hadoopの最新情報に基づくサービスやシステムインテグレーションにご興味をお持ちの方は、NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス(電子メール: hadoop [AT] kits.nttdata.co.jp) にご相談ください。
SQL on Hadoop 比較検証 【2014月11日における検証レポート】
SQL on Hadoop 比較検証 【2014月11日における検証レポート】
NTT DATA OSS Professional Services
ビジネスの要求にアプリケーションは追随できていますか。「やりたいこと」のためにデータベースは動いていますか。データベースシステムは目的のための手段です。実は継続稼働に心血注いでいたりしませんか。今一度ビジネス目的のために進化可能なデータベースを考えてみませんか。そしてそのデータベースが真の自立型、自働型(誤字ではないんです) だったらもっとすごいって思いませんか。そう言い続けて4年(このイベント第一回からいい続けています)、是非このセッションで体感してください。
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
Insight Technology, Inc.
2015/08/08 OSC 2015 Kansai@Kyoto 発表資料 『分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向』 株式会社NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 鯵坂 明
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
NTT DATA OSS Professional Services
8月にPuppetの書籍「Puppet[設定&管理]活用ガイド」を出版しました。その中に、Cisco Nexusを制御するモジュールの解説をしている章があります。その内容と、やってみた感想を紹介します。 参考: http://gihyo.jp/book/2017/978-4-7741-9116-4
Puppet本にはcisco nexusを制御する章があるよ
Puppet本にはcisco nexusを制御する章があるよ
Hidetoshi Ochiai
[db tech showcase Tokyo 2016] B15: サイバーエージェント アドテクスタジオの次世代データ分析基盤紹介 by 株式会社サイ...
[db tech showcase Tokyo 2016] B15: サイバーエージェント アドテクスタジオの次世代データ分析基盤紹介 by 株式会社サイ...
Insight Technology, Inc.
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
Developers Summit
山下 真一/株式会社NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 2013年1月21日 Hadoop Conferecne Japan 2013 Winter 発表資料
Hadoop上の多種多様な処理でPigの活きる道 (Hadoop Conferecne Japan 2013 Winter)
Hadoop上の多種多様な処理でPigの活きる道 (Hadoop Conferecne Japan 2013 Winter)
NTT DATA OSS Professional Services
PredictionIOの構成とインストール方法について説明します。
PredictionIO構築入門
PredictionIO構築入門
Shinsuke Sugaya
Let's learn how to use Cloud Datalab deeply.
Datalab and colaboratory
Datalab and colaboratory
Hayato Yoshikawa
DB Tech Showcase 2019発表資料 PostgreSQLをどこまで高速化できるのか? ~ハードウェアの限界に挑む PG Strom の挑戦~
20190925_DBTS_PGStrom
20190925_DBTS_PGStrom
Kohei KaiGai
C27 基幹領域への適用におけるpostgre sqlの抱える課題 by 原嘉彦
C27 基幹領域への適用におけるpostgre sqlの抱える課題 by 原嘉彦
Insight Technology, Inc.
大名古屋#4での第1回Hadoop関西勉強会の参加レポート
第1回Hadoop関西勉強会参加レポート
第1回Hadoop関西勉強会参加レポート
You&I
- 企業活動とデータの在り方 - Hadoopクラスター構成 - データモデル - ビッグデータ向けサーバー
Hadoop基盤を知る
Hadoop基盤を知る
日本ヒューレット・パッカード株式会社
Puppet をクイックスタートするための方法を記載しました。
Puppet入門
Puppet入門
Tomita Akiyoshi
ビッグデータ活用支援フォーラム
ビッグデータ活用支援フォーラム
Recruit Technologies
2013/06/02 Jubatus Casual Talks #1 『世界征服を目指すJubatusだからこそ期待する5つのポイント』 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 下垣 徹
世界征服を目指すJubatusだからこそ期待する5つのポイント
世界征服を目指すJubatusだからこそ期待する5つのポイント
NTT DATA OSS Professional Services
Similar a スモールデータから始めるHadoop
(20)
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
分散処理基盤Apache Hadoop入門とHadoopエコシステムの最新技術動向 (オープンソースカンファレンス 2015 Tokyo/Spring 講...
Hadoop ecosystem NTTDATA osc15tk
Hadoop ecosystem NTTDATA osc15tk
現場の”今”を知る、これからのビッグデータ分析・活用のすすめ
現場の”今”を知る、これからのビッグデータ分析・活用のすすめ
はやわかりHadoop
はやわかりHadoop
SQL on Hadoop 比較検証 【2014月11日における検証レポート】
SQL on Hadoop 比較検証 【2014月11日における検証レポート】
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
[db tech showcase Tokyo 2014] L34: そのデータベース 5年後大丈夫ですか by 日本ヒューレット・パッカード株式会社 後藤宏
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
分散処理基盤ApacheHadoop入門とHadoopエコシステムの最新技術動向(OSC2015 Kansai発表資料)
Puppet本にはcisco nexusを制御する章があるよ
Puppet本にはcisco nexusを制御する章があるよ
[db tech showcase Tokyo 2016] B15: サイバーエージェント アドテクスタジオの次世代データ分析基盤紹介 by 株式会社サイ...
[db tech showcase Tokyo 2016] B15: サイバーエージェント アドテクスタジオの次世代データ分析基盤紹介 by 株式会社サイ...
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
【17-E-3】Hadoop:黄色い象使いへの道 ~「Hadoop徹底入門」より~
Hadoop上の多種多様な処理でPigの活きる道 (Hadoop Conferecne Japan 2013 Winter)
Hadoop上の多種多様な処理でPigの活きる道 (Hadoop Conferecne Japan 2013 Winter)
PredictionIO構築入門
PredictionIO構築入門
Datalab and colaboratory
Datalab and colaboratory
20190925_DBTS_PGStrom
20190925_DBTS_PGStrom
C27 基幹領域への適用におけるpostgre sqlの抱える課題 by 原嘉彦
C27 基幹領域への適用におけるpostgre sqlの抱える課題 by 原嘉彦
第1回Hadoop関西勉強会参加レポート
第1回Hadoop関西勉強会参加レポート
Hadoop基盤を知る
Hadoop基盤を知る
Puppet入門
Puppet入門
ビッグデータ活用支援フォーラム
ビッグデータ活用支援フォーラム
世界征服を目指すJubatusだからこそ期待する5つのポイント
世界征服を目指すJubatusだからこそ期待する5つのポイント
スモールデータから始めるHadoop
1.
スモールデータか ら 始める Hadoop nseg #39 @jem_3
2.
自己紹介 @jem_3 松本の
SI 屋のインフラエンジニア サーバ運用とネットワーク少々 一応 #nseg #39 の幹事
3.
お 約 束 免責
この発表資料は個人の感想です 企業やソフトウェアの効果・効能を 表すものではありません
4.
BIG DATA
5.
ビッグデータ って最近よく言われてるけど、また BUZZWORD
? と思いきや 2007 年頃から言われ始めてもう 6 年目、結構息長い とりあえず、テラバイト~ペタバイト級のデータをあれこれする ものらしい 広がりだした理由は、 GFS(Goodle File System) が論文で発表され て、 OSS で hadoop が開発されてから
6.
hadoop って何? 手っ取り早いまとめ
たくさんの PC を用意すればおっきいデータをごにょごにょできるソフト ウェア テラバイト / ペタバイト級のデータを分析・処理したりする場合 1台で ( 現実的な時間で ) やるならスパコン必要だけど、 hadoop 使って数百~数千台で分散出来るなら汎用 PC でも何とか出来る とりあえず、黄色いゾウきめぇ何かすごそう
7.
hadoop あるある事例 YAHOO
検索インデックスやレコメンデーションに hadoop を利用 過去3年分のログデータ分析が従来26日かかっていたのが約 20 分で完了 2010 年時点で 82PB のデータ管理・処理していた facebook 2010 年時点で新規データ 4TB/day 、 135TB のデータを処理 VISA カード 2 年で 730 億のトランザクション =36TB のデータ分析が 1 ヶ月から 13 分に
8.
hadoop あるある事例まとめ とりあえず、どんな大きいデータでも、台数揃えりゃぱっぱと片 付ける事が出来る!
数千台までは普通に処理効率がリニアに上がるらしい
9.
hadoop ってどんな事に使われているの? ビッグデータをどうやってビジネスに使うかという問いに近い
ログ解析 レコメンデーション 検索 データマイニング 機会学習・シミュレーション・・・・ etc これからだったら選挙とか
10.
2013 年 4
月 都内某所
11.
とある企業の BIGDATA セミナー
12.
セッションの衝撃的な内容 マーケティングでは、傾向を知るだけならサンプル調査で十分 全数検査する手間を考えたら赤字
判りやすい成功事例が無い 費用対効果が見えない ( 上を説得できない ) _人人人人人人人人人人_ > 費用対効果が見えない<  ̄ ^Y^Y^Y^Y^Y^Y^Y^Y^Y  ̄
13.
セッションで救われた一言 大体のスピーカーが スモールスタートで成功事例を積み重ねていくしか無い と仰られてました
14.
スモールスタート上等 1 台でも
hadoop 動くんだぜ 1GB 未満のデータでもジョブ走らせられるんだぜ 手元の PC でやってみようじゃないか
15.
CentOS で hadoop
環境構築 CentOS(6 の 64bit) で hadoop1 台環境を構築します とりあえず minimum でもいいからインストール Oracle の JDK をインストール ※プリインストールの open-jdk 入ってたら #yum remove java する # cd /etc/yum.repos.d # wget http://archive.cloudera.com/redhat/6/x86_64/cdh/cloudera-cdh3.repo # rpm --import http://archive.cloudera.com/redhat/6/x86_64/cdh/RPM-GPG-KEY-cloudera # yum -y install hadoop-0.20 # yum -y install hadoop-0.20-conf-pseudo /etc/hosts に IP を追加 (eth0 の IP アドレスでおk )※ ”ホスト名に _” は入れちゃダ メ! 10.0.0.1 localhost とか 関連サービスをスタート # service hadoop-0.20-namenode start # service hadoop-0.20-jobtracker start # service hadoop-0.20-datanode start # service hadoop-0.20-tasktracker start
16.
もう hadoop 環境できたよ!
簡単でしょ?
17.
で、ここからどうすれば? 適当にジョブを走らせてみよう デモします
18.
まとめ ビッグデータも小さな一歩から 動かせば
( 井の中の ) データサイエンティストになれ ( る気がし ) ます hadoop を一緒にいじれる仲間募集 ちなみに、自前で環境用意しなくても、「 Amazon Elastic MapReduce 」というサー ビスで hadoop 環境使えます (100 台構成で 1 時間で 1000 円前後とか orz) ご清聴ありがとうございました
Descargar ahora