日経ビッグデータカンファレンスで行われたパネルディスカッション「世界最大級分析モデルコンペ「Kaggle」の最新動向～ウォルマート、ヒッグス粒子・・・様々な課題にデータサイエンティストが挑む～」での登壇資料です。内容は一部こちらの記事にもレポートされていました http://business.nikkeibp.co.jp/article/bigdata/20150427/280489/

1. Copyright 2014 Shiroyagi Corporation. All rights reserved.
シバタアキラ, Ph.D.
世界最大級分析モデルコンペ
「Kaggle」の最新動向
白ヤギコーポレーション
堅田洋資
白ヤギコーポレーション
田中秀樹
PyData.Tokyo

2. Copyright 2015 Shiroyagi Corporation. All rights reserved. 2
PyData.Tokyoかなり盛り上がってます
シバタアキラ, Ph.D. @madyagi
• 2013 -：CEO @白ヤギコーポレーション
• カメリオ : 人工知能型キュレーションニュースアプリ
• カメリオ API: コンテンツレコメンデーション API
• 2010 - 2013: 戦略コンサルティング @BCG
• 2007 - 2010: データサイエンティスト @NYU
• ヒッグス粒子の発見のためのデータ解析 @LHC, CERN
• 2004 - 2007: Ph.D. 高エネルギー物理学 @London大学

3. Copyright 2014 Shiroyagi Corporation. All rights reserved. 3
ビッグデータ
データ 機械学習
ディープラーニング
KPI
人工知能
Hadoop
AWS
統計モデリング
IoT
オープンデータ
予測モデル
データサイエンティスト
自然言語処理
Apache Spark 統計学
ニューラルネットワーク
ニューラルネットワーク
ログ解析
Python
グロースハック

4. Copyright 2015 Shiroyagi Corporation. All rights reserved. 4
PyData.Tokyo:
データサイエンティストのためのコミュニティー

5. Copyright 2015 Shiroyagi Corporation. All rights reserved. 5
これまでの活動
30人の座席にに毎回百人近い応募
• ディープラーニング
• 分散型機械学習
• データ解析インフラ
などの旬なテーマを扱い、毎回その
分野で活躍するデータサイエンティ
ストにご登壇いただいています。
実際に現場で活躍するデータサイエ
ンティストによる「濃い」議論が毎
回繰り広げられます。

6. Copyright 2015 Shiroyagi Corporation. All rights reserved. 6
イベントは渋谷のデンソーアイティーラボラトリにて開催
PyData.Tokyoチュートリアルの様子

7. Copyright 2015 Shiroyagi Corporation. All rights reserved. 7
タイタニックの生存者予測

8. Copyright 2015 Shiroyagi Corporation. All rights reserved. 8
イベント詳細は連載中

9. Copyright 2015 Shiroyagi Corporation. All rights reserved. 9
Kaggleとは（kaggle.com）
企業とデータサイエンティストとをつなぐ新しい仕組み

10. Copyright 2015 Shiroyagi Corporation. All rights reserved. 10
Kaggleのコンペの種類（一部）
Featured: 企業がデータを公開し、参加者は予測モデルの精度
を競う。チームでの参加も可能で、上位参加者には賞金。
Research: 科学的なデータの分析コンペ。入賞者は、賞金に
加え学会へ招待されることも。
Masters: 総合ランキング上位のデータサイエンティストが招
待参加。ほぼ全員に報酬が支払われる。
Recruiting: 企業が採用目的で行うコンペ。参加者は匿名的に
エントリーすることができる。

11. Copyright 2015 Shiroyagi Corporation. All rights reserved. 11
現在のアクティブコンペ
Featured
Recruiting
Research

12. Copyright 2015 Shiroyagi Corporation. All rights reserved. 12
データサイエンティスト
＠白ヤギコーポレーション
その他 15コンペに参加
• Kaggle歴： 2年
• University of San Franciscoの
MS in Analyticsに留学
• 大学ではデータサイエンス専攻
堅田 洋資

13. Copyright 2015 Shiroyagi Corporation. All rights reserved. 13
田中 秀樹 上位0.1%

14. Copyright 2015 Shiroyagi Corporation. All rights reserved. 14
たった137店舗のデータで100,000店舗の売上を予測
賞金：$30,000 (約360万円）
参加者：1,714チーム（4/17時点）
ファストフードレストランの売上予測

15. Copyright 2015 Shiroyagi Corporation. All rights reserved. 15
・・・
丁寧な異常値除去で現在97位/1714位

16. Copyright 2015 Shiroyagi Corporation. All rights reserved. 16
ヒッグス機械学習チャレンジ

17. Copyright 2015 Shiroyagi Corporation. All rights reserved. 17
ヒッグス機械学習チャレンジ

18. Copyright 2015 Shiroyagi Corporation. All rights reserved. 18
犬 vs 猫

19. Copyright 2015 Shiroyagi Corporation. All rights reserved. 19
Training
Test
: 25,000 images
: 12,500 images

20. Copyright 2015 Shiroyagi Corporation. All rights reserved. 20
Deep Learningの研究者@NYU
GPUのエンジニア@NVIDIA
Deep Learningの研究者
Deep Learningで圧倒的な成果

21. Copyright 2015 Shiroyagi Corporation. All rights reserved. 21
Walmartの商品の売上予測
過去の実績と天気から
店舗別・日別・アイテム別で販売個数を予測する
賞品：ウォルマートでのデータサイエンティスト職（※インタビュー後）
参加者：194チーム（4/17時点）

22. Copyright 2015 Shiroyagi Corporation. All rights reserved. 22
Skills
required:
• Knowledge
of
applied
statistics,
including
regression
models.
• Knowledge
of
SQL
and
Python.
• Knowledge
of
data
analysis
with
Python
or
R.
• Knowledge
of
Java.
• Experience
in
Hadoop
or
other
MapReduce
paradigms
and
associated
languages
such
as
Hive
or
Pig.
ウォルマート(US) Data scientistに求めるスキル
Kaggleを採用活動に使うメリット
ツールが使える人材は増えてきた
結果が出せる人材はどこにいるか？

23. Copyright 2015 Shiroyagi Corporation. All rights reserved. 23
Job Board

24. Copyright 2015 Shiroyagi Corporation. All rights reserved. 24
@
一緒にプレイしてくれる
データサイエンティストを募集中！