Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

20150421 日経ビッグデータカンファレンス

1,395 views

Published on

日経ビッグデータカンファレンスで行われたパネルディスカッション「世界最大級分析モデルコンペ「Kaggle」の最新動向~ウォルマート、ヒッグス粒子・・・様々な課題にデータサイエンティストが挑む~」での登壇資料です。内容は一部こちらの記事にもレポートされていました
http://business.nikkeibp.co.jp/article/bigdata/20150427/280489/

Published in: Data & Analytics

20150421 日経ビッグデータカンファレンス

  1. 1. Copyright 2014 Shiroyagi Corporation. All rights reserved. シバタアキラ, Ph.D. 世界最大級分析モデルコンペ 「Kaggle」の最新動向 白ヤギコーポレーション 堅田洋資 白ヤギコーポレーション 田中秀樹 PyData.Tokyo
  2. 2. Copyright 2015 Shiroyagi Corporation. All rights reserved. 2 PyData.Tokyoかなり盛り上がってます シバタアキラ, Ph.D. @madyagi • 2013 -:CEO @白ヤギコーポレーション • カメリオ : 人工知能型キュレーションニュースアプリ • カメリオ API: コンテンツレコメンデーション API • 2010 - 2013: 戦略コンサルティング @BCG • 2007 - 2010: データサイエンティスト @NYU • ヒッグス粒子の発見のためのデータ解析 @LHC, CERN • 2004 - 2007: Ph.D. 高エネルギー物理学 @London大学
  3. 3. Copyright 2014 Shiroyagi Corporation. All rights reserved. 3 ビッグデータ データ 機械学習 ディープラーニング KPI 人工知能 Hadoop AWS 統計モデリング IoT オープンデータ 予測モデル データサイエンティスト 自然言語処理 Apache Spark 統計学 ニューラルネットワーク ニューラルネットワーク ログ解析 Python グロースハック
  4. 4. Copyright 2015 Shiroyagi Corporation. All rights reserved. 4 PyData.Tokyo:
 データサイエンティストのためのコミュニティー
  5. 5. Copyright 2015 Shiroyagi Corporation. All rights reserved. 5 これまでの活動 30人の座席にに毎回百人近い応募 • ディープラーニング • 分散型機械学習 • データ解析インフラ などの旬なテーマを扱い、毎回その 分野で活躍するデータサイエンティ ストにご登壇いただいています。 実際に現場で活躍するデータサイエ ンティストによる「濃い」議論が毎 回繰り広げられます。
  6. 6. Copyright 2015 Shiroyagi Corporation. All rights reserved. 6 イベントは渋谷のデンソーアイティーラボラトリにて開催 PyData.Tokyoチュートリアルの様子
  7. 7. Copyright 2015 Shiroyagi Corporation. All rights reserved. 7 タイタニックの生存者予測
  8. 8. Copyright 2015 Shiroyagi Corporation. All rights reserved. 8 イベント詳細は連載中
  9. 9. Copyright 2015 Shiroyagi Corporation. All rights reserved. 9 Kaggleとは(kaggle.com) 企業とデータサイエンティストとをつなぐ新しい仕組み
  10. 10. Copyright 2015 Shiroyagi Corporation. All rights reserved. 10 Kaggleのコンペの種類(一部) Featured: 企業がデータを公開し、参加者は予測モデルの精度 を競う。チームでの参加も可能で、上位参加者には賞金。 Research: 科学的なデータの分析コンペ。入賞者は、賞金に 加え学会へ招待されることも。 Masters: 総合ランキング上位のデータサイエンティストが招 待参加。ほぼ全員に報酬が支払われる。 Recruiting: 企業が採用目的で行うコンペ。参加者は匿名的に エントリーすることができる。
  11. 11. Copyright 2015 Shiroyagi Corporation. All rights reserved. 11 現在のアクティブコンペ Featured Recruiting Research
  12. 12. Copyright 2015 Shiroyagi Corporation. All rights reserved. 12 データサイエンティスト @白ヤギコーポレーション その他 15コンペに参加 • Kaggle歴: 2年 • University of San Franciscoの
 MS in Analyticsに留学 • 大学ではデータサイエンス専攻 堅田 洋資
  13. 13. Copyright 2015 Shiroyagi Corporation. All rights reserved. 13 田中 秀樹 上位0.1%
  14. 14. Copyright 2015 Shiroyagi Corporation. All rights reserved. 14 たった137店舗のデータで100,000店舗の売上を予測 賞金:$30,000 (約360万円) 参加者:1,714チーム(4/17時点) ファストフードレストランの売上予測
  15. 15. Copyright 2015 Shiroyagi Corporation. All rights reserved. 15 ・・・ 丁寧な異常値除去で現在97位/1714位
  16. 16. Copyright 2015 Shiroyagi Corporation. All rights reserved. 16 ヒッグス機械学習チャレンジ
  17. 17. Copyright 2015 Shiroyagi Corporation. All rights reserved. 17 ヒッグス機械学習チャレンジ
  18. 18. Copyright 2015 Shiroyagi Corporation. All rights reserved. 18 犬 vs 猫
  19. 19. Copyright 2015 Shiroyagi Corporation. All rights reserved. 19 Training Test : 25,000 images : 12,500 images
  20. 20. Copyright 2015 Shiroyagi Corporation. All rights reserved. 20 Deep Learningの研究者@NYU GPUのエンジニア@NVIDIA Deep Learningの研究者 Deep Learningで圧倒的な成果
  21. 21. Copyright 2015 Shiroyagi Corporation. All rights reserved. 21 Walmartの商品の売上予測 過去の実績と天気から 店舗別・日別・アイテム別で販売個数を予測する 賞品:ウォルマートでのデータサイエンティスト職(※インタビュー後) 参加者:194チーム(4/17時点)
  22. 22. Copyright 2015 Shiroyagi Corporation. All rights reserved. 22 Skills  required:     • Knowledge  of  applied  statistics,  including  regression  models.     • Knowledge  of  SQL  and  Python.     • Knowledge  of  data  analysis  with  Python  or  R.     • Knowledge  of  Java.     • Experience  in  Hadoop  or  other  MapReduce  paradigms  and   associated  languages  such  as  Hive  or  Pig. ウォルマート(US) Data scientistに求めるスキル Kaggleを採用活動に使うメリット ツールが使える人材は増えてきた 結果が出せる人材はどこにいるか?
  23. 23. Copyright 2015 Shiroyagi Corporation. All rights reserved. 23 Job Board
  24. 24. Copyright 2015 Shiroyagi Corporation. All rights reserved. 24 @ 一緒にプレイしてくれる データサイエンティストを募集中!

×