Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Log解析の基礎@phpcon2014

8,283 views

Published on

Log解析の基礎@phpcon2014
https://joind.in/12030

Published in: Data & Analytics
  • Hello! Get Your Professional Job-Winning Resume Here - Check our website! https://vk.cc/818RFv
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here

Log解析の基礎@phpcon2014

  1. 1. 1 Log解析の基礎 @phpcon2014 菊池佑太
  2. 2. 2 One to One
  3. 3. 3 機械学習
  4. 4. 知識無くておk まずやってみる! 4
  5. 5. 5 性別推定
  6. 6. 6 未知への拡張 50% 20% 20%
  7. 7. 7 検索Log
  8. 8. 機械に確率を学習 P(男|ガンダム) = 0.8 8
  9. 9. 9 <?php namespace Algorithms; class NaiveBayes { public function add_instance(){} public function train(){} public function predict(){} ... }
  10. 10. 10 学習 推定 評価
  11. 11. { 正解 : {KW : 回数} } { 男性 : {ガンダム : 5 , ACミラン : 8 } } { 女性 : {化粧水 : 2 , 日焼け止め : 7 } } 11 ・・・
  12. 12. 12 $nb = new NaiveBayes(); // iteration $nb->add_instance( 'label' => '正解', 'attributes' => 'KW : 回数' ); $nb->train();
  13. 13. 13 学習 推定 評価
  14. 14. { 未知 : {KW : 回数} } { ? : {ガンダム : 3 , シャア : 2 } } 14 ・・・
  15. 15. 15 // iteration $res = $nb->predict( 'attributes' => 'KW : 回数' ); foreach($res as $label => $p) { echo $label . "t" . $p . "n"; } // 男性 : 0.878 // 女性 : 0.122 // UniqIDをKeyにNosqlへ
  16. 16. 16 学習 推定 評価
  17. 17. 17 精度 Balance { 精度 : 70%, 拡張量: 30%増} 拡張量
  18. 18. 18 応用
  19. 19. Hadoop Streaming 19 PHP
  20. 20. 20 特徴を追加して 精度を上げる
  21. 21. 21 他の問題
  22. 22. Are You Ready? 22
  23. 23. 魔法少 女推定23
  24. 24. 24 言語・画像処理から人物推定 ・動画台詞抽出 { KW : 回数} ・動画SnapShot {特徴 : 数値}
  25. 25. 25 学習 推定 評価(精度)
  26. 26. 26 台詞 40% 画像 低精度
  27. 27. もっと詳しく知り 27 たい方 〜知りたい,があなたを変えていく〜
  28. 28. 28 僕の名前 まどマギ 検索! 〜知りたい,があなたを変えていく〜
  29. 29. 29 Check It Out
  30. 30. 30 ご清聴 ありがとうござい ました

×