Submit Search
Upload
Fluentd,mongo db,rでお手軽ログ解析環境
•
15 likes
•
6,024 views
Michitaka Iida
Follow
第30回R勉強会@東京(#TokyoR)でのLT資料
Read less
Read more
Technology
Report
Share
Report
Share
1 of 10
Recommended
Introduction r (R入門)
Introduction r (R入門)
Takashi Minoda
RStudioでRをはじめよう(R for Beginner using RStudio)
RStudioでRをはじめよう(R for Beginner using RStudio)
Takashi Minoda
R超入門
R超入門
Sachiko Hirata
Lucene/Solr 用形態素解析システムのご紹介 ベイシス・テクノロジー
Lucene/Solr 用形態素解析システムのご紹介 ベイシス・テクノロジー
Basis Technology K.K.
Pro Git 第2版はじめました
Pro Git 第2版はじめました
harupong
地獄Spec
地獄Spec
Tsunenori Oohara
ZytleBot:ROS対応自動走行ロボットへのFPGA活用を加速化する統合開発プラットフォーム
ZytleBot:ROS対応自動走行ロボットへのFPGA活用を加速化する統合開発プラットフォーム
Hideki Takase
再帰、漸化式、差分方程式とアルゴリズム Gx#20
再帰、漸化式、差分方程式とアルゴリズム Gx#20
鉄次 尾形
Recommended
Introduction r (R入門)
Introduction r (R入門)
Takashi Minoda
RStudioでRをはじめよう(R for Beginner using RStudio)
RStudioでRをはじめよう(R for Beginner using RStudio)
Takashi Minoda
R超入門
R超入門
Sachiko Hirata
Lucene/Solr 用形態素解析システムのご紹介 ベイシス・テクノロジー
Lucene/Solr 用形態素解析システムのご紹介 ベイシス・テクノロジー
Basis Technology K.K.
Pro Git 第2版はじめました
Pro Git 第2版はじめました
harupong
地獄Spec
地獄Spec
Tsunenori Oohara
ZytleBot:ROS対応自動走行ロボットへのFPGA活用を加速化する統合開発プラットフォーム
ZytleBot:ROS対応自動走行ロボットへのFPGA活用を加速化する統合開発プラットフォーム
Hideki Takase
再帰、漸化式、差分方程式とアルゴリズム Gx#20
再帰、漸化式、差分方程式とアルゴリズム Gx#20
鉄次 尾形
R-3.0.0でGLM
R-3.0.0でGLM
Kazuya Wada
R3.0.0 is relased
R3.0.0 is relased
Shintaro Fukushima
TokyoR:RMarkdownでレポート作成
TokyoR:RMarkdownでレポート作成
Takashi Minoda
Collaborativefilteringwith r
Collaborativefilteringwith r
Teito Nakagawa
「plyrパッケージで君も前処理スタ☆」改め「plyrパッケージ徹底入門」
「plyrパッケージで君も前処理スタ☆」改め「plyrパッケージ徹底入門」
Nagi Teramo
Rでコンジョイント分析
Rでコンジョイント分析
osamu morimoto
Tokyo r30 beginner
Tokyo r30 beginner
Takashi Minoda
More Related Content
Viewers also liked
R-3.0.0でGLM
R-3.0.0でGLM
Kazuya Wada
R3.0.0 is relased
R3.0.0 is relased
Shintaro Fukushima
TokyoR:RMarkdownでレポート作成
TokyoR:RMarkdownでレポート作成
Takashi Minoda
Collaborativefilteringwith r
Collaborativefilteringwith r
Teito Nakagawa
「plyrパッケージで君も前処理スタ☆」改め「plyrパッケージ徹底入門」
「plyrパッケージで君も前処理スタ☆」改め「plyrパッケージ徹底入門」
Nagi Teramo
Rでコンジョイント分析
Rでコンジョイント分析
osamu morimoto
Tokyo r30 beginner
Tokyo r30 beginner
Takashi Minoda
Viewers also liked
(7)
R-3.0.0でGLM
R-3.0.0でGLM
R3.0.0 is relased
R3.0.0 is relased
TokyoR:RMarkdownでレポート作成
TokyoR:RMarkdownでレポート作成
Collaborativefilteringwith r
Collaborativefilteringwith r
「plyrパッケージで君も前処理スタ☆」改め「plyrパッケージ徹底入門」
「plyrパッケージで君も前処理スタ☆」改め「plyrパッケージ徹底入門」
Rでコンジョイント分析
Rでコンジョイント分析
Tokyo r30 beginner
Tokyo r30 beginner
Fluentd,mongo db,rでお手軽ログ解析環境
1.
FluentdとRで 簡単ログ解析 第30回R勉強会@東京(#TokyoR)
2.
自己 紹介 • @_TRIP_DANCER • お仕事 –
仮想化エンジニア(VMware) • 学生時代 – 心理学専攻 ↑ここでRと出会う • Rはほぼ趣味 – 来るべき時に備えて・・・
3.
Fluentd, MongoDB,R でお手軽ログ解析 環境をつくる話
4.
Fluentd とは? • ログ収集基盤ソフトウェア • Fluentdにインプットされた、すべ てのログをJSONに変換し、アウト プット 簡単にいうと・・・。 •
機器・システムのログのフォー マット/形式の違いをFluentdで吸
5.
JSON? RでもJSON扱える パッケージあったような? ってことは、Fluentdを使えば、 ログ解析がもっと幸せになれるは ず!
6.
FluentdとRを簡単につなぐには???
7.
FluentdとRを簡単につなぐには??? MongoDBがお手軽!
8.
なぜ Mongo? • MongoDBはREST(HTTP)で取得可 能 – MySQLなどのデータベースは、SQLと かドライバとか面倒だなぁと思って た •
MongoDBなら、Rcurlでデータ取れ る – SQLとかデータベースドライバは不 要 • http://192.168.xx.xx:28017/apache/access/ アクセス JSON形式データ
9.
環境 Apacheアクセスログ rcul RJSONIO ApaceのアクセスログをRで解析可能!
10.
手順 • Apache2のインストール • Fluentdのインストール •
MongoDBのインストール – FluentdがMongoDBに吐くように設定 – RESRでデータがとれるように設定 • Rcurl/RJSONIOでデータ取得、解 析!