Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Real collector紹介

44 views

Published on

データ分析クラウドサービスのRealCollectorのご説明

■ サービスの特徴
1. データ収集の特徴
・ユーザにより設定された複数のソースのデータを自動的に収集し、蓄積します。
2. データ蓄積・可視化の特徴
・データを可視化し、簡単な操作で深掘りしていくことが可能です。
・複数のソースを、同じ時系列に並べ、同一の時間帯に発生した情報を容易に突き合わせて確認できます。
・データ群に対して、高度な検索も可能です。
3. その他
・クラウドのため、サーバメンテナンス不要
・無料ですぐに利用可能

URL : http://realcollector.jp

Published in: Technology
  • Be the first to comment

  • Be the first to like this

Real collector紹介

  1. 1. REALCOLLECTOR紹介 REALCOLLECTOR.JP開発チーム
  2. 2. REALCOLLECTORとは? ?
  3. 3. 従来分析を始めるまでは、分析種別毎に以下のプロセスが必要でした 1. 取得の対象の確認 1. データソースの選定 2. データソースの取得パターンの整理 3. 取得間隔 2. データの取得機能の検討と実装 3. データの蓄積機能の検討と実装 4. データの可視化の検討と実装 1. ツール選定 ※ 先頭に戻り別の分析データソースの検討を実施 POCを実施し、データを簡易的に確認する場合でも、 開発が必要であり、膨⼤なコストが発⽣するため、 ⼿軽には、データを取得・分析することはできなかった。 従来までの分析の流れ 膨⼤な開発コスト
  4. 4. REALCOLLECTORは、 クラウド時代の分析ツールです。 以下の分析の流れを、このツールのみ で完結することができます。 ・データの収集(COLLECT) ・データの蓄積(STORE) ・データの可視化(VISUALIZE)
  5. 5. ■ サービスの特徴 1. データ収集の特徴 ・ユーザにより設定された複数のソースのデータを⾃ 動的に収集し、蓄積します。 2. データ蓄積・可視化の特徴 ・データを可視化し、簡単な操作で深掘りしていくこ とが可能です。 ・複数のソースを、同じ時系列に並べ、同⼀の時間帯 に発⽣した情報を容易に突き合わせて確認できます。 ・データ群に対して、⾼度な検索※1も可能です。 3. その他 ・クラウドのため、サーバメンテナンス不要 ・無料ですぐに利⽤可能※2 ※1 : LUCENEクエリによる⾼度な検索に対応 ※2 : 無料プランでは、コレクタ数2で、データ保持期間30⽇間でご利⽤頂けます。(無料プ ランの情報は、REALCOLLECTORのページの情報が正となります。)
  6. 6. データの収集(COLLECT)を、WEB画⾯からの操作のみ で、実施できます。 REALCOLLECTORでは、データの取得をコレクタとい う単位で分割しています。(例 : 複数のコレクタを利⽤す ることで、同じデータソースから違うデータを取得する ことができます。) ■ 対応しているデータソース(コレクタ) 1. ツイートコレクタ (TWITTER投稿情報) 2. YAHOOオークションコレクタ (商品価格情報) 3. YAHOOショッピングコレクタ (オークション価格情 報) 4. 電⾞運⾏情報コレクタ 5. 気象情報コレクタ 6. RSSコレクタ (ニュース情報) 7. ウェブサイトコレクタ 8. スピードテストコレクタ 9. 暗号通貨レートコレクタ
  7. 7. データの蓄積(STORE)は、データの 収集機能(コレクタ)からの情報を、蓄 積します。 これにより、蓄積⽤のデータベースな どの保存領域を、ユーザ側で確保する 必要がなくなります。 また、REALCOLLECTORは、データ の蓄積をELASTICSEARCHクラスタ に⾏わせるため、分析対象のデータが ⼤容量になった場合でも対応可能です。
  8. 8. データの可視化(VISUALIZE)は、蓄積 した情報を可視化し、分析します。 蓄積した情報は、全て同じ時系列とし て確認できるため、対象の時刻に発⽣ した様々な情報の相関関係を紐解いて いくことを⽀援します。 また、グラフをユーザが⾃ら作成する 必要はなく、予め分析⽤ダッシュボー ドを提供します。 ユーザがグラフを⼀時的に作成し、確 認することも可能です。
  9. 9. 以下の分析例の操作を説明する。(主にTWITTERについて) 分析例1 : 特定の⼀⽇のツイートのサマリをみたい。 分析例2 : ⽇本語のツイートを確認したい。 分析例3 : 特定の⾔葉を検索したい。 分析例の説明 分析例の初期画⾯ (Twitterのみ)
  10. 10. 特定の⼀⽇のツイートのサマリをみたい。 分析例1 ⾒たい時間を範囲選択 全てのグラフが選択した時間 範囲の表⽰に切り替わる
  11. 11. ⽇本語のツイートを確認したい。 分析例2 ⽇本語のツイートの みの表⽰となる。 確認したいツイートの⾔語 をクリック
  12. 12. 特定の⾔葉を検索したい。 分析例3 検索したい後を⼊⼒し、 🔍をクリック 「ドコモ」または「docomo」 が⼊ったデータを検索 対象のデータを 全てのグラフが表⽰する。
  13. 13. RealCollectorは、 多様なデータソースから、情報を収集 できるため、様々な分析⽤途で利⽤できる。 ⼀部の想定されるユースケースについて、以下に記載する。 ユースケース1 : お店の名前をTwitterから収集し、分析する。寒 い・暑いなど気温の情報も同時に収集し、突き合わせて確認する。 ユースケース2 : RSSやTwitterから取得したニュースの情報を元 に、ビットコインの動向を確認し、投資タイミングを調査する。 など 1. ツイートコレクタ (TWITTER投稿情報) 2. YAHOOオークションコレクタ (商品価格情報) 3. YAHOOショッピングコレクタ (オークション価格情報) 4. 電⾞運⾏情報コレクタ 5. 気象情報コレクタ 6. RSSコレクタ (ニュース情報) 7. ウェブサイトコレクタ 8. スピードテストコレクタ 9. 暗号通貨レートコレクタ
  14. 14. 今後の展開として、 ・外部連携機能の追加 ・機械学習機能の追加 などを⾏う予定となっております。 利⽤可能となりましたら、http://realcollector.jpにて、公開さ せていただきます。
  15. 15. RealCollectorは、以下のURLから利⽤できます。 ぜひお試しください。 ご覧頂きありがとうございます。 http://realcollector.jp

×