Hadoop Conference Japan 2016 LT資料 グラフデータベース事始め

オラクルエンジニア通信
オラクルエンジニア通信オラクルエンジニア通信
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グ
ラ
フ
データベース事始め
日本オラクル株式会社
ビッグデータ系の製品とか担当エンジニア
中井亮矢(Ryoya.Nakai@oracle.com)
1
Hadoop Conference Japan 2016 ライトニングトーク
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
• 以下の事項は、弊社の一般的な製品の方向性に関する概要を説明する
ものです。また、情報提供を唯一の目的とするものであり、いかなる契約
にも組み込むことはできません。以下の事項は、マテリアルやコード、機
能を提供することをコミットメント(確約)するものではないため、購買決定
を行う際の判断材料になさらないで下さい。オラクル製品に関して記載さ
れている機能の開発、リリースおよび時期については、弊社の裁量により
決定されます。
2
OracleとJavaは、Oracle Corporation 及びその子会社、関連会社の米国及びその他の国における登録商標です。
文中の社名、商品名等は各社の商標または登録商標である場合があります。
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
3
何気に人気の
グラフデータベース
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフブーム到来
4
出典:日経コンピュータ,ITPro出典:TechTarget Japan
出典:IT Leaders
出典:@IT
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフデータベース構築!
5
(*´∀`*)
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフデータベース
サンプル動かしました!
映画俳優、共演、可視化!
\(*T▽T*)/
6
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフデータベース性能!
大規模!スケール!
沢山トラバーサル
(`・ω・´)キリッ
7
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
が、、、
ふと立ち止まる・・・
(´・ω・`)
8
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
9
何に使えば・・・・
(ノω・、)
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
主たる(期待される)用途
いろんな非構造データの
受け皿・分析
10
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
受け皿
スキーマレス
色んなデータ
あなた色で受けとめる
(*/∇\*)
11
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
分析
知る
数値化,全体構造/個体の位置
見る
可視化
切る
クラスタ・スコアリング
12
尊敬(Level:中)
信頼(6)
便利(頻度:週一)
(事例:援軍)
尊敬(Level:兄貴)殺意(Level:MAX)
便利 [頻度:毎日]
[事例:草履/殿軍]
恐怖(対象:没後)
(対応:隔離)
3
1
2
2
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
よろしい
ならば分析だ
( ゚д゚ )クワ
13
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
ありがちモデリング
14
( ・∀・)
( ・ὢ・ ) (´▽`)
(๑•﹏•)(´・ε・̥ˋ๑)
ソーシャル
データ
(・ิω・ิ)
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
そんなデータ
社内にねぇ
FBデータも買えねぇよ
ヽ(`Д´#)ノ
15
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
そんなあなたに
2部グラフ
16
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
メールなんて結構お手軽
17
( ・∀・) ( ・ὢ・ )
(´▽`)
(๑•﹏•)(´・ε・̥ˋ๑)
(・ิω・ิ)
メーリングリストA
スレA スレB
投稿
投稿
レス
レス
レス レス レス
レス
スレ単位もよし From/Toだけもよし キーワードでもよし
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
18
( ・∀・) ( ・ὢ・ )
(´▽`) (๑•﹏•)(´・ε・̥ˋ๑)
(・ิω・ิ)
人間グラフも作れます
graphM %*%
t(graphM)
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
19
スレのクラスターも作れます
スレB
スレC
スレD
スレA
スレE
スレF
スレG
メールの全自動仕分け
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
20
Visualized by
Cytepscape
可視化
そのまま可視化でもなんかわかるかも
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフ化の前に
21
メール
アーカイブ
CC: も追加
投稿数で重みづけ
レスの多さで重みづけ
投稿内容をQAと情報提供で分類
投稿文書のキーワード抽出
メーリングリストも対象に
少し味付け あとは結構、力技
正規化
集計
(group by)
形態素解析
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフ技
22
重要情報発信者隠れコミュニティ 隠れスキルホルダー
影のメーリス王者コミュ活性化のカギハブられっ子
コミュニティ抽出コンダクタンス
巨大ファイルアタッチメント派閥 座敷童情報伝達の方向
わかるかもしれないこと
スコアリング
媒介中心性近接中心性固有ベクトル中心性可視化
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
仕事じゃねぇ
ヽ(`Д´#)ノ
23
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
24
商品C 商品D商品A 商品B 商品E
顧客A 顧客B 顧客C 顧客D
売上単位でもよし 伝票単位でもよし 商品カテゴリでもよし
売上データ・・・
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
可視化
25
データ出典:新潟県ITビジネスフォーラム データ分析の勧め
でっかいオーダーは
食彩鍋が基本でサイズ違い
が同じ店舗で売れている
総売り上げのでかい天ぷら
鍋は意外とでっかいオー
ダーに絡んでない
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
商品
データ
グラフ化の前に
26
注文単位
店舗単位
売上額で重みづけ
売上個数で重みづけ
商品の粒度
商品カテゴリ
顧客の属性
店舗の属性
商品の属性
少し味付け
あとは結局、力技
正規化
集計
(group by)
統計
技術者魂
店舗
データ
売り上げ
データ
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフ技
27
売上優秀店舗の共通点
商品のクラスタ 隠れ優良店舗
隠れ優良商品
コミュニティ抽出コンダクタンス
店舗のクラスタ
意外な売れ線
顧客のクラスタ
わかるかもしれないこと
スコアリング
媒介中心性近接中心性固有ベクトル中心性
新規セット販売商材への道
商品の隠れた属性
可視化
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
グラフ技
28
売上優秀店舗の共通点
商品のクラスタ 隠れ優良店舗
隠れ優良商品
コミュニティ抽出コンダクタンス
店舗のクラスタ
意外な売れ線
顧客のクラスタ
わかるかもしれないこと
スコアリング
媒介中心性近接中心性固有ベクトル中心性
新規セット販売商材への道
商品の隠れた属性
可視化
結局やることはほとんど同じです
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
行形式のデータでも、、
29
伝票番号 商品CD 商品名 大分類名 分類名 売上日 得意先名
売上
数
売上金額 粗利益
1001439 2305200Pオイルポット 1.2L 鍋類 フライパン 2012/7/1B配送センタ 44 15620 2640
accessログでも
crawl139.tkl.iis.u-tokyo.ac.jp - - [08/Feb/2016:05:57:47 +0900] "GET /uploads/2012/03/20140530-A1-10-low.jpg
HTTP/1.1" 304 - "http://www.takahiroyoshikawa.com/ja/concert/" "Mozilla/5.0 (compatible; Steeler/3.5;
http://www.tkl.iis.u-tokyo.ac.jp/~crawler/)"
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
たいてい関心事を絡めて
グラフを興せます
30
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
31
データを
探す
データを
突っ込む
知る
見る
切る
なんか
分かる
味付けを
探す
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
さあ、
データを探そう!
32
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
PGX Parallel Graph AnalytiX (PGX)
• 並列グラフ解析エンジンPGX
– Oracle Labの成果物PGXをベースに実装されています
– 製品版(Big Data Spatial and Graph)は、これをベースに拡張されたものになります
– Apache TinkerPop対応
– 30超のアルゴリズム実装
• 中心性演算,SALSA, 頂点被覆,PageRank,コミュニティ抽出,グラフ変換,弱連結成分抽出,counting triangle...etc.
– 並列グラフ演算は昨今活発に研究開発が行われている領域になりSCなどのHPC領域でもOracle
Laboratories からの論文発表も活発に行われています
• Oracle Lab版PGXはOTNのOracle Labsからダウンロードして利用可能です
33
Oracle Technology Network >> Oracle Labs >> Parallel Graph Analytics >> Overview
Welcome to Parallel Graph Analytics (PGX)
http://www.oracle.com/technetwork/oracle-labs/parallel-graph-analytics/overview/index.html
ロイヤリティフリー (OTN License)
このページは広告です
>>>スキップする
Oracle PGX
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
ご清聴ありがとうございました
その他、Hadoop関連Oracle製品↓
www.slideshare.net/oracle4engineer/
oraclehadoop
34
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
35
0120-155-096
(平日9:00-12:00 / 13:00-18:00)
http://www.oracle.com/jp/direct/index.html
各種無償支援サービスもございます。
Oracle Direct 検索
Oracle Direct
あなたにいちばん近いオラクル
Copyright © 2016 Oracle and/or its affiliates. All rights reserved. |
36
Copyright © 2016, Oracle and/or its affiliates. All rights reserved. | 37
Hadoop Conference Japan 2016 LT資料 グラフデータベース事始め
1 of 38

Recommended

RDF Semantic Graph「RDF 超入門」 by
RDF Semantic Graph「RDF 超入門」RDF Semantic Graph「RDF 超入門」
RDF Semantic Graph「RDF 超入門」オラクルエンジニア通信
10K views100 slides
Oracle Big Data Cloud Serviceのご紹介 by
Oracle Big Data Cloud Serviceのご紹介Oracle Big Data Cloud Serviceのご紹介
Oracle Big Data Cloud Serviceのご紹介オラクルエンジニア通信
2.4K views56 slides
Oracle R Advanced Analytics for Hadoop利用方法 by
Oracle R Advanced Analytics for Hadoop利用方法Oracle R Advanced Analytics for Hadoop利用方法
Oracle R Advanced Analytics for Hadoop利用方法オラクルエンジニア通信
5.6K views30 slides
Oracle Labs 発! Parallel Graph AnalytiX(PGX) by
Oracle Labs 発! Parallel Graph AnalytiX(PGX)Oracle Labs 発! Parallel Graph AnalytiX(PGX)
Oracle Labs 発! Parallel Graph AnalytiX(PGX)オラクルエンジニア通信
13.9K views66 slides
20151209 Oracle DDD オラクルで実現するクラウド・マシン・ラーニング by
20151209 Oracle DDD オラクルで実現するクラウド・マシン・ラーニング20151209 Oracle DDD オラクルで実現するクラウド・マシン・ラーニング
20151209 Oracle DDD オラクルで実現するクラウド・マシン・ラーニングオラクルエンジニア通信
1.6K views69 slides
Oracle Spatial 概要説明資料 by
Oracle Spatial 概要説明資料Oracle Spatial 概要説明資料
Oracle Spatial 概要説明資料オラクルエンジニア通信
5.4K views53 slides

More Related Content

What's hot

20160323 道玄坂LT祭り オラクル資料 by
20160323 道玄坂LT祭り オラクル資料20160323 道玄坂LT祭り オラクル資料
20160323 道玄坂LT祭り オラクル資料オラクルエンジニア通信
1.4K views12 slides
20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社 by
20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社
20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社オラクルエンジニア通信
689 views56 slides
【2016年3月時点】Data Visualization Cloud Service ハンズオン資料 by
【2016年3月時点】Data Visualization Cloud Service ハンズオン資料【2016年3月時点】Data Visualization Cloud Service ハンズオン資料
【2016年3月時点】Data Visualization Cloud Service ハンズオン資料オラクルエンジニア通信
1K views55 slides
0151209 Oracle DDD OracleとHadoop連携の勘所 by
0151209 Oracle DDD OracleとHadoop連携の勘所0151209 Oracle DDD OracleとHadoop連携の勘所
0151209 Oracle DDD OracleとHadoop連携の勘所オラクルエンジニア通信
1.7K views76 slides
Oracle Data Masking and Subsettingのご紹介 by
Oracle Data Masking and Subsettingのご紹介Oracle Data Masking and Subsettingのご紹介
Oracle Data Masking and Subsettingのご紹介オラクルエンジニア通信
1.8K views17 slides
20160916 ビッグデータシンポジウム オラクル公開資料 by
20160916 ビッグデータシンポジウム オラクル公開資料20160916 ビッグデータシンポジウム オラクル公開資料
20160916 ビッグデータシンポジウム オラクル公開資料オラクルエンジニア通信
869 views43 slides

What's hot(20)

20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社 by オラクルエンジニア通信
20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社
20160301 5日でできるクラウドで始めるデータ利活用 新日鉄住金ソリューションズ株式会社
クラウドを使って競争優位なビッグデータ活用の実現へ [Oracle Cloud Days Tokyo 2016] by オラクルエンジニア通信
クラウドを使って競争優位なビッグデータ活用の実現へ [Oracle Cloud Days Tokyo 2016]クラウドを使って競争優位なビッグデータ活用の実現へ [Oracle Cloud Days Tokyo 2016]
クラウドを使って競争優位なビッグデータ活用の実現へ [Oracle Cloud Days Tokyo 2016]
[Oracle Cloud Days Tokyo2015]成功事例に学べ! ビッグデータ活用のための最新ベストプラクティス by オラクルエンジニア通信
[Oracle Cloud Days Tokyo2015]成功事例に学べ! ビッグデータ活用のための最新ベストプラクティス[Oracle Cloud Days Tokyo2015]成功事例に学べ! ビッグデータ活用のための最新ベストプラクティス
[Oracle Cloud Days Tokyo2015]成功事例に学べ! ビッグデータ活用のための最新ベストプラクティス
ログ分析からセキュリティ監視まで:Oracle Management Cloudで実現するIT運用データのビッグデータ分析 [Oracle Cloud D... by オラクルエンジニア通信
ログ分析からセキュリティ監視まで:Oracle Management Cloudで実現するIT運用データのビッグデータ分析 [Oracle Cloud D...ログ分析からセキュリティ監視まで:Oracle Management Cloudで実現するIT運用データのビッグデータ分析 [Oracle Cloud D...
ログ分析からセキュリティ監視まで:Oracle Management Cloudで実現するIT運用データのビッグデータ分析 [Oracle Cloud D...
db tech showcase2016 - MySQLドキュメントストア by Shinya Sugiyama
db tech showcase2016 - MySQLドキュメントストアdb tech showcase2016 - MySQLドキュメントストア
db tech showcase2016 - MySQLドキュメントストア
Shinya Sugiyama2.6K views
ビッグデータ活用を加速する!分散SQLエンジン Spark SQL のご紹介 20161105 OSC Tokyo Fall by YusukeKuramata
ビッグデータ活用を加速する!分散SQLエンジン Spark SQL のご紹介 20161105 OSC Tokyo Fallビッグデータ活用を加速する!分散SQLエンジン Spark SQL のご紹介 20161105 OSC Tokyo Fall
ビッグデータ活用を加速する!分散SQLエンジン Spark SQL のご紹介 20161105 OSC Tokyo Fall
YusukeKuramata3K views
オラクルコンサルが語る!オラクルPaaS活用術(データベース・クラウド)(Oracle Cloud Days Tokyo 2015) by オラクルエンジニア通信
オラクルコンサルが語る!オラクルPaaS活用術(データベース・クラウド)(Oracle Cloud Days Tokyo 2015)オラクルコンサルが語る!オラクルPaaS活用術(データベース・クラウド)(Oracle Cloud Days Tokyo 2015)
オラクルコンサルが語る!オラクルPaaS活用術(データベース・クラウド)(Oracle Cloud Days Tokyo 2015)
Oracle Cloud IaaS活用:VMwareをそのままパブリック・クラウドへ&Windowsならオラクル [Oracle Cloud Days T... by オラクルエンジニア通信
Oracle Cloud IaaS活用:VMwareをそのままパブリック・クラウドへ&Windowsならオラクル [Oracle Cloud Days T...Oracle Cloud IaaS活用:VMwareをそのままパブリック・クラウドへ&Windowsならオラクル [Oracle Cloud Days T...
Oracle Cloud IaaS活用:VMwareをそのままパブリック・クラウドへ&Windowsならオラクル [Oracle Cloud Days T...
ITアーキテクトのためのOracle Cloud Platform設計・構築入門 [Oracle Cloud Days Tokyo 2016] by オラクルエンジニア通信
ITアーキテクトのためのOracle Cloud Platform設計・構築入門 [Oracle Cloud Days Tokyo 2016]ITアーキテクトのためのOracle Cloud Platform設計・構築入門 [Oracle Cloud Days Tokyo 2016]
ITアーキテクトのためのOracle Cloud Platform設計・構築入門 [Oracle Cloud Days Tokyo 2016]

Viewers also liked

Hadoop / Spark Conference Japan 2016 ご挨拶・Hadoopを取り巻く環境 by
Hadoop / Spark Conference Japan 2016 ご挨拶・Hadoopを取り巻く環境Hadoop / Spark Conference Japan 2016 ご挨拶・Hadoopを取り巻く環境
Hadoop / Spark Conference Japan 2016 ご挨拶・Hadoopを取り巻く環境Hadoop / Spark Conference Japan
6.3K views11 slides
Spark 2.0 What's Next (Hadoop / Spark Conference Japan 2016 キーノート講演資料) by
Spark 2.0 What's Next (Hadoop / Spark Conference Japan 2016 キーノート講演資料)Spark 2.0 What's Next (Hadoop / Spark Conference Japan 2016 キーノート講演資料)
Spark 2.0 What's Next (Hadoop / Spark Conference Japan 2016 キーノート講演資料)Hadoop / Spark Conference Japan
8K views34 slides
Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料) by
Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料)Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料)
Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料)Hadoop / Spark Conference Japan
7.2K views15 slides
Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発 by
Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発
Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発Ryo 亮 Kawahara 河原
5.8K views29 slides
Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料) by
Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料)Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料)
Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料)Hadoop / Spark Conference Japan
10K views49 slides
JVM and OS Tuning for accelerating Spark application by
JVM and OS Tuning for accelerating Spark applicationJVM and OS Tuning for accelerating Spark application
JVM and OS Tuning for accelerating Spark applicationTatsuhiro Chiba
6.4K views12 slides

Viewers also liked(9)

Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料) by Hadoop / Spark Conference Japan
Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料)Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料)
Apache Hadoop の現在と将来(Hadoop / Spark Conference Japan 2016 キーノート講演資料)
Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発 by Ryo 亮 Kawahara 河原
Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発
Apache Sparkを用いたスケーラブルな時系列データの異常検知モデル学習ソフトウェアの開発
Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料) by Hadoop / Spark Conference Japan
Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料)Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料)
Sparkによる GISデータを題材とした時系列データ処理 (Hadoop / Spark Conference Japan 2016 講演資料)
JVM and OS Tuning for accelerating Spark application by Tatsuhiro Chiba
JVM and OS Tuning for accelerating Spark applicationJVM and OS Tuning for accelerating Spark application
JVM and OS Tuning for accelerating Spark application
Tatsuhiro Chiba6.4K views
2016-02-08 Spark MLlib Now and Beyond@Spark Conference Japan 2016 by Yu Ishikawa
2016-02-08 Spark MLlib Now and Beyond@Spark Conference Japan 20162016-02-08 Spark MLlib Now and Beyond@Spark Conference Japan 2016
2016-02-08 Spark MLlib Now and Beyond@Spark Conference Japan 2016
Yu Ishikawa9.6K views
Hive on Spark を活用した高速データ分析 - Hadoop / Spark Conference Japan 2016 by Nagato Kasaki
Hive on Spark を活用した高速データ分析 - Hadoop / Spark Conference Japan 2016Hive on Spark を活用した高速データ分析 - Hadoop / Spark Conference Japan 2016
Hive on Spark を活用した高速データ分析 - Hadoop / Spark Conference Japan 2016
Nagato Kasaki16.6K views
sparksql-hive-bench-by-nec-hwx-at-hcj16 by Yifeng Jiang
sparksql-hive-bench-by-nec-hwx-at-hcj16sparksql-hive-bench-by-nec-hwx-at-hcj16
sparksql-hive-bench-by-nec-hwx-at-hcj16
Yifeng Jiang10.5K views

Similar to Hadoop Conference Japan 2016 LT資料 グラフデータベース事始め

【OCP Summit 2016】最高のDB基盤Exadataをクラウドで活用しよう by
【OCP Summit 2016】最高のDB基盤Exadataをクラウドで活用しよう【OCP Summit 2016】最高のDB基盤Exadataをクラウドで活用しよう
【OCP Summit 2016】最高のDB基盤Exadataをクラウドで活用しようオラクルエンジニア通信
559 views69 slides
【旧版】Oracle Content and Experience サービス概要 (2020年5月版) by
【旧版】Oracle Content and Experience サービス概要 (2020年5月版)【旧版】Oracle Content and Experience サービス概要 (2020年5月版)
【旧版】Oracle Content and Experience サービス概要 (2020年5月版)オラクルエンジニア通信
467 views22 slides
成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016] by
成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016]成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016]
成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016]オラクルエンジニア通信
923 views37 slides
【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現! by
【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現!【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現!
【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現!オラクルエンジニア通信
155 views90 slides
クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016] by
クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016]クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016]
クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016]オラクルエンジニア通信
215 views31 slides
Oracle advanced analyticsによる機械学習full version by
Oracle advanced analyticsによる機械学習full versionOracle advanced analyticsによる機械学習full version
Oracle advanced analyticsによる機械学習full version幹雄 小川
237 views65 slides

Similar to Hadoop Conference Japan 2016 LT資料 グラフデータベース事始め(20)

成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016] by オラクルエンジニア通信
成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016]成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016]
成功事例に学べ! これからの時代のビッグデータ活用最新ベストプラクティス [Oracle Cloud Days Tokyo 2016]
【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現! by オラクルエンジニア通信
【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現!【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現!
【OCP Summit 2016】“ミッションクリティカルクラウド”は本当か?障害影響ゼロをクラウドで実現!
クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016] by オラクルエンジニア通信
クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016]クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016]
クラウド慎重派も納得!“社内パブリッククラウド”でセキュリティとコスト削減を両立 [Oracle Cloud Days Tokyo 2016]
Oracle advanced analyticsによる機械学習full version by 幹雄 小川
Oracle advanced analyticsによる機械学習full versionOracle advanced analyticsによる機械学習full version
Oracle advanced analyticsによる機械学習full version
幹雄 小川237 views
【OCP Summit 2016】オラクル・インフラストラクチャー・サービス(IaaS)~高いコスト競争力を持つエンタープライズIaaS~ by オラクルエンジニア通信
【OCP Summit 2016】オラクル・インフラストラクチャー・サービス(IaaS)~高いコスト競争力を持つエンタープライズIaaS~【OCP Summit 2016】オラクル・インフラストラクチャー・サービス(IaaS)~高いコスト競争力を持つエンタープライズIaaS~
【OCP Summit 2016】オラクル・インフラストラクチャー・サービス(IaaS)~高いコスト競争力を持つエンタープライズIaaS~
【OCP Summit 2016】オンラインストレージでの情報共有はやめませんか?TCO削減し実現する社内外デジタルコラボレーションの新提案 by オラクルエンジニア通信
【OCP Summit 2016】オンラインストレージでの情報共有はやめませんか?TCO削減し実現する社内外デジタルコラボレーションの新提案【OCP Summit 2016】オンラインストレージでの情報共有はやめませんか?TCO削減し実現する社内外デジタルコラボレーションの新提案
【OCP Summit 2016】オンラインストレージでの情報共有はやめませんか?TCO削減し実現する社内外デジタルコラボレーションの新提案
20190620 multicloud share by Mai Nagahisa
20190620 multicloud share20190620 multicloud share
20190620 multicloud share
Mai Nagahisa1K views
【OCP Summit 2016】ユースケースで解説、オラクルクラウドによるアプリケーション性能とログ分析 by オラクルエンジニア通信
【OCP Summit 2016】ユースケースで解説、オラクルクラウドによるアプリケーション性能とログ分析【OCP Summit 2016】ユースケースで解説、オラクルクラウドによるアプリケーション性能とログ分析
【OCP Summit 2016】ユースケースで解説、オラクルクラウドによるアプリケーション性能とログ分析
【OCP Summit 2016】Oracle Cloud at Customer - 外部への機密データ持ち出し、遅延、ダウンタイム - クラウドの問題... by オラクルエンジニア通信
【OCP Summit 2016】Oracle Cloud at Customer - 外部への機密データ持ち出し、遅延、ダウンタイム - クラウドの問題...【OCP Summit 2016】Oracle Cloud at Customer - 外部への機密データ持ち出し、遅延、ダウンタイム - クラウドの問題...
【OCP Summit 2016】Oracle Cloud at Customer - 外部への機密データ持ち出し、遅延、ダウンタイム - クラウドの問題...
エンタープライズにおけるブロックチェーン活用 実用フェーズへの課題と期待 by Hyperleger Tokyo Meetup
エンタープライズにおけるブロックチェーン活用 実用フェーズへの課題と期待エンタープライズにおけるブロックチェーン活用 実用フェーズへの課題と期待
エンタープライズにおけるブロックチェーン活用 実用フェーズへの課題と期待
Oracle Cloudでエンタープライズシステムを! by oracle_consultant
Oracle Cloudでエンタープライズシステムを!Oracle Cloudでエンタープライズシステムを!
Oracle Cloudでエンタープライズシステムを!
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」 by オラクルエンジニア通信
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」
Hadoop Conference Japan_2016 セッション「顧客事例から学んだ、 エンタープライズでの "マジな"Hadoop導入の勘所」
【OCP Summit 2016】マルチテナントで実現するクラウド時代のJava/データベースプラットフォーム ~検証結果に基づくマルチテナント利用のメリ... by オラクルエンジニア通信
【OCP Summit 2016】マルチテナントで実現するクラウド時代のJava/データベースプラットフォーム ~検証結果に基づくマルチテナント利用のメリ...【OCP Summit 2016】マルチテナントで実現するクラウド時代のJava/データベースプラットフォーム ~検証結果に基づくマルチテナント利用のメリ...
【OCP Summit 2016】マルチテナントで実現するクラウド時代のJava/データベースプラットフォーム ~検証結果に基づくマルチテナント利用のメリ...
【2017年5月時点】セルフサービスBIからエンタープライズまで展開できるOracle Business Analytics クラウドプラットフォームのご紹介 by オラクルエンジニア通信
【2017年5月時点】セルフサービスBIからエンタープライズまで展開できるOracle Business Analytics クラウドプラットフォームのご紹介【2017年5月時点】セルフサービスBIからエンタープライズまで展開できるOracle Business Analytics クラウドプラットフォームのご紹介
【2017年5月時点】セルフサービスBIからエンタープライズまで展開できるOracle Business Analytics クラウドプラットフォームのご紹介

More from オラクルエンジニア通信

Oracle Cloud Infrastructure:2023年5月度サービス・アップデート by
Oracle Cloud Infrastructure:2023年5月度サービス・アップデートOracle Cloud Infrastructure:2023年5月度サービス・アップデート
Oracle Cloud Infrastructure:2023年5月度サービス・アップデートオラクルエンジニア通信
141 views56 slides
Oracle Cloud Infrastructure:2023年4月度サービス・アップデート by
Oracle Cloud Infrastructure:2023年4月度サービス・アップデートOracle Cloud Infrastructure:2023年4月度サービス・アップデート
Oracle Cloud Infrastructure:2023年4月度サービス・アップデートオラクルエンジニア通信
134 views96 slides
Oracle Cloud Infrastructure:2023年3月度サービス・アップデート by
Oracle Cloud Infrastructure:2023年3月度サービス・アップデートOracle Cloud Infrastructure:2023年3月度サービス・アップデート
Oracle Cloud Infrastructure:2023年3月度サービス・アップデートオラクルエンジニア通信
61 views83 slides
Oracle Cloud Infrastructure:2023年2月度サービス・アップデート by
Oracle Cloud Infrastructure:2023年2月度サービス・アップデートOracle Cloud Infrastructure:2023年2月度サービス・アップデート
Oracle Cloud Infrastructure:2023年2月度サービス・アップデートオラクルエンジニア通信
193 views72 slides
Oracle Cloud Infrastructure:2023年1月度サービス・アップデート by
Oracle Cloud Infrastructure:2023年1月度サービス・アップデートOracle Cloud Infrastructure:2023年1月度サービス・アップデート
Oracle Cloud Infrastructure:2023年1月度サービス・アップデートオラクルエンジニア通信
56 views57 slides
Oracle Cloud Infrastructure:2022年12月度サービス・アップデート by
Oracle Cloud Infrastructure:2022年12月度サービス・アップデートOracle Cloud Infrastructure:2022年12月度サービス・アップデート
Oracle Cloud Infrastructure:2022年12月度サービス・アップデートオラクルエンジニア通信
107 views57 slides

More from オラクルエンジニア通信(20)

Oracle Databaseはクラウドに移行するべきか否か 全10ケースをご紹介 (Oracle Cloudウェビナーシリーズ: 2021年11月30日) by オラクルエンジニア通信
Oracle Databaseはクラウドに移行するべきか否か 全10ケースをご紹介 (Oracle Cloudウェビナーシリーズ: 2021年11月30日)Oracle Databaseはクラウドに移行するべきか否か 全10ケースをご紹介 (Oracle Cloudウェビナーシリーズ: 2021年11月30日)
Oracle Databaseはクラウドに移行するべきか否か 全10ケースをご紹介 (Oracle Cloudウェビナーシリーズ: 2021年11月30日)
あなたのクラウドは大丈夫?NRI実務者が教えるセキュリティの傾向と対策 (Oracle Cloudウェビナーシリーズ: 2021年11月24日) by オラクルエンジニア通信
あなたのクラウドは大丈夫?NRI実務者が教えるセキュリティの傾向と対策 (Oracle Cloudウェビナーシリーズ: 2021年11月24日)あなたのクラウドは大丈夫?NRI実務者が教えるセキュリティの傾向と対策 (Oracle Cloudウェビナーシリーズ: 2021年11月24日)
あなたのクラウドは大丈夫?NRI実務者が教えるセキュリティの傾向と対策 (Oracle Cloudウェビナーシリーズ: 2021年11月24日)

Hadoop Conference Japan 2016 LT資料 グラフデータベース事始め

  • 1. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グ ラ フ データベース事始め 日本オラクル株式会社 ビッグデータ系の製品とか担当エンジニア 中井亮矢(Ryoya.Nakai@oracle.com) 1 Hadoop Conference Japan 2016 ライトニングトーク
  • 2. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | • 以下の事項は、弊社の一般的な製品の方向性に関する概要を説明する ものです。また、情報提供を唯一の目的とするものであり、いかなる契約 にも組み込むことはできません。以下の事項は、マテリアルやコード、機 能を提供することをコミットメント(確約)するものではないため、購買決定 を行う際の判断材料になさらないで下さい。オラクル製品に関して記載さ れている機能の開発、リリースおよび時期については、弊社の裁量により 決定されます。 2 OracleとJavaは、Oracle Corporation 及びその子会社、関連会社の米国及びその他の国における登録商標です。 文中の社名、商品名等は各社の商標または登録商標である場合があります。
  • 3. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 3 何気に人気の グラフデータベース
  • 4. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフブーム到来 4 出典:日経コンピュータ,ITPro出典:TechTarget Japan 出典:IT Leaders 出典:@IT
  • 5. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフデータベース構築! 5 (*´∀`*)
  • 6. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフデータベース サンプル動かしました! 映画俳優、共演、可視化! \(*T▽T*)/ 6
  • 7. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフデータベース性能! 大規模!スケール! 沢山トラバーサル (`・ω・´)キリッ 7
  • 8. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | が、、、 ふと立ち止まる・・・ (´・ω・`) 8
  • 9. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 9 何に使えば・・・・ (ノω・、)
  • 10. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 主たる(期待される)用途 いろんな非構造データの 受け皿・分析 10
  • 11. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 受け皿 スキーマレス 色んなデータ あなた色で受けとめる (*/∇\*) 11
  • 12. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 分析 知る 数値化,全体構造/個体の位置 見る 可視化 切る クラスタ・スコアリング 12 尊敬(Level:中) 信頼(6) 便利(頻度:週一) (事例:援軍) 尊敬(Level:兄貴)殺意(Level:MAX) 便利 [頻度:毎日] [事例:草履/殿軍] 恐怖(対象:没後) (対応:隔離) 3 1 2 2
  • 13. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | よろしい ならば分析だ ( ゚д゚ )クワ 13
  • 14. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | ありがちモデリング 14 ( ・∀・) ( ・ὢ・ ) (´▽`) (๑•﹏•)(´・ε・̥ˋ๑) ソーシャル データ (・ิω・ิ)
  • 15. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | そんなデータ 社内にねぇ FBデータも買えねぇよ ヽ(`Д´#)ノ 15
  • 16. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | そんなあなたに 2部グラフ 16
  • 17. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | メールなんて結構お手軽 17 ( ・∀・) ( ・ὢ・ ) (´▽`) (๑•﹏•)(´・ε・̥ˋ๑) (・ิω・ิ) メーリングリストA スレA スレB 投稿 投稿 レス レス レス レス レス レス スレ単位もよし From/Toだけもよし キーワードでもよし
  • 18. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 18 ( ・∀・) ( ・ὢ・ ) (´▽`) (๑•﹏•)(´・ε・̥ˋ๑) (・ิω・ิ) 人間グラフも作れます graphM %*% t(graphM)
  • 19. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 19 スレのクラスターも作れます スレB スレC スレD スレA スレE スレF スレG メールの全自動仕分け
  • 20. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 20 Visualized by Cytepscape 可視化 そのまま可視化でもなんかわかるかも
  • 21. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフ化の前に 21 メール アーカイブ CC: も追加 投稿数で重みづけ レスの多さで重みづけ 投稿内容をQAと情報提供で分類 投稿文書のキーワード抽出 メーリングリストも対象に 少し味付け あとは結構、力技 正規化 集計 (group by) 形態素解析
  • 22. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフ技 22 重要情報発信者隠れコミュニティ 隠れスキルホルダー 影のメーリス王者コミュ活性化のカギハブられっ子 コミュニティ抽出コンダクタンス 巨大ファイルアタッチメント派閥 座敷童情報伝達の方向 わかるかもしれないこと スコアリング 媒介中心性近接中心性固有ベクトル中心性可視化
  • 23. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 仕事じゃねぇ ヽ(`Д´#)ノ 23
  • 24. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 24 商品C 商品D商品A 商品B 商品E 顧客A 顧客B 顧客C 顧客D 売上単位でもよし 伝票単位でもよし 商品カテゴリでもよし 売上データ・・・
  • 25. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 可視化 25 データ出典:新潟県ITビジネスフォーラム データ分析の勧め でっかいオーダーは 食彩鍋が基本でサイズ違い が同じ店舗で売れている 総売り上げのでかい天ぷら 鍋は意外とでっかいオー ダーに絡んでない
  • 26. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 商品 データ グラフ化の前に 26 注文単位 店舗単位 売上額で重みづけ 売上個数で重みづけ 商品の粒度 商品カテゴリ 顧客の属性 店舗の属性 商品の属性 少し味付け あとは結局、力技 正規化 集計 (group by) 統計 技術者魂 店舗 データ 売り上げ データ
  • 27. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフ技 27 売上優秀店舗の共通点 商品のクラスタ 隠れ優良店舗 隠れ優良商品 コミュニティ抽出コンダクタンス 店舗のクラスタ 意外な売れ線 顧客のクラスタ わかるかもしれないこと スコアリング 媒介中心性近接中心性固有ベクトル中心性 新規セット販売商材への道 商品の隠れた属性 可視化
  • 28. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | グラフ技 28 売上優秀店舗の共通点 商品のクラスタ 隠れ優良店舗 隠れ優良商品 コミュニティ抽出コンダクタンス 店舗のクラスタ 意外な売れ線 顧客のクラスタ わかるかもしれないこと スコアリング 媒介中心性近接中心性固有ベクトル中心性 新規セット販売商材への道 商品の隠れた属性 可視化 結局やることはほとんど同じです
  • 29. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 行形式のデータでも、、 29 伝票番号 商品CD 商品名 大分類名 分類名 売上日 得意先名 売上 数 売上金額 粗利益 1001439 2305200Pオイルポット 1.2L 鍋類 フライパン 2012/7/1B配送センタ 44 15620 2640 accessログでも crawl139.tkl.iis.u-tokyo.ac.jp - - [08/Feb/2016:05:57:47 +0900] "GET /uploads/2012/03/20140530-A1-10-low.jpg HTTP/1.1" 304 - "http://www.takahiroyoshikawa.com/ja/concert/" "Mozilla/5.0 (compatible; Steeler/3.5; http://www.tkl.iis.u-tokyo.ac.jp/~crawler/)"
  • 30. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | たいてい関心事を絡めて グラフを興せます 30
  • 31. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 31 データを 探す データを 突っ込む 知る 見る 切る なんか 分かる 味付けを 探す
  • 32. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | さあ、 データを探そう! 32
  • 33. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | PGX Parallel Graph AnalytiX (PGX) • 並列グラフ解析エンジンPGX – Oracle Labの成果物PGXをベースに実装されています – 製品版(Big Data Spatial and Graph)は、これをベースに拡張されたものになります – Apache TinkerPop対応 – 30超のアルゴリズム実装 • 中心性演算,SALSA, 頂点被覆,PageRank,コミュニティ抽出,グラフ変換,弱連結成分抽出,counting triangle...etc. – 並列グラフ演算は昨今活発に研究開発が行われている領域になりSCなどのHPC領域でもOracle Laboratories からの論文発表も活発に行われています • Oracle Lab版PGXはOTNのOracle Labsからダウンロードして利用可能です 33 Oracle Technology Network >> Oracle Labs >> Parallel Graph Analytics >> Overview Welcome to Parallel Graph Analytics (PGX) http://www.oracle.com/technetwork/oracle-labs/parallel-graph-analytics/overview/index.html ロイヤリティフリー (OTN License) このページは広告です >>>スキップする Oracle PGX
  • 34. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | ご清聴ありがとうございました その他、Hadoop関連Oracle製品↓ www.slideshare.net/oracle4engineer/ oraclehadoop 34
  • 35. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 35 0120-155-096 (平日9:00-12:00 / 13:00-18:00) http://www.oracle.com/jp/direct/index.html 各種無償支援サービスもございます。 Oracle Direct 検索 Oracle Direct あなたにいちばん近いオラクル
  • 36. Copyright © 2016 Oracle and/or its affiliates. All rights reserved. | 36
  • 37. Copyright © 2016, Oracle and/or its affiliates. All rights reserved. | 37