Recommended
More Related Content
Featured
Featured (20)
Slack data Analysis
- 1. Team name : FromDeer Member: takutori, 猛者, EssenGing, ミュウツー
- 4. 分析の目的 たくさん会話していて、普段発言しにくい人 も積極的に会話に参加できる状態であること これから自分が発言する内容は、 チャネル内を活性化させるものなのか？ KPI作成 機械学習による予測
- 7. user1 user2 user3 user4 … … userの発言分布 情報量を計算 {1: −log P user1 , 2: −log P user2 , 3: −log P user3 , … } P user … userの発言確率 発言確率が低いuserの発言に対 して、ポイントを高くするため channelの活性化の定義
- 8. 発言iに対するchannelの活発化を示す指標 𝒖𝒔𝒆𝒓∈𝑨𝒊 𝒕𝒂𝒍𝒌𝑪𝑵𝑻 𝒖𝒔𝒆𝒓 × −𝐥𝐨𝐠(𝑷 𝒖𝒔𝒆𝒓 ) 𝑡𝑎𝑙𝑘𝐶𝑁𝑇 𝑢𝑠𝑒𝑟 …発言iから一日後までにuserが発言した回数 𝐴𝑖…発言iから一日後までに発言したuserの集合 𝑛…userの人数 𝑃(𝑢𝑠𝑒𝑟)…userが発言する確率 = −𝐥𝐨𝐠 𝚷 𝒖𝒔𝒆𝒓∈𝑨 𝒊 𝑷 𝒖𝒔𝒆𝒓 𝒕𝒂𝒍𝒌𝑪𝑵𝑻 𝒖𝒔𝒆𝒓 尤度になってる
- 9. Class1: 4062 Class2: 1691 Class3: 136
- 11. • ネットワークの中心性(次数、近接、媒介、pagerank) • 感情分析(happy,sad,disgust,angry,fear,surprice) • ワード数 • Time_zone(朝、昼、夜) • 曜日 • 発話者の発言確率の情報量 • 過去の発言における自分の発言の割合 特徴量 Light-GBMによるチャネル活性化予測
- 12. • ネットワークの中心性(次数、近接、媒介、pagerank) • 感情分析(happy,sad,disgust,angry,fear,surprice) • ワード数 • Time_zone(朝、昼、夜) • 曜日 • 発話者の情報量 • 過去の発言における自分の発言の割合 特徴量 Light-GBMによるチャネル活性化予測 どのようなネットワーク？？
- 13. グラフの今回の定義 user talk_id 時刻 User1 2019-08-10 18時 User1 2019-08-10 9時 User2 2019-08-10 19時 User3 2019-08-10 21時 User4 2019-08-11 10時 user1 2019-08-11 20時 User1 user1の最後の発 言から一日以内 あるchannelのtalk履歴 user1->{user2 : 0.4, user3 : 0.5} user2->{user3 : 0.3, user4 : 0.8} user3->{user4 : 0.6, user1 : 0.4} 枝と重みの辞書 User2 User3 User4 0.8 0.4 0.5 0.3 0.6 0.4 重み𝑤 1,2 …user1の発言に対して、一日以内にuser2が発言した割合
- 17. • ネットワークの中心性(次数、近接、媒介、pagerank) • 感情分析(happy,sad,disgust,angry,fear,surprice) • ワード数 • Time_zone(朝、昼、夜) • 曜日 • 発話者の情報量 • 過去の発言における自分の発言の割合 特徴量 Light-GBMによるチャネル活性化予測 実装はどうした？？
- 22. 分析の目的 これから自分が発言する内容は、 チャネル内を活性化させるものなのか？ 𝒖𝒔𝒆𝒓∈𝑨𝒊 𝒕𝒂𝒍𝒌𝑪𝑵𝑻 𝒖𝒔𝒆𝒓 × −𝐥𝐨𝐠(𝑷 𝒖𝒔𝒆𝒓 ) • ネットワークの中心性 • 感情分析 • ワード数 • Time_zone • 曜日 • 発話者の情報量 • 過去の発言における自分の発言の割合 活性化の指標 特徴量設計 データ 特徴量 指標設計 機械学習(分類) 離散化 目的変数
- 23. 目的変数と相関が高い特徴量がない。。。 線形モデルじゃきつそう Kernel-SVMを試すも、予測精度67%ほどしか出ず。。。 流行りのlight-GBMを使ってみることに モデルをどうするか？
- 27. Class1: 4062 Class2: 1691 Class3: 136 この閾値適当すぎでは？
- 29. 評価指標 精度 Accuracy 0.831069 Precision 0.831 Recall 0.831 F1 0.831 特徴量重要度が低い betweenとmention_userは消した