KiiteCafe: 同じ楽曲を同じ瞬間に聴きながら楽曲に対する気持ちを伝え合う音楽発掘サービス（インタラクション2022・登壇発表）

1. Kiite Cafe: 同じ楽曲を同じ瞬間に聴きながら楽曲に対する気持ちを伝え合う音楽発掘サービス産業技術総合研究所佃洸摂石田啓介濱崎雅弘後藤真孝第26回一般社団法人情報処理学会シンポジウムインタラクション2022 (2022. 3. 1)

2. 背景 2 一人で音楽を聴く場合とは異なり他の人と一緒に音楽を聴くことで得られる価値他者との社会的繋がり自分の好きな楽曲を聴いてもらえるライブコンサートへの参加 [Sedgman, 2015][Brown+, 2017] 他者に会って好きな楽曲を紹介 [Bassoli+, 2004][Hakansson+, 2007]

3. 課題 3 様々な社会情勢地理的な遠さテレビ・ラジオ・Web配信 SNS すごくいい曲です！ 86 本当に聴いて好きになってくれてるのかな…？他の人はどんな反応をしているんだろう…？音楽を楽しんでいる様子が互いに見えるように同じ場所に集まる必要あり紹介した楽曲に反応した人が確かにその楽曲を聴いたと分かる必要ありなどが原因で他の人と一緒に同じ楽曲を聴けずそうした価値を享受できないという状況は珍しくない他の人と一緒に音楽を聴くことの代替手段にはなりづらい

4. 提案：https://cafe.kiite.jp 4 物理的には異なる場所にいる人々がオンラインで集まって同じ楽曲を同じ瞬間に楽しめる音楽発掘カフェ「Kiite Cafe」を提案  2019年8月30日にKiiteを一般公開（https://kiite.jp）  36万曲以上の歌声合成楽曲から好みの楽曲に出会える  プレイリスト作成・お気に入り登録・楽曲推薦音楽発掘サービス「Kiite」の新機能として提供

5. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３

6. Kiite Cafeが持つアーキテクチャ

7. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化癒やされる

8. アーキテクチャ１：楽曲に対する「好き」という反応を可視化 8  楽曲に対する「好き」という気持ちを伝えるために４種類の反応を可視化  ユーザ同士が同じ楽曲を聴きながらリアルタイムにコミュニケーションを取れる癒やされるお気に入り登録コメントエフェクト付きハート最大90秒間表示回転再生中の楽曲が終わるまで移動任意の位置に移動可能ユーザが創意工夫しながら各機能を使えるようにコメント・回転・移動をどのように使うかはKiite Cafe側では意図的にアナウンスせず

9. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる

10. アーキテクチャ２：ユーザの好みの楽曲から再生楽曲を選択 10  Kiite Cafeに滞在しているいずれかのユーザの好みの楽曲が再生される  再生中の楽曲が終わるまでに次の再生楽曲の選択処理を自動的に実行  第一段階：Kiite Cafeに滞在中のユーザを選択  第二段階：ユーザの「お気に入り＋プレイリスト」から再生楽曲を選択第一段階ユーザ選択 … Kiite Cafe 第二段階楽曲選択お気に入り＋プレイリスト再生  各段階で選択されるユーザと楽曲にバイアスが生じないアルゴリズムを使用  Kiite Cafeで再生される楽曲の多様性の確保  自分の好みの楽曲が選択されないことへの不満の排除

11. アーキテクチャがもたらすユーザ体験とその効果

12. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け

13. 体験・効果１：「好き」を伝える動機付け 13 「自分がこの楽曲を好きだ」という思いを可視化して共有できることでa 再生中の楽曲に対して「好き」を明示的に伝えるよう動機付けられる体験滞在ユーザ数が多くなるほど「好き」を共有してより強い繋がりを感じられるようになりより積極的に「好き」を伝えるようになる効果私がこの曲を好きなことをみんなに伝えたい！癒やされる再生中

14. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け多様な楽曲を好きになる Pop Rock Jazz

15. 体験・効果２：多様な楽曲を好きになる 15 様々なユーザの好みの楽曲から再生する楽曲が選択されるため日頃の好みとは異なる多様な楽曲を聴く機会が得られる体験ユーザが一人で聴いて好きになる楽曲よりも Kiite Cafeで聴いて好きになる楽曲の方が多様性が高くなる効果普段はPopが好きでよく聴くけど Kiite CafeでRockやJazzも聴いて好きになれた！ Pop かっこいい！ Rock Jazz

16. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け多様な楽曲を好きになる Pop Rock Jazz キューレータとして貢献

17. 体験・効果３：キュレータとしての貢献 17 自分の好きな楽曲が選ばれることでどのユーザでもキュレータとして貢献でき自分の好きな楽曲を他のユーザが好きになる瞬間を見られる体験キュレータとしての貢献が大きくなるほど自分の好みの楽曲が再度選ばれることが楽しみになりKiite Cafeの滞在時間が長くなる効果自分の好きな曲をたくさんのユーザが好きになってくれた！ 𝑡𝑡 次に自分の好みの楽曲が選ばれる自分の好みの楽曲が選ばれた

18. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け多様な楽曲を好きになる Pop Rock Jazz キューレータとして貢献

19. ユーザ体験がもたらす効果の検証

20. データセット 20  Kiite Cafe正式一般公開  ユーザ利用ログ対象期間  ユニークユーザ数  各機能の使用回数 2020年 8月 5日 2020年 8月 5日～2021年 8月 4日 2,399名癒やされる 49,425回 14,094回 109,054回 74,304回

21. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け多様な楽曲を好きになる Pop Rock Jazz キューレータとして貢献反応率ユーザ数ユーザ数増 → 反応率増

22. 実験１：RQ・設定 22 Kiite Cafeに滞在しているユーザ数の増加に伴いユーザはより頻繁に楽曲への反応を発信するようになるか滞在ユーザ数が多くなるほど「好き」を伝える意義が大きくなりより積極的に「好き」を伝えるようになる効果 R Q 反応：回転楽曲再生時のユーザの何%が回転？ユーザ数平均反応率 1～5名 8.47% 6～10名 16.1% 11～15名 17.6% 16名以上 20.6% ユーザ数 1-5 6-10 11-15 16- 平均反応率

23. 実験１：結果 23 平均反応率（正規化済み）いずれの反応でもKiite Cafeに滞在しているユーザ数の増加に伴い反応を発信するユーザの割合は単調に増加回答

24. コメント・回転・移動の使われ方 24  ３つのいずれの機能も楽曲へのポジティブな感情を表現＝「好き」を伝える  ユーザ数が増えるにつれてライブコンサートに参加しているかのように振る舞う  ユーザによって生み出されてユーザの間に自然に広がりKiite Cafeの文化となったコメント回転移動・盛り上がりや興奮の感情を回転で表現・「この曲は回れる」という新たな表現が誕生・楽曲開始15秒以内の投稿コメントが多い傾向・好きな楽曲が再生されたことに対する喜びを表現うおおおおキター！・ダンスを踊るようにアイコンを移動し続ける・ライブコンサートでの「最前」への移動を再現

25. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け多様な楽曲を好きになる Pop Rock Jazz キューレータとして貢献ユーザ数ユーザ数増 → 反応率増 Kiite Cafe利用後 → 多様性増利用前利用後楽曲多様性小大反応率

26. 実験２：概要 26 Kiite Cafeの利用前に比べて利用後の方がユーザはより多様な楽曲に対して反応を発信するかユーザが一人で聴いて好きになる楽曲よりも Kiite Cafeで聴いて好きになる楽曲の方が多様性が高くなる効果 R Q 利用後の方が反応を示した楽曲の多様性は高くユーザの日頃の音楽的好みとは異なる楽曲を好きになる場として機能回答反応利用前多様性利用後多様性 P値お気に入り登録 10.509 10.994 1.14 × 10−8 コメント 10.454 10.954 2.05 × 10−3 回転 10.519 10.895 1.16 × 10−6 移動 10.454 11.059 2.75 × 10−9 楽曲の多様性＝音響特徴量間のユークリッド距離の平均値

27. アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け多様な楽曲を好きになる Pop Rock Jazz キューレータとして貢献ユーザ数ユーザ数増 → 反応率増 Kiite Cafe利用後 → 多様性増利用前利用後楽曲多様性小大貢献度増 → 滞在時間増キュレータ貢献度滞在時間反応率

28. 実験３：概要 28 ユーザの好みの楽曲が再生された際に反応を発信するユーザの割合が高くなるほどそのユーザのKiite Cafeの滞在時間は長くなるかキュレータとしての貢献が大きくなるほど自分の好みの楽曲が再度選ばれることが楽しみになりKiite Cafeの滞在時間が長くなる効果 R Q お気に入り登録・回転・移動では反応を発信したユーザの割合が増えると滞在時間も増加（割合だけでなくユーザの絶対数も影響）回答お気に入り登録コメント回転移動横軸：反応を発信したユーザの割合縦軸：正規化された滞在時間

29. 楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされる「好き」を伝える動機付け多様な楽曲を好きになるキューレータとして貢献アーキテクチャ１アーキテクチャ２体験・効果１体験・効果２体験・効果３実験１実験２実験３ Pop Rock Jazz ユーザ数ユーザ数増 → 反応率増貢献度増 → 滞在時間増 Kiite Cafe利用後 → 多様性増キュレータ貢献度滞在時間利用前利用後楽曲多様性小大反応率

30. 再利用可能な知見

31. 知見１ 31 アーキテクチャ１アーキテクチャ２楽曲に対する「好き」という反応を可視化ユーザの好みの楽曲から再生楽曲を選択癒やされるユーザが同じ楽曲を同じ瞬間に聴くためのWebサービスやアプリケーションを研究者や企業が開発するうえで有用な指針となる  実験結果：提案アーキテクチャがユーザの音楽聴取行動の活性化に有効  いずれのアーキテクチャもKiite Cafe以外にも適用できる汎用性がある

32. 知見２ 32 オンラインイベントにおけるKiite Cafeの活用（3タイプの発案者）  人々が物理的に集まるのが困難な状況でオンラインイベントの新しいあり方を提示  地理的な遠さが原因でイベント参加しづらい人などにとっても有意義な開催方法 VOCALOID関連のイベントの主催者 Kiite Cafeユーザ Kiite Cafe運営  重音テト記念日企画  GUMI記念日企画など http://tsunagarumirai.com/2020/  ツナガルミライ  タメサレルミライなど  初音ミク誕生日企画  MEIKO誕生日企画など

33. 知見２ 33 オンラインイベントにおけるKiite Cafeの活用（3タイプの発案者）

34. 知見２ 34 オンラインイベントにおけるKiite Cafeの活用（3タイプの発案者）  人々が物理的に集まるのが困難な状況でオンラインイベントの新しいあり方を提示  地理的な遠さが原因でイベント参加しづらい人などにとっても有意義な開催方法 VOCALOID関連のイベントの主催者 Kiite Cafe運営 http://tsunagarumirai.com/2020/  ツナガルミライ  タメサレルミライなど Kiite Cafeユーザ  重音テト記念日企画  GUMI記念日企画など  初音ミク誕生日企画  MEIKO誕生日企画など

35. 知見３ 35 ユーザが楽曲を好きになる瞬間を可視化することの価値を明らかにした SNS Kiite Cafe すごくいい曲です！ 86 本当に聴いて好きになってくれてるのかな…？最高！確かに聴いたうえで好きになってくれてる！楽曲を好きになったユーザが確かにその楽曲を聴いている点もその価値の実現に本質的な役割を果たしている

36. まとめ Kosetsu Tsukuda, Keisuke Ishida, Masahiro Hamasaki, Masataka Goto Kiite Cafe: A Web Service for Getting Together Virtually to Listen to Music ISMIR 2021

37. 貢献・今後の研究 37 ２アーキテクチャを備えたKiite Cafeを開発・公開同じ楽曲を同じ瞬間に楽しめる「好き」が伝わる音楽発掘カフェ１一緒に同一楽曲を聴くための２つのアーキテクチャ提案楽曲に対する「好き」という反応を可視化・ユーザの好みの楽曲から再生楽曲を選択３Kiite Cafeのもたらす体験・効果を定量的に検証「好き」を伝える動機付け・多様な楽曲を好きになる・キューレータとして貢献今後の研究  より長期のユーザ行動ログを用いた分析・検証  複数ユーザを対象とした推薦手法の研究開発 https://cafe.kiite.jp

38. 謝辞 38 Kiiteおよびニコニコ動画のユーザ、VOCALOID楽曲のクリエータ、 VOCALOID楽曲の日毎・週毎の人気度ランキングの作成者、そして VOCALOID文化とそれに関連した文化を築き、支援し、楽しんでいる全ての人々に感謝します。また、Kiite を共同開発したクリプトン・フューチャー・メディア株式会社、我々の研究活動を初期は暗黙的に（後に明示的に）応援してきたニコニコ動画に感謝します。佃洸摂, 石田啓介, 濱崎雅弘, 後藤真孝: “Kiite Cafe: 同じ楽曲を同じ瞬間に聴きながら楽曲に対する気持ちを伝え合う音楽発掘サービス”, 情報処理学会インタラクション2022論文集, pp.48-57, February 2022. 論文PDF http://ktsukuda.me/wp-content/uploads/Interaction2022_tsukuda.pdf

KiiteCafe: 同じ楽曲を同じ瞬間に聴きながら楽曲に対する気持ちを伝え合う音楽発掘サービス（インタラクション2022・登壇発表）

KiiteCafe: 同じ楽曲を同じ瞬間に聴きながら楽曲に対する気持ちを伝え合う音楽発掘サービス（インタラクション2022・登壇発表）

Recommended

More Related Content

More from Kosetsu Tsukuda

More from Kosetsu Tsukuda(17)

KiiteCafe: 同じ楽曲を同じ瞬間に聴きながら楽曲に対する気持ちを伝え合う音楽発掘サービス（インタラクション2022・登壇発表）