SlideShare a Scribd company logo
実は日常の中にはクロスモーダルが存在しています。
くらしの中に存在するクロスモーダル事例
1/5
何味のかき氷が好きですか?
実は全部同じ味です。
着色と香料で味の違いを
表現しています。
かき氷のシロップ
風鈴音を聞だけで涼しく感じます。
音で風が吹いたと錯覚を起こし、
涼しく感じてしまうのです。
風鈴音
どちらがブーバでどちらがキキですか?
全世界98%の人が左がブーバ、
右がキキと回答。音と図形の関係にも
クロスモーダルが絡んでいます。
ブーバキキ
利便性
機能
価値
感性
価値
安全性
耐久性
信頼性
環境
性能
関係性
共感
達成
印象
創造性
技
術
の
強
み
+
α
の
強
み
クロスモーダル研究の提供価値
情動デザイン
クロスモーダル研究とは
クロスモーダルの手法を学ぶことによって情動のデザインに活用し、社会に新しい体験や
くらし文化の創出を目指して取組むパナソニックのデザイン本部の研究です。
●クロスモーダル研究アドバイザー
鳴海 拓志先生
東京大学大学院
情報理工学系研究科 知能機械
情報学専攻
葛岡・雨宮・鳴海研究室所属
青山 一真先生
属東京大学バーチャルリアリティ
教育研究センター
東京大学大学院情報理工学系
研究科助教
クロスモーダルとは
私たちの感覚はそれぞれ独立したものではなく、
互いに交わり、影響を与えあって様々な感覚を感じ取っています。
このように感覚が相互に作用しあう現象がクロスモーダル現象と呼ばれています。
クロスモーダルの概要・仕組み
聴覚
触覚
視覚
嗅覚 味覚
耳
皮膚
目
鼻 舌
固い
重い
熱い
:
感覚Sensation 知 覚 Perception 認知Cognition
外界から受け取る刺激 基礎知覚/統合知覚 基礎知覚/統合知覚
情動
たのしい
やすらぎ
なつかしみ
かなしみ
:
能力
Human
Augmentation
行動
Human
Behavior
食べ過ぎ防止
生活改善
好き嫌いの克服
効率的な運動
生産性の向上
集中力強化
視認性の向上
位置感覚変化
黒・四角の物体 黒色の段ボール 黒は重い 重そうだ 例:持ち運びの回数20回
白・四角の物体 白色の段ボール 白は軽い 軽そうだ 例:持ち運びの回数24回
※余計な筋肉を使用→思ったより軽い
※適切な筋肉を使用→思ったより重い
例
:
例として、引越し業者が意図的に白色の段ボールを使っていることには、クロスモーダルが活用されている。
白色は軽そうだという人の認知から、適切な筋肉量を使って持ち運びができ、黒色に比べて約20%持ち運びの回数に差が発生する。
約20%増
2/5
クロスモーダルを活用して五感への刺激を操作することによって
人のココロを動かし、行動変容や能力向上につなげることが可能
範囲
クロスモーダルを引き起こす範囲
設計
クロスモーダルを引き起こす感覚設計
過程
クロスモーダルを引き起こす2つの過程
①人の感覚の特性、
または②人の過去の経験を利用
あいまいな情報を
ほかの感覚によって補完
身体近傍空間(手の届く範囲)では
クロスモーダル現象が発生しやすい
クロスモーダルの特徴
3/5
①各感覚の特性に応じてある感覚が、他の感覚情報を補完
②よく起こる感覚の組み合わせを一旦脳が覚えると似た事象が
発生した時に過去の経験を引出し,違う感覚の情報を補完
クロスモーダル現象はどの組合せの感覚間でも起きる。
上書きしたい感覚を曖昧にし、他の感覚に対して
よりはっきりした情報を出してあげることで設計することが可能
身体の周りの手が届く範囲では、2つ以上の感覚が
連合して起こるため、現象を引起こしやすい
例)・腹話術効果では曖昧な音源定位と
人形の口を比較した場合、
視覚情報に引っ張られることで、
音は人形から出ているに違いないと
感じてしまう
例) ・虫がとまる=見て、触覚が来る
自分の身体のまわりでは
こんなことが起こるのか!
という現象を脳が覚えている
・蚊が飛んでいると、その音だけで
触られたように感じる
→音によって触られる感覚が
想起されてしまう
例)・視覚は空間的な解像度が高い
・聴覚はタイミングの解像度が高い
例)・風が吹いて風鈴が鳴り、涼しいという
過去の経験から、 風鈴の音を聞くだけ
で涼しいと感じる
クロスモーダルを引き起こすには
クロスモーダルを引き起こす上で知っておきたい人の感覚
人間の12の感覚
平衡
感覚
触覚
生命
感覚
運動
感覚
1
2
3
4 嗅覚
味覚
5
6
視覚
熱
感覚
7
8
聴覚
自我
感覚
言語
感覚
思考
感覚
9
10
11
12
人間の感覚は12ある
感覚は人間の体や心と密接に結びついている。すべての感覚が相互に
作用しあい、共に働きあい、支えあっている。
感覚論を提唱したシュタイナーは、
皆が知っている五感の他に、熱感覚、運動感覚、平衡感覚、生命感覚、
言語感覚、思考感覚、自我感覚の12個の感覚があると述べている。
この並びにしているのは対になる感覚同士に関係性があり、
12の感覚は3つに分類される。下位感覚、中位感覚、上位感覚と
それぞれ成熟する年齢が異なる。
4/5
Electric Spoon Electric Guinomi Soda Straw
クロスモーダルプロトタイプ紹介
Handle
Electric Taste
電気味覚によって味蕾に五味の
強弱を与えることが可能
持ち手と口内への接着が電気味覚
のonoffのスイッチの役割となる
Sake Aroma
日本酒の香料を空気微粒子に
変換しながら、香りをほどよく拡散。
Electric Taste
手で持って飲み口に口をつけることで、
電気刺激により塩味が感じられる。
Vibration
吸水に合わせて炭酸音が発生
高血圧の方の塩味の少ない食事でも
美味しく塩味を感じ食事ができるカトラリー
塩味を感じながら日本酒を楽しむ
お酒の苦手な方でも
ノンアル日本酒を楽しむことができる
吸引のタイミングで炭酸音を発生させることで
強い触感を感じることができる
5/5
クロスモーダル現象を体感・実証するためにプロトタイプを作成
触覚刺激による味覚の変化 聴覚刺激による食欲増幅
クロスモーダル研究 x D+IO

More Related Content

Featured

2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot
Marius Sescu
 
Everything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPTEverything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPT
Expeed Software
 
Product Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage EngineeringsProduct Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage Engineerings
Pixeldarts
 
How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental HealthHow Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
ThinkNow
 
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdfAI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
marketingartwork
 
Skeleton Culture Code
Skeleton Culture CodeSkeleton Culture Code
Skeleton Culture Code
Skeleton Technologies
 
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
Neil Kimberley
 
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
contently
 
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
Albert Qian
 
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie InsightsSocial Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie Insights
Kurio // The Social Media Age(ncy)
 
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
Search Engine Journal
 
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
SpeakerHub
 
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
Clark Boyd
 
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next
Tessa Mero
 
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Lily Ray
 
How to have difficult conversations
How to have difficult conversations How to have difficult conversations
How to have difficult conversations
Rajiv Jayarajah, MAppComm, ACC
 
Introduction to Data Science
Introduction to Data ScienceIntroduction to Data Science
Introduction to Data Science
Christy Abraham Joy
 
Time Management & Productivity - Best Practices
Time Management & Productivity -  Best PracticesTime Management & Productivity -  Best Practices
Time Management & Productivity - Best Practices
Vit Horky
 
The six step guide to practical project management
The six step guide to practical project managementThe six step guide to practical project management
The six step guide to practical project management
MindGenius
 
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
RachelPearson36
 

Featured (20)

2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot
 
Everything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPTEverything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPT
 
Product Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage EngineeringsProduct Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage Engineerings
 
How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental HealthHow Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
 
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdfAI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
 
Skeleton Culture Code
Skeleton Culture CodeSkeleton Culture Code
Skeleton Culture Code
 
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
 
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
 
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
 
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie InsightsSocial Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie Insights
 
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
 
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
 
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
 
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next
 
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
 
How to have difficult conversations
How to have difficult conversations How to have difficult conversations
How to have difficult conversations
 
Introduction to Data Science
Introduction to Data ScienceIntroduction to Data Science
Introduction to Data Science
 
Time Management & Productivity - Best Practices
Time Management & Productivity -  Best PracticesTime Management & Productivity -  Best Practices
Time Management & Productivity - Best Practices
 
The six step guide to practical project management
The six step guide to practical project managementThe six step guide to practical project management
The six step guide to practical project management
 
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
 

クロスモーダル研究 x D+IO