SlideShare a Scribd company logo
1 of 18
Download to read offline
台本中の動作表現に基づく
アニメーション原画検索システムの提案
関西大学
◯藤川雄翔,杉江直哉,畑玲音,松下光範,山西良典
アニメーション制作
おわりに
実験2
実験1
提案システム
はじめに
アニメーションはどのように作る?
1/15
©浅野いにお/小学館/DeDeDeDe Committee
©2024 青山剛昌/名探偵コナン製作委員会
©武田綾乃・宝島社/『響け!』製作委員会
©森野萌・講談社/「花野井くんと恋の病」製作委員会
アニメの中間生成物への注目 2/15
・放送終了後に制作に関わったアニメーターがSNSに公開
・制作会社が原画集として販売,原画展の開催
(発表者が実際に持っている原画集)
(https://x.com/KichikuTeacher/status/1732782447287509284?s=20)
(https://x.com/caoryu_YS/status/1748752269703786595?s=20)
おわりに
実験2
実験1
提案システム
はじめに
アニメーションの制作工程
設計 画作り 映像化 音入れ
・ シナリオ
・ 絵コンテ
・ 設定
・ レイアウト
・ 原画
・ 中割り
・ 背景
・ 撮影
・ 編集
・ セリフ
・ SE
・ BGM
アニメーションの制作はベルトコンベア方式
3/15
おわりに
実験2
実験1
提案システム
はじめに
原画 とは
原画はキャラクタの動きを決める
① ② ③ ④
国立情報学研究所より引用
4/15
おわりに
実験2
実験1
提案システム
はじめに
制作資料の公開 5/15
アニメーターは
動きの手本となる
資料を見ながら
原画を制作
動きの手本となる
資料の需要
おわりに
実験2
実験1
提案システム
はじめに
参考となる原画の探索
大量の原画から類似する原画を探すのは困難
動作を表す言葉(動作表現)で
原画を検索できるシステムの構築
6/15
No
おわりに
実験2
実験1
提案システム
はじめに
リサーチクエスチョン(RQ)と提案手法
画面説明文から抽出した動作表現を
メタデータとして原画に付与
7/15
制作者が企図する動作が描かれた原画は
動作表現から検索可能か?
RQ
提案手法
おわりに
実験2
実験1
提案システム
はじめに
試作したシステム 8/15
おわりに
実験2
実験1
提案システム
はじめに
動作表現の抽出
①画面説明文を形態素解析
②メタデータとなる動作表現を抽出
9/15
・動詞を原型にして抽出
・(名詞or副詞) + サ変動詞「する」の複合語は抽出
<動作表現の抽出条件>
ー「走る」,「食べる」
ー「激怒する」,「ゴソゴソする」
「トリガーデータセット」のうち,原画と台本(画面説明文)を使用
アニメ「リトルウィッチアカデミア」の制作で使用した素材一式のデジタルデータ
おわりに
実験2
実験1
提案システム
はじめに
システムに組み込むべき要素
要件1: 原画を動的に可視化
要件2: 類似した動作表現の検索
要件3: 原画のコンテキストの理解
10/15
→ 検索キーワードとメタデータが一致するとは限らない
→ 静止画である原画では動作のイメージが難しい
→ 原画のみでは描かれている動作のコンテキストが分かりにくい
おわりに
実験2
実験1
提案システム
はじめに
類似動作検索の実験
目的:類似した動作表現を検索対象に含めたことの有効性を確認
内容:①作品中の3つの映像カットを提示
②提案システムを用いて原画カットを探索
11/15
映像カット 原画カット
探索
おわりに
実験2
実験1
提案システム
はじめに
実験結果
類似した動作表現を検索対象に含めることの有効性を示唆
平均16.7%の類似語による一致を確認
12/15
カット 抽出語による一致 類似語による一致 不一致
a
b
c
平均
71.4% 28.6% 0.0%
85.7% 0.0% 14.3%
64.3% 21.4% 14.3%
73.8% 16.7% 9.5%
おわりに
実験2
実験1
提案システム
はじめに
コンテキストの理解度促進の実験
評価者 (5名)
回答者 (7名) 回答者 (7名)
単一資料提示群 複合資料提示群
[2, 1, 3, 3, 2] Avg. 2.5
[5, 4, 4, 3, 5]
「逃げるように走る」
・
・
・
回答
評価
・
・
・
・
・
・
「心配そうに走る」
・
・
・
回答
評価
13/15
× 7
× 7
× 7
× 7
Avg. 4.1
おわりに
実験2
実験1
提案システム
はじめに
実験結果
画面説明文の提示が原画のコンテキストの理解促進に
十分ではない可能性を示唆
p値 = 0.900
(Wilcoxonの符号順位検定による)
2群の平均値に
有意差があるとは言えない
14/15
カット 単一資料提示群 複合資料提示群
d
e
f
3.6 3.7
3.6 4.1
4.2 3.7
おわりに
実験2
実験1
提案システム
はじめに
議論・展望
回答後のインタビュー
15/15
「“PAN”や “なめ”などの専門用語が分からない」
「断片的な文章で読みづらい」
おわりに
実験2
実験1
提案システム
はじめに
議論・展望
回答後のインタビュー
脚本の利用を検討
「“PAN”や “なめ”などの専門用語が分からない」
「断片的な文章で読みづらい」
15/15
脚本(一部)
おわりに
実験2
実験1
提案システム
はじめに
まとめ
背景:コンテキストを考慮して原画を描くことが難しい場合,
他の作品を参考にすることは有効的
問題:大量の原画の中から企図するコンテキストでの動作が描かれた原画を探すには
検索システムの構築と活用が考えられるが,
原画にはメタデータが付与されていないため言語による検索が不可能
提案:台本中の画面説明文から抽出した動作表現を機械的に原画に付与
目的:原画に動作表現を付与することで,動作表現で原画が検索可能なシステムの構築
おわりに
実験2
実験1
提案システム
はじめに

More Related Content

More from Matsushita Laboratory

松下研究室紹介_関西大学高槻キャンパスオープンキャンパス
松下研究室紹介_関西大学高槻キャンパスオープンキャンパス松下研究室紹介_関西大学高槻キャンパスオープンキャンパス
松下研究室紹介_関西大学高槻キャンパスオープンキャンパスMatsushita Laboratory
 
ChinaTakahashi_Exploration cycle finding a better dining experience: a frame...
 ChinaTakahashi_Exploration cyclefinding a better dining experience:a frame... ChinaTakahashi_Exploration cyclefinding a better dining experience:a frame...
ChinaTakahashi_Exploration cycle finding a better dining experience: a frame...Matsushita Laboratory
 
Unification of Terminology for Accurate Communication among Experts --- Basic...
Unification of Terminology for Accurate Communication among Experts --- Basic...Unification of Terminology for Accurate Communication among Experts --- Basic...
Unification of Terminology for Accurate Communication among Experts --- Basic...Matsushita Laboratory
 
JSAI2023_企画セッション(仕掛学)資料
JSAI2023_企画セッション(仕掛学)資料JSAI2023_企画セッション(仕掛学)資料
JSAI2023_企画セッション(仕掛学)資料Matsushita Laboratory
 
触感に関わる共感覚的表現と基本6感情の対応関係の検証
触感に関わる共感覚的表現と基本6感情の対応関係の検証触感に関わる共感覚的表現と基本6感情の対応関係の検証
触感に関わる共感覚的表現と基本6感情の対応関係の検証Matsushita Laboratory
 
レシピの手順に着目した 複数の器特徴の推定
レシピの手順に着目した 複数の器特徴の推定レシピの手順に着目した 複数の器特徴の推定
レシピの手順に着目した 複数の器特徴の推定Matsushita Laboratory
 
複数の質感を複合的に提示可能な触覚提示デバイス
複数の質感を複合的に提示可能な触覚提示デバイス複数の質感を複合的に提示可能な触覚提示デバイス
複数の質感を複合的に提示可能な触覚提示デバイスMatsushita Laboratory
 
効果音と抽象図形の動作の組み合わせによる印象変化に関する研究
効果音と抽象図形の動作の組み合わせによる印象変化に関する研究効果音と抽象図形の動作の組み合わせによる印象変化に関する研究
効果音と抽象図形の動作の組み合わせによる印象変化に関する研究Matsushita Laboratory
 
携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究
携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究
携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究Matsushita Laboratory
 
Kokogatari:実環境を介したリレー小説執筆ツール
Kokogatari:実環境を介したリレー小説執筆ツールKokogatari:実環境を介したリレー小説執筆ツール
Kokogatari:実環境を介したリレー小説執筆ツールMatsushita Laboratory
 
Visualization of the Relationship Between Lectures and Laboratories Using SSNMF
Visualization of the Relationship Between Lectures and Laboratories Using SSNMFVisualization of the Relationship Between Lectures and Laboratories Using SSNMF
Visualization of the Relationship Between Lectures and Laboratories Using SSNMFMatsushita Laboratory
 

More from Matsushita Laboratory (20)

SayakaHayashi_FIT2023
SayakaHayashi_FIT2023SayakaHayashi_FIT2023
SayakaHayashi_FIT2023
 
松下研究室紹介_関西大学高槻キャンパスオープンキャンパス
松下研究室紹介_関西大学高槻キャンパスオープンキャンパス松下研究室紹介_関西大学高槻キャンパスオープンキャンパス
松下研究室紹介_関西大学高槻キャンパスオープンキャンパス
 
ReonHata_JSAI2023
ReonHata_JSAI2023ReonHata_JSAI2023
ReonHata_JSAI2023
 
HarukiShinkawa_FIT2023
HarukiShinkawa_FIT2023HarukiShinkawa_FIT2023
HarukiShinkawa_FIT2023
 
ChinaTakahashi_Exploration cycle finding a better dining experience: a frame...
 ChinaTakahashi_Exploration cyclefinding a better dining experience:a frame... ChinaTakahashi_Exploration cyclefinding a better dining experience:a frame...
ChinaTakahashi_Exploration cycle finding a better dining experience: a frame...
 
TaketoFujikawa_KES2023
TaketoFujikawa_KES2023TaketoFujikawa_KES2023
TaketoFujikawa_KES2023
 
Unification of Terminology for Accurate Communication among Experts --- Basic...
Unification of Terminology for Accurate Communication among Experts --- Basic...Unification of Terminology for Accurate Communication among Experts --- Basic...
Unification of Terminology for Accurate Communication among Experts --- Basic...
 
JSAI2023_企画セッション(仕掛学)資料
JSAI2023_企画セッション(仕掛学)資料JSAI2023_企画セッション(仕掛学)資料
JSAI2023_企画セッション(仕掛学)資料
 
触感に関わる共感覚的表現と基本6感情の対応関係の検証
触感に関わる共感覚的表現と基本6感情の対応関係の検証触感に関わる共感覚的表現と基本6感情の対応関係の検証
触感に関わる共感覚的表現と基本6感情の対応関係の検証
 
レシピの手順に着目した 複数の器特徴の推定
レシピの手順に着目した 複数の器特徴の推定レシピの手順に着目した 複数の器特徴の推定
レシピの手順に着目した 複数の器特徴の推定
 
TaketoFujikawa_comic2023
TaketoFujikawa_comic2023TaketoFujikawa_comic2023
TaketoFujikawa_comic2023
 
複数の質感を複合的に提示可能な触覚提示デバイス
複数の質感を複合的に提示可能な触覚提示デバイス複数の質感を複合的に提示可能な触覚提示デバイス
複数の質感を複合的に提示可能な触覚提示デバイス
 
効果音と抽象図形の動作の組み合わせによる印象変化に関する研究
効果音と抽象図形の動作の組み合わせによる印象変化に関する研究効果音と抽象図形の動作の組み合わせによる印象変化に関する研究
効果音と抽象図形の動作の組み合わせによる印象変化に関する研究
 
RyotaHiguchi_MasterThesis2023
RyotaHiguchi_MasterThesis2023RyotaHiguchi_MasterThesis2023
RyotaHiguchi_MasterThesis2023
 
携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究
携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究
携帯端末を用いたポインティングによる室内空間でのアドホックな情報アクセス手法に関する研究
 
Kokogatari:実環境を介したリレー小説執筆ツール
Kokogatari:実環境を介したリレー小説執筆ツールKokogatari:実環境を介したリレー小説執筆ツール
Kokogatari:実環境を介したリレー小説執筆ツール
 
Visualization of the Relationship Between Lectures and Laboratories Using SSNMF
Visualization of the Relationship Between Lectures and Laboratories Using SSNMFVisualization of the Relationship Between Lectures and Laboratories Using SSNMF
Visualization of the Relationship Between Lectures and Laboratories Using SSNMF
 
iiWAS2022_Miyagawa
iiWAS2022_MiyagawaiiWAS2022_Miyagawa
iiWAS2022_Miyagawa
 
reIDR2022_takahashi.pdf
reIDR2022_takahashi.pdfreIDR2022_takahashi.pdf
reIDR2022_takahashi.pdf
 
RyotaHiguchi_Manpu2022.pdf
RyotaHiguchi_Manpu2022.pdfRyotaHiguchi_Manpu2022.pdf
RyotaHiguchi_Manpu2022.pdf
 

Recently uploaded

Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native IntegrationsUtilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native IntegrationsWSO2
 
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。iPride Co., Ltd.
 
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。iPride Co., Ltd.
 
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptxsn679259
 
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Gamesatsushi061452
 
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...Toru Tamaki
 
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイスLoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイスCRI Japan, Inc.
 
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video UnderstandingToru Tamaki
 
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアルLoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアルCRI Japan, Inc.
 
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半        2024/04/26の勉強会で発表されたものです。新人研修 後半        2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。iPride Co., Ltd.
 

Recently uploaded (10)

Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native IntegrationsUtilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
 
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
 
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
 
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
 
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
 
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
 
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイスLoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
 
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
 
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアルLoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
 
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半        2024/04/26の勉強会で発表されたものです。新人研修 後半        2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
 

TaketoFujikawa_台本中の動作表現に基づくアニメーション原画システムの提案_SIGEC71.pdf