More Related Content
More from Shinnosuke Takamichi (20)
manga2voice: マンガ画像からの音声合成に向けた音声分析
- 12. /15
コミック・演者・収録環境の選定
コミック:ラブひな第1巻 [Akamatsu99]
– Manga109 (日本漫画の学術研究のためのコーパス) [Matsui17]に収録
– 当該コミックの演技参考資料が豊富
演者:声による演技経験を持つ男性1名・女性2名
– 主要キャラクタは,男性1名・女性5名
– 男性演者は男性キャラ1名,女性演者は女性キャラ2名or3名を担当
収録環境:プロ音響監督によるスタジオ収録
– 音響監督による嗜好が混在しないよう,音響監督は1名に固定
12
- 13. /15
音声収録
基本進行
– 見開きページごとに掛け合い形式で実施
– 記号のみから成るセリフも,掛け合いとして自然なら収録
例外
– 音響シーン・イベントは未収録
– 掛け合いが物理的に困難な場合には,別途収録
• 例:1人の演者の複数のキャラクタが同時に話す場合
キャラ感情音声の別途収録
– 各キャラクタについてJTESコーパス [Takeishi16] の4感情(normal,
happy, joy, sad)各50文を収録
– 各感情について代表的な感情表現を決め,50文をその感情で演技
13
- 14. /15
アノテーションと
作成したデータベース
14
<text xmin="1560" ymin="539" …>
<voice
voiceid="000259"
normedtext="ようこそっ"
character="00035faa"
start="707.112381"
end="708.03362“/>
<voice …/>
ようこそっ
</text>
LoveHina@Ken Akamatsu
音声ID
正規化テキスト
キャラID
発話開始時刻
発話終了時刻
他音声の情報
当該音声の情報
テキスト
画像内テキスト
画像 (Manga109)
キャラ別音声
画像・音声のメタ情報