講演情報

[A-14-16]感性・意味情報の統合利用による画像の印象を反映した音楽推薦

〇金 成洙1、荒川 薫1 (1. 明大)

キーワード:

音楽推薦、感性情報、意味情報、深層学習、画像解析

画像に適合する音楽を推薦するためには,画像と音楽が与える印象を対応付ける必要がある.感情価・覚醒度(Valence-Arousal: VA)を用いることで両者を同じ感情空間上で比較し音楽を推薦する方法が提案されているが,VAのみでは画像内容や音楽の意味的な雰囲気を十分に扱うことは難しい.そこで本稿では,画像及び音楽の意味情報をCLIP並びにCLAPにより抽出し,それを感性情報VAと統合して,推薦音楽を選定する方式を提案する.実験により,本方式の有効性を示す.