講演情報

[1F-01]ファッションアイテム画像をクエリとする画像生成AIを用いたコーディネート推薦

*大江 優真1、莊司 慶行1 (1. 静岡大学情報学部)
発表者区分:学生
論文種別:ロングペーパー
インタラクティブ発表:あり

キーワード:

情報検索、コーディネート推薦、画像生成AI、Stable Diffusion

本論文では,画像生成AIを用いて,任意のファッションアイテム画像を入力すると,その周辺にそのアイテムと調和するアイテムが複数映り込んだ「コーディネート画像」を生成する手法を提案する.ファッションセンスのよい生成画像を得るために,本研究では,コーディネート投稿SNSから高評価な画像を収集してデータセットを構築し,おしゃれな画像生成モデルとそうでない画像生成モデルをそれぞれ学習した.そして,それぞれの画像生成モデルに,入力画像の周辺を埋めさせる(outpainting)ことで,多数の候補画像を生成した.最後に,画像認識技術を用いて,おしゃれな画像生成モデルの生成画像に特徴的によく現れるアイテムを多く含む順に,生成画像をランク付けした.Stable Diffusionを用いたシステムを実装し,被験者評価を行うことで,提案手法が確かに似合うアイテムを含んだ着用画像を生成でき,なおかつ言葉では表しにくいアイテムにも対応できることが示された.