StyleGAN2の潜在空間マイニングに基づくゲームキャラクタの表情差分付き顔画像の自動生成

• Item type: SIG Technical Reports(1)
• 公開日: 2023-01-16
• タイトル: StyleGAN2の潜在空間マイニングに基づくゲームキャラクタの表情差分付き顔画像の自動生成
• タイトル / 言語: en
• タイトル: Automatic generation of facial images with facial expression differences of game characters based on latent space mining of StyleGAN2
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: コンテンツ生成
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 東京電機大学
• 著者所属: 東京電機大学
• 著者所属(英): en
• 著者所属(英): Tokyo Denki University
• 著者所属(英): en
• 著者所属(英): Tokyo Denki University
• 著者名: 陳, 晴; 阿倍, 博信
• 著者名(英): Qing, Chen; Hironobu, Abe
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 近年，AI を用いて実写顔やアニメ顔画像を自動生成するサービスが増加している．しかし，このようなサービスでは，ゲームの制作に必要な生成画像に対して表情や顔向きの異なる表情差分付きの顔画像を自動生成することができないため，手作業による調整が必要になる．そこで，本研究では，GAN の一方式である StyleGAN2 を用いて生成した顔画像に対して，生成画像の顔向き検出や表情推定に基づく潜在空間のマイニング結果を用いて Style Mixing を組み合わせることにより，表情差分付きの顔画像を自動生成する方式を提案するとともに，その有効性の評価について報告する．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: In recent years, an increasing number of AI-based services have been used to automatically generate live-action and animated face images. However, such services cannot automatically generate face images with facial expression differences for the generated images, which are necessary for game production, and require manual adjustment. In this study, we propose a method for automatic generation of face images with differentiated facial expressions by combining face images generated using StyleGAN2, a one-way GAN method, with style mixing using latent space mining results based on face orientation detection and facial expression estimation in the generated images, and report on the evaluation of the effectiveness of the proposed method.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AA1155524X
• 書誌情報: 研究報告グループウェアとネットワークサービス（GN）; 巻 2023-GN-118, 号 59, p. 1-7, 発行日 2023-01-16
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8744
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会