WEKO3
アイテム
クロスモーダル学習による時間情報を考慮した楽器音からの演奏動画生成
https://ipsj.ixsq.nii.ac.jp/records/229831
https://ipsj.ixsq.nii.ac.jp/records/229831bb1e1105-6676-4646-8e8b-fb9e111b775e
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
|
|
Copyright (c) 2023 by the Information Processing Society of Japan
|
| Item type | National Convention(1) | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2023-02-16 | |||||||||||
| タイトル | ||||||||||||
| タイトル | クロスモーダル学習による時間情報を考慮した楽器音からの演奏動画生成 | |||||||||||
| 言語 | ||||||||||||
| 言語 | jpn | |||||||||||
| キーワード | ||||||||||||
| 主題Scheme | Other | |||||||||||
| 主題 | 人工知能と認知科学 | |||||||||||
| 資源タイプ | ||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||||
| 資源タイプ | conference paper | |||||||||||
| 著者所属 | ||||||||||||
| 大阪公立大 | ||||||||||||
| 著者所属 | ||||||||||||
| 大阪公立大 | ||||||||||||
| 著者所属 | ||||||||||||
| 大阪公立大 | ||||||||||||
| 著者名 |
中川, 智愛
× 中川, 智愛
× 井上, 勝文
× 吉岡, 理文
|
|||||||||||
| 論文抄録 | ||||||||||||
| 内容記述タイプ | Other | |||||||||||
| 内容記述 | 楽器音からその楽器を演奏している人物画像を生成するタスクにおいて,従来研究では時間情報を含む音楽情報より1枚の画像を生成するに留まっている.これに対し本研究では,画像にも時間情報を持たせ,音楽情報から演奏動画を生成するタスクに拡張する.具体的には,単純に短時間音楽情報から動画フレームを順次生成するのではなく,入力する音楽情報に時間情報ラベルを埋め込みつつ生成画像の前後関係を考慮することで,奏者の動作が滑らかに変化するよう動画フレームを生成する手法を提案する.本稿では,13種類の楽器演奏データを用いて生成した演奏動画に対して,従来手法をベースにした動画生成手法と比較した結果について述べる. | |||||||||||
| 書誌レコードID | ||||||||||||
| 収録物識別子タイプ | NCID | |||||||||||
| 収録物識別子 | AN00349328 | |||||||||||
| 書誌情報 |
第85回全国大会講演論文集 巻 2023, 号 1, p. 59-60, 発行日 2023-02-16 |
|||||||||||
| 出版者 | ||||||||||||
| 言語 | ja | |||||||||||
| 出版者 | 情報処理学会 | |||||||||||