WEKO3
アイテム
MusicCommentator:音楽に同期したコメントを自動生成するシステム
https://ipsj.ixsq.nii.ac.jp/records/62634
https://ipsj.ixsq.nii.ac.jp/records/6263410de2468-5a02-4022-9a26-dac5c4f2254d
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-MUS09081020.pdf (307.6 kB)
|
Copyright (c) 2009 by the Information Processing Society of Japan
|
|
| オープンアクセス | ||
| Item type | SIG Technical Reports(1) | |||||||
|---|---|---|---|---|---|---|---|---|
| 公開日 | 2009-07-22 | |||||||
| タイトル | ||||||||
| タイトル | MusicCommentator:音楽に同期したコメントを自動生成するシステム | |||||||
| タイトル | ||||||||
| 言語 | en | |||||||
| タイトル | MusicCommentator: A Computational System of Generating Music-Synchronized Comments | |||||||
| 言語 | ||||||||
| 言語 | jpn | |||||||
| キーワード | ||||||||
| 主題Scheme | Other | |||||||
| 主題 | 音楽認知・分析・生成とその応用 | |||||||
| 資源タイプ | ||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||
| 資源タイプ | technical report | |||||||
| 著者所属 | ||||||||
| 産業技術総合研究所(AIST) | ||||||||
| 著者所属 | ||||||||
| 産業技術総合研究所(AIST) | ||||||||
| 著者名 |
吉井, 和佳
後藤, 真孝
× 吉井, 和佳 後藤, 真孝
|
|||||||
| 著者名(英) |
Kazuyoshi, Yoshii
Masataka, Goto
× Kazuyoshi, Yoshii Masataka, Goto
|
|||||||
| 論文抄録 | ||||||||
| 内容記述タイプ | Other | |||||||
| 内容記述 | 本稿では，楽曲のライムライン上の適切な時刻に適切なコメントを自動付与するシステム MusicCommentator について述べる．近年，ユーザが動画全体に対してではなく，動画中のある時刻に対してコメントできるオンライン動画共有サービスが人気を博している．本研究では，音楽演奏の動画に含まれる音楽音響信号を対象とし，音響的特徴量とコメント特徴量との確率的同時生成モデルを提案する．システムはまず，多くの楽曲とそれに付与されたコメントから確率モデルを学習する．その後，別の楽曲が入力として与えられた場合に，どの時刻に対して，どのような単語を用いてどのくらいの長さのコメントを新たに付与できるかを確率モデルを用いて推定する．このとき，言語的制約として単語間の連接を考慮し，文の合成をおこなう．実験の結果，入力楽曲の音響的特徴量だけを用いてコメント生成した時に比べ，すでに付与されたコメントを参考にしてコメント生成を行うと精度が向上することがわかった． | |||||||
| 論文抄録(英) | ||||||||
| 内容記述タイプ | Other | |||||||
| 内容記述 | This paper presents a system called MusicCommentator that suggests suitable comments for appropriate temporal positions in a music clip. Recently, an online video sharing service in which users can provide comments for temporal events occurring in video clips not for entire clips has gained a lot of popularity. We focus on musical audio signals included in video clips of music performances and propose a probabilistic model that jointly generates acoustic features and comment features. The model can be trained by using many music clips and their corresponding comments. Given a new clip as input, the system then determines appropriate temporal positions of comments and estimates their content and length. Finally, comment sentences are generated by taking word concatenations into account as language constraints. Our experimental results showed that comment accuracy was improved when the system used not only acoustic features of an input clip but also users' comments in the clip. | |||||||
| 書誌レコードID | ||||||||
| 収録物識別子タイプ | NCID | |||||||
| 収録物識別子 | AN10438388 | |||||||
| 書誌情報 |
研究報告音楽情報科学（MUS） 巻 2009-MUS-81, 号 20, p. 1-6, 発行日 2009-07-22 |
|||||||
| Notice | ||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||
| 出版者 | ||||||||
| 言語 | ja | |||||||
| 出版者 | 情報処理学会 | |||||||
