ダンスと場景を連動させた映像生成の提案とダンスONEプロジェクトへの実践

• Item type: Trans(1)
• 公開日: 2023-01-15
• タイトル: ダンスと場景を連動させた映像生成の提案とダンスONEプロジェクトへの実践
• タイトル / 言語: en
• タイトル: A Proposal of Dance and Scenery Linked Video Generation and Application to Dance One Project
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: [一般投稿論文] 教育、コンピュータビジョン、ダンスパフォーマンス、動画編集
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_6501
• 資源タイプ: journal article
• 著者所属: 筑波大学大学院 理工情報生命学術院 システム情報工学研究群 知能機能システム学位プログラム
• 著者所属: 筑波大学 計算科学研究センター
• 著者所属: 筑波大学 計算科学研究センター
• 著者所属: 筑波大学 計算科学研究センター
• 著者所属(英): en
• 著者所属(英): University of Tsukuba
• 著者所属(英): en
• 著者所属(英): Center for Computational Sciences, University of Tsukuba
• 著者所属(英): en
• 著者所属(英): Center for Computational Sciences, University of Tsukuba
• 著者所属(英): en
• 著者所属(英): Center for Computational Sciences, University of Tsukuba
• 著者名: 吉川, 優依; 宍戸, 英彦; 亀田, 能成; 北原, 格
• 著者名(英): Yui, Yoshikawa; Hidehiko, Shishido; Yoshinari, Kameda; Itaru, Kitahara
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 近年，新型コロナウイルス感染症（COVID-19）の影響によりダンサーがパフォーマンスを披露する場はステージからメディアへと変化しており，高校生のダンス部を応援するために，2020年よりテレビ局の企画として「ダンスONEプロジェクト」が実施されている．ダンスONEプロジェクトに参加する高校生は，撮影および動画制作に不慣れであり，そのサポートや新たな教育実践法が不可欠である．我々は，ITの活用体験を向上させることを目的として，コンピュータビジョンの最先端技術を活用した映像生成手法をサポートした．研究協力校ダンス部の高校生とコンセプト作りや撮影作業などに取り組み，音源のビート検出手法とオブジェクト検出アルゴリズムを活用したダンスと場景を連動させた「高揚感のある」映像生成法を提案した．信号機の色を映像処理によって拡張し，場景とダンスが一体化しているような効果を狙い，違和感のない映像の生成方法を開発した．動画編集の難しさを解決するためにカット割りとズーム設定の自動処理を提案した．また，ダンスONEプロジェクトを通して，高校探求学習科目「総合的な探究の時間」と同様の取り組みが，部活動にも展開できることを示した．「総合的な探求の時間」に向けて，高校生に対しソフトウェアを用いた動画編集方法とコンピュータビジョン技術を活用した映像生成手法について講義した．ITの活用体験の向上に関する意向調査によって，ダンスONEプロジェクトと本研究活動を通して参加者のITの活用体験が向上したことを確認した．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: In recent years, due to the effects of COVID-19, the venues for dancers to perform have changed from the stage to the media. In order to support high school dancers, “Dance ONE Project” has been implemented as one of the TV stations' projects since 2020. Our goal was to improve the IT utilization experience of the high school students participating in the Dance ONE Project by supporting the filming and video production. In this paper, we propose a video generation method that utilizes the latest technology in computer vision. We propose a video generation method that links dance and scenery by using a sound source beat detection method and an object detection algorithm. The color of the traffic lights is extended by video processing to create the effect that the scene and the dance are unified, and the video is generated without any sense of discomfort. Through the Dance ONE Project, we propose a new educational model by making the same approach as the inquiry study subject “Time for Comprehensive Inquiry” a part of club activities. In order to solve the difficulty of video editing, we propose an automatic process for detecting the cut and zoom settings. In the survey on the improvement of IT utilization experience, it was confirmed that the participants' IT utilization experience was improved through the Dance ONE Project and this research activity.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AA12894091
• 書誌情報: 情報処理学会論文誌デジタルプラクティス（TDP）; 巻 4, 号 1, p. 10-20, 発行日 2023-01-15
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2435-6484
• 出版者 / 言語: ja
• 出版者: 情報処理学会