@techreport{oai:ipsj.ixsq.nii.ac.jp:00215991,
 author = {工藤, 達郎 and 池田, 雄一郎 and 河野, 央 and 工藤, 孔梨子 and Tatsuro, Kudo and Yuichiro, Ikeda and Hiroshi, Kono and Kuriko, Kudo},
 issue = {11},
 month = {Jan},
 note = {新型コロナウィルス感染症の流行により，対面で表情を用いたコミュニケーションの機会が減少した一方で，ビデオ会議システム（VC）が様々な場面で活用されるようになった．VC のアート・エンタテインメントへの活用は以前からなされていたが，参加者の表情をリアルタイムに加工するインタラクティブ性の高いコンテンツは少なく，開発方法や評価は不明である．そこで本研究では VC における多地点の遠隔参加者の笑顔を検出し，リアルタイムにコンピューターグラフィックスの花火として打ち上げるデジタルコンテンツ「FIRE-net-WORKS」を開発し，参加者からの評価によりその有効性を明らかにした．VC の参加者のカメラ映像を入力として Microsoft Azure Face API を用いて顔領域と笑顔値を取得した．Unity の Particle System と自作シェーダにより一定以上の笑顔値の顔領域を花火として描画し，全参加者へと送信した．2020 年 8 月-10 月に 4 回公演し，623 名が参加，約 550 発の笑顔花火が打ち上がった．アンケート回答者は 172 名（回答率 27.6%，172/623），性別・年齢を問わずほぼ全員が楽しめる（98%）ことや，参加しやすい（98%）こと，また多くの参加者（80%）は一緒に花火を見ているように感じた．ユーザが直接接触することなく同じテーマを体験し，楽しむことができる本作品の有用性を示した．, The coronavirus disease (COVID-19) pandemic reduced the opportunities for face-to-face communication using facial expressions. However, videoconferencing (VC) has been used in a variety of situations. Although VC systems have long been used for art and entertainment, few have been developed as interactive digital contents that process facial expressions in real time, and the development and evaluation methods for such systems are still unknown. In this study, we developed “FIRE-net-WORKS,” a digital content system that detects the smiles of remote participants at multiple locations, and launches them as fireworks, generated by computer graphics in real time. We used the Microsoft Azure Face API to obtain the face areas and smile values from the VC participants' camera images and draw them as “smile fireworks” using Unity. This work was conducted four times between August and October 2020; 623 people participated and approximately 550 smile fireworks were launched. The questionnaire results (response rate: 27.6%, 172/623) showed that almost everyone enjoyed the fireworks (98%) and found it easy to participate (98%). Many participants (80%) felt as if they were watching the fireworks together with others. The results demonstrated the usefulness of this system, which allowed participants to share and enjoy the smile fireworks.},
 title = {「笑顔で人々を繋げる」ビデオ会議システムを用いた遠隔花火インタラクティブコンテンツの開発と評価},
 year = {2022}
}