@techreport{oai:ipsj.ixsq.nii.ac.jp:00053058, author = {武藤淳一 and 藤井, 英史 and 森島, 繁生 and Jun-Ichi, Mutoh and Eishi, Fujii and Shigeo, Morishima}, issue = {26(1997-CVIM-110)}, month = {Mar}, note = {空間周波数成分を用いて顔表情の認識と再合成を実時間で行うシステムを提案する。画像から自動的にトラッキングされた目・口周辺の正方領域について、高速フーリエ変換を実時間で行い空間周波数成分を求める。次にこの帝域パワーから顔器官の形状、ここではFACSに基づくAUのパラメータ値をニューラルネットワークを用いて推定する。実際にこの推定結果から、顔表情を再合成して原画像との印象を比較した結果、学習には用いていない表情に対しても、原画像と類似した印象を再合成することが可能となった。これにより、瞬きや口の開き、目の開き工合などが忠実にトラッキングすることができる。したがって、マーカー等を顔面に添付することなく、非装着、非接着で表情の印象レベルでのモーションキャプチャを実現することが可能となった。, A realtime facial expression recognition and re-synthesis system using spatial frequency is presented. Eye and mouth square region is automatically tracked in a camera captured face image. Spatial frequency is calculated by FFT in each square region. Each band power is given into neural network to decide a specific facial expression described by Action Unit values of FACS. By comparing original facial image with re-synthesized one, impression of both images are very similar. Also our system can generate face which is not included in training sequence and is very robust to the location of square region because we only use the envelope of spatial frequency.}, title = {空間周波数に基づく顔器官の形状認識と再合成}, year = {1998} }