モーションセンサを用いた指文字学習支援アプリケーションに関する検討

• Item type: SIG Technical Reports(1)
• 公開日: 2016-11-02
• タイトル: モーションセンサを用いた指文字学習支援アプリケーションに関する検討
• タイトル / 言語: en
• タイトル: A Study on Learning Support Application of Fingerspelling using Motion Sensor
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 愛知工業大学情報科学部
• 著者所属: 愛知工業大学情報科学部
• 著者所属: 愛知工業大学情報科学部
• 著者所属(英): en
• 著者所属(英): Faculty of Information Science, Aichi Institute of Technology
• 著者所属(英): en
• 著者所属(英): Faculty of Information Science, Aichi Institute of Technology
• 著者所属(英): en
• 著者所属(英): Faculty of Information Science, Aichi Institute of Technology
• 著者名: 永井, 敦; 竹内, 健人; 森本, 正志
• 著者名(英): Atsushi, Nagai; Kento, Takeuchi; Masashi, Morimoto
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 手話の普及促進は，聴覚障害者との豊かなコミュニケーションのために重要である．指文字は手話単語にない語彙を表現できるとともに，学習に取り組みやすい．しかし，その立体的な形の正しさを自身で確認することが難しく，学習効率が悪い．本研究ではモーションセンサを用い，簡単 ・ 効率的に指文字学習を支援できるアプリケーションの検討および提案を行う．利用者が模倣する指文字は，センサで 3 次元情報を取得し指文字認識を行う．3D CG として模倣形状を提示し正解指文字と比較することで，認識結果とあわせてその正しさを確認できる．また，習熟度を測るテストモードを導入し，ゲーム性を持たせることで繰り返し学習への動機づけを提供する．本稿ではカテゴリ分類に基づく指文字認識手法の性能評価とアプリケーションへのアンケート調査を実施し，提案内容の有効性および課題を明らかにした．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: The promotion of sign language is important for the communication with hearing-impaired people. Fingerspelling can express vocabularies outside sign language words, is easy to learn, but is difficult to grasp the 3D shape correctness. This paper proposes an application with the motion sensor for easy and effective learning of fingerspelling. The 3D shape of users' hand and fingers is measured by the sensor and recognized as a finger alphabet. The shape is displayed and compared with the correct finger alphabet as 3D CGs together with the recognition result. Users can also test their fingerspelling proficiency with gamificational functions and can have the motivation for repetitive learning. The performance experiment of the recognition method based on category classification and questionnaire survey to the application show the effectiveness and reveal challenges of the proposed method and application.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AA11131797
• 書誌情報: 研究報告コンピュータビジョンとイメージメディア（CVIM）; 巻 2016-CVIM-204, 号 5, p. 1-8, 発行日 2016-11-02
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8701
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会