音声とポインティングジェスチャを利用した指示物同定

• Item type: SIG Technical Reports(1)
• 公開日: 1997-11-14
• タイトル: 音声とポインティングジェスチャを利用した指示物同定
• タイトル / 言語: en
• タイトル: Referent Identification by Using a Speech and Deictic Gesture
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 山梨大学工学部電子情報工学科
• 著者所属: 山梨大学工学部電子情報工学科
• 著者所属: 山梨大学工学部電子情報工学科
• 著者所属(英): en
• 著者所属(英): Dept. of Electrical Engineering and Computer Science, Yamanashi University
• 著者所属(英): en
• 著者所属(英): Dept. of Electrical Engineering and Computer Science, Yamanashi University
• 著者所属(英): en
• 著者所属(英): Dept. of Electrical Engineering and Computer Science, Yamanashi University
• 著者名: 山田, 寛康; 福本, 文代; 今宮, 淳美
• 著者名(英): Hiroyasu, Yamada; Fumiyo, Fukumoto; Atsumi, Imamiya
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本稿では，音声とマウスを入力手段とするマルチモーダルインタフェースで，ディスプレイ上の図形を指示したとき，その指示物を同定する手法を提案する．本手法は時間同期性を用いた指示物候補の生成(generation of candidates)と，過去の対話情報を利用した候補中からの指示物伺定(identification)の2つの手続きにより実現される．Generation of candidatesでは，すべての発話をsegmentと呼ぶ単位に分割し，segmentと同期した時間内にマウスによって指示した図形を指示物候補として生成する．Identificationでは，過去に指示物同定で得られた結果を利用することで候補中から指示物を同定する．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: In this paper, we propose a method to deal with the reference of deictic expression to visual objects on a terminal screen. Users can point to visual objects on a terminal screen by using both an indirect pointing device, a mouse and natural language. The procedure for determining the referent of the deictic expression, i.e. determining the visual objects being pointed to, consists of two procedures: Generation-of-Candidates and Identification. In Generation-of-Candidates every utterance is divided into a segment using linguistic constraints called verb phrase rank. Then, candidates of visual objects are generated from trace by a mouse, together with a segment. This segment includes Japanese deictic expressions such as 'this (これ)' or 'that(あれ)'. In the second procedure, Identification, a deictic expression is identified with visual objects using pairs of deictic expressions and the visual object candidates, which have already been obtained. The results of the pre1imimnarily experiment show the effectiveness of the method.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AA1221543X
• 書誌情報: 情報処理学会研究報告ヒューマンコンピュータインタラクション（HCI）; 巻 1997, 号 107(1997-HI-075), p. 45-50, 発行日 1997-11-14
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会