マルチモーダルな情報の処理過程 －音韻知覚におよぼす視覚情報の影響－

• Item type: SIG Technical Reports(1)
• 公開日: 1995-07-20
• タイトル: マルチモーダルな情報の処理過程 －音韻知覚におよぼす視覚情報の影響－
• タイトル / 言語: en
• タイトル: Multi - modal information processing : Effects of visual information on phoneme perception.
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: NTT基礎研究所
• 著者所属(英): en
• 著者所属(英): NTT Basic Research Laboratories
• 著者名: 近藤公久
• 著者名(英): Tadahisa, Kondo
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本研究は，視覚情報が音声の知覚に及ぼす影響を心理実験によってとらえることにより，人間の知覚過程におけるマルチモーダルな情報の処理過程の基本を明らかにすること目的としている。音声と同時に提示される文字情報や唇の画像情報がその音声の知覚に影響を及ぼすことが知られている。文字情報はそれ自体音韻情報を持っているが，唇の画像情報は単独では音韻を確定するのに十分な情報を有しない。しかし，唇情報は音韻の弁別素性となりうる調音位置の情報を持っている。さらに，唇の動きは音声の時間的情報も持っている。本稿では，これらの視覚情報がどのように音韻の知覚に影響を及ぼしているのかを，視覚と聴覚の両処理の時間的関係を考慮に入れて検討する。
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: In this study, the nature of intermodal interaction in speech perception is investigated by examining the effects of simaltaneously presented visual information on speech perception. It is known that speech perception is influenced by simaltaneously presented visual information-- letters or visual image of moving lip. A letter contains phonological information, while the image of the moving lip is not enough to determine the phoneme. On the other hand, the image of the lip could provide the information as to the place of articulation and the timing of articulation. In this paper, how such information from visual modality-- letters, and the visual image of lip movement-- affect phoneme perception is investigated. In particular, the time course of the multi-modal information processing is discussed.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10442647
• 書誌情報: 情報処理学会研究報告音声言語情報処理（SLP）; 巻 1995, 号 73(1995-SLP-007), p. 9-16, 発行日 1995-07-20
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会