著者

伊東 和廣 望月 要 大西 仁 中村 直人

出版者

一般社団法人電子情報通信学会

雑誌

電子情報通信学会技術研究報告. CQ, コミュニケーションクオリティ (ISSN:09135685)

巻号頁・発行日

vol.109, no.191, pp.49-52, 2009-09-03

参考文献数

5

被引用文献数

6

---

人間は音声言語を使ってコミュニケーションする場合でも,相手の表情から様々な情報を読み取り,それによって音声情報を補うことでコミュニケーションを円滑にしている.特に音声の補完を行う場合には,話者の口唇の動きから聴覚だけで聞き取れなかった情報を補っていると考えられる.本稿は,発話内容の聞き取りにおける,発話者の顔面の視覚情報の役割を実験的に検証したものである.実験では,短文を発話する映像を用いて,「音声のみ」を聞いた場合と「音声+顔映像」を提示した場合とで音声聞き取りの正確さの比較を行った.この時,音量の異なるノイズを音声に重ね合わせることで,聞き取りの難易度と,顔映像の聞き取り貢献の関係を探った.同時に,被験者の視線の動きをアイマークレコーダで計測し,視線の動きと音声補完との関係を調べた.その結果,ノイズを付加しない場合には,顔映像を提示しても音声の聞き取り率は向上せず,被験者は発話者の目元を注視する傾向が認められたのに対し,ノイズがある場合には,顔映像を提示することで音声の聞き取り率が向上し,被験者は発話者の口元を注視することが多いことが明らかになった.このことは,音声言語を主体とするコミュニケーションにおいても,音声情報が劣化した場合には,視覚情報を利用して音声を補完していることを示している.