著者

甲斐 寛規 宮崎 大輔 古川 亮 青山 正人 日浦 慎作 浅田 尚紀

雑誌

研究報告コンピュータビジョンとイメージメディア(CVIM)

巻号頁・発行日

vol.2011, no.13, pp.1-8, 2011-05-12

---

カメラの入力画像を用いて,人の口唇の動きを認識することで,発話の検出を行う手法を述べる.近年では,コミュニケーションの解析が盛んに行われており,言語情報を含め,表情や視線,身振りといった非言語情報を総合的に評価しなければならない.本稿では,非言語情報である口唇の動きを認識し,発話の有無を検出する.提案手法は,入力画像の口唇領域と基準画像の口唇領域を用いることで,口唇の形を分類する.この分類結果をもとに,動画像中の一定範囲のフレームでの口唇の形の変化を検出することで,発話の有無を検出する.We propose a method to detect the speech by recognizing the lip motion. Recent study of communication analysis has been done thoroughly, which comprehensively utilizes not only the verbal information but also the non-verbal information such as facial expression, gaze motion, and gesture. The proposed method detects the occurance of the speech by analyzing the lip motion. We first classify the mouth shape from the comparison between the input mouth image and the reference mouth image. We detect the occurance of the speech using the lip motion classified for last several frames of the image sequence.