著者

宮田 章裕 林 剛史 福井 健太郎 重野 寛 岡田 謙一

出版者

一般社団法人情報処理学会

雑誌

情報処理学会論文誌 (ISSN:18827764)

巻号頁・発行日

vol.47, no.3, pp.906-914, 2006-03-15

参考文献数

16

被引用文献数

6

---

我々は,思考状態および発話停止点を利用した会議の動画ダイジェスト自動生成を提案する.映像中のシーン変化やカメラワーク,テロップを利用する従来手法では,日常的な会議映像のダイジェストを生成することは困難であった.そこで,本手法では,「思考」と「発話」という情報を利用して日常的な会議映像のダイジェストを生成する.具体的には,脳波情報を利用して思考状態をMS-Levelという独自の指標で数値化し,発話停止点を利用して素材映像から単位映像への分割を行う.そして,単位映像の中からMS-Level が高いものを抽出・連結する.プロトタイプシステムを利用した評価実験では,比較システムより的確なダイジェストを生成できることを確認した.In this paper, we propose a method to summarize movies of a conference automatically by the use of participants' mental states and speech breakpoints. Currently, many research groups have developed techniques for video summarization, but these ways are not qualified for editing conference movies. To address this issue, we propose a method to summarize conference movies by the use of participants' mental states and speech breakpoints. We define MS-Level (Mental State Level) derived from one's EEGs as an indicator of mental states. Video Segmentation is conducted by detecting speech breakpoints of participants. After segmentation, high MS-Level scenes are extracted and constitute a digest movie. We ran experiments to evaluate our proposition using a prototype system, and conclude that our proposal will contribute to a better summarization of conference movies.