- 著者
-
浦田 耕二
福井 美佳
藤井 寛子
鈴木 優
酒井 哲也
齋藤 佳美
市村 由美
佐々木 寛
- 出版者
- 一般社団法人情報処理学会
- 雑誌
- 情報処理学会研究報告情報学基礎(FI) (ISSN:09196072)
- 巻号頁・発行日
- vol.2004, no.36, pp.23-29, 2004-03-26
- 被引用文献数
-
6
ユーザからの質問に対し、映像・音声・取扱説明(テキスト)などで構成される表現力豊かなマルチモーダルコンテンツの検索技術、および、質問内容を理解しユーザが必要としている情報に対して的確に回答する質問応答技術を融合することにより、より分かりやすい情報提供を実現した質問応答型マルチモーダルヘルプを開発した。このシステムを用いて、オーブンレンジ、デジタルカメラの取扱説明書データ(テキスト160ページ、映像108分)を登録し、質問データ123件による実験を行い、次のような知見が得られた。(1)質問応答技術により取扱説明情報の探索作業が軽減される見込みを得た。(2)映像、音声、取扱説明書の該当ページの表示を併用することにより,取扱説明に関するわかりやすさが向上すること確認した。映像収集、編集について、作業の軽減と質の向上を支援する必要がある。We have developed a user-friendly help system by integrating multimodal content retrieval technology and question answering technology. Multimodal content retrieval enables the user to access contents with a rich power of expression such as those comprising video, speech and textual instructions, while question answering enables pinpoint access to the required information. We conducted a preliminary experiment using the manuals of a microwave oven and a digital camera (160 pages of text and 108 minutes of video) as the knowledge source, with 123 questions. Our findings are: (1) Question answering technology enables efficient access to the desired instructions; and (2) Responses in video/audio accompanied by presentation of a relevant manual page helps the user understand the instructions better. However, we need a mechanism for facilitating gathering/editing of video contents and for improving their quality.