著者

崎山 朝子 大平 栄二 佐川 浩彦 大木 優 池田 尚司

出版者

一般社団法人電子情報通信学会

雑誌

電子情報通信学会論文誌. D-II, 情報・システム, II-情報処理 (ISSN:09151923)

巻号頁・発行日

vol.79, no.2, pp.182-190, 1996-02-25

被引用文献数

60

---

本論文では, リアルタイムで3次元コンピュータグラフィックスの手話アニメーションを合成する方法と, その評価について述べる. 聴覚障害者に, より多くの情報を, 状況に合った手話表現で迅速に伝えられるようにするためには, 変更が簡単なコンピュータグラフィックスで手話が表示できる必要がある. 本研究では, 自然な手動作を実現するために, 人間の手動作を計測したデータを用いて手話アニメーションを合成した. また, 3次元空間の手の位置関係を正確に伝えるために, 遠近表現を誇張する方法を開発した. 更に, 作成した手話アニメーションと日常で用いられている実写画像の自然さとわかりやすさをSD法を用いて評価し, 両者を比較した. この結果, (1)手動作のみの手話で, 手話アニメーションで約8割, 実写画像で約9割が正確に伝わること, (2)手話アニメーションの手動作の自然さは, 実写画像に近いこと, (3)手話アニメーションで手の位置関係を正確に伝えるためには, 遠近の誇張だけではなく, 実写画像に近い手の陰影表現も必要であることがわかった.

著者

土井 晃一 佐川 浩彦 田中 英彦

雑誌

全国大会講演論文集

巻号頁・発行日

vol.39, pp.610-611, 1989-10-16

---

自然言詔理解を計算機上で行うためには、単語のニュアンスの問題を含んだ言外の意味の解析、状況理解、文脈理解、話者の認識の仕方の解析などが必要となる。我々は隠喩理解という範囲内でこれらを取り扱う。隠喩理解によって単語の新しい意味や新単語の意味の解析が可能になる。隠喩理解では連想網の実現が普通の文の理解よりも重要である。本論文では、隠喩理解における連想網の実現をニューラルネットワークで行う方法を提案する。我々は文を命題に分解して、命題単位でニューラルネットワークの各ノードに入力する。これによりネットワークの簡略化、収束の早さ、検索範囲の狭小化ができる。我々の隠喩理解モデルは相互作用説に基づいている。相互作用説によると、隠喩ではたとえる語とたとえられる語とがお互いに影響しあい、意味を変化させる。例えば「人間は狼である」という文では、「人間」も「狼」もその互いの意味が変化し、「残酷である」あるいは「孤独である」といった意味を帯びるようになる。ニューラルネットワークを使うことにより、このような単語の意味の変化を扱うことができる。さらに意味の変化を学習させることもできる。心理学の混合理論によると、(1)多義個所に至ると、聞きては複数の解釈を算出する。(2)その中から、文脈を利用して最適の解釈を選ぼうとする.(3)文が終わるまでに多義性が解消しなかった時にも、一つを選びそれに固執する。(4)選んだ解釈が後続の文脈に合わない時には、前の節の表層構造を想起し直して、新しい解釈を算出しようとする。となる。我々は混合理論に基づいた隠喩理解モデルを提案する。すなわち(1)の各々の解釈を別のニューロンに割り当て、ニューロンの活性値の大小により、優先順位をつけ、またさらに前の文章によって特定のニューロンのバイアス値を上げることにより、混合理論を実現する。

著者

大木 優 佐川 浩彦 崎山 朝子 大平 栄二 藤澤 浩道

出版者

一般社団法人情報処理学会

雑誌

情報処理学会研究報告.IM, [情報メディア]

巻号頁・発行日

vol.94, no.24, pp.41-48, 1994-03-11

---

手話は,聴覚障害者の日常会話言語の一つであり,主に手の動きによって単語や文を表現する言語である.本報告では,筆者らが開発中である手話自動翻訳システムについて述べる.手話自動翻訳システムは手話と日本語とを自動翻訳するシステムである.(1)手の形や位置データをデータグローブを使って入力し,手の動作を認識し,手話を日本語に翻訳する.(2)入力された日本語を手話に翻訳し,3次元コンピュータグラフィックスを使って手話アニメーションとして表示する.

著者

佐川 浩彦 酒匂 裕 大平 栄二 崎山 朝子 阿部 正博

出版者

一般社団法人電子情報通信学会

雑誌

電子情報通信学会論文誌. D-II, 情報・システム, II-情報処理 (ISSN:09151923)

巻号頁・発行日

vol.77, no.4, pp.753-763, 1994-04-25

被引用文献数

58

---

聴覚障害者と健聴者のコミュニケーション支援を目的として,手話通訳システムの開発を行っている.手話通訳システムでは手話から日本語への変換を行うために,手振りの情報からその中に表現されている手話単語を認識する必要がある.本システムでは,データグローブから入力した手話パターンと,あらかじめ登録してある手話単語パターンを音声認識で一般的な連続DP照合を用いて照合することにより,手話単語を認識する.しかし,データグローブからの入力データ量が多いため,通常の連続DP照合ではリアルタイムな認識が困難になる.そのため,手話パターンの動的な特徴に基づいたパターン圧縮を行い,圧縮パターン同士を直接照合する圧縮連続DP照合を開発した.本方式の有効性を検証するため,単語数17語の連続手話認識実験と単語数620語を用いた大語い手話単語認識実験を行った.この結果,従来の連続DP照合の認識率と比較して精度の低下がなく,認識時間としては実測で約1/16に短縮できることが確認できた.更に,大語い認識実験においても98.7%の認識率が得られ,本方式の有効性を確認できた.

著者

村田 和義 中野 有紀子 榎本 美香 有本 泰子 朝 康博 佐川 浩彦

出版者

一般社団法人電子情報通信学会

雑誌

電子情報通信学会技術研究報告. HIP, ヒューマン情報処理 (ISSN:09135685)

巻号頁・発行日

vol.106, no.610, pp.25-30, 2007-03-16

---

マルチモーダルコミュニケーションでは,音声,ジェスチャ,オブジェクト操作など異なるモダリティーの振る舞いが同時にかつ適切なタイミングで生じている.本研究では特にテレビパソコン操作時におけるマルチモーダル対話型ヘルプエージェントに注目する.まずWizard-of-Oz法を用いて利用者-ヘルプエージェント間の対話例を収集し,対話的なヘルプエージェントでは利用者の状態の確認とそれに伴う補助的な説明が行われることを示す.さらに利用者-エージェント間の対話状態を予測するための確率モデルをベイジアンネットワークにより構築し,ヘルプエージェントが補助的な説明を行う最適なタイミングの予測を行う.

著者

阿部 正博 酒匂 裕 佐川 浩彦

出版者

一般社団法人電子情報通信学会

雑誌

電子情報通信学会論文誌. D-II, 情報・システム, II-情報処理 (ISSN:09151923)

巻号頁・発行日

vol.76, no.9, pp.2023-2030, 1993-09-25

被引用文献数

17

---

手話は音声に基づく自然言語とは異なる独自の表現形式をもつボディランゲージである.本論文では,手話通訳者の機能代行を目指す手話通訳システムにおいて,手話が認識された後の手話単語列を自然な文章に変換する言語処理方式について提案する.本手法は,意味主導型の格フレーム照合により手話単語列の意味構造を解析し,ルールベースの手法を用いて,省略されている格助詞や助動詞等を補充し,日本語として自然な表現に変換することを特徴とする.本方式をインプリメントし,手話入門テキストの123の手話例文を用いて実験を行った結果,76%の文に対して期待された正しい変換結果が得られた.また,データグロブ入力による実際の手話認識データを用いて変換実験を行った結果,手話の認識結果にはあいまいさが多く,非文を含めて多くの単語列候補が得られること,従って,正しい単語列候補の変換精度向上と並んで,誤った候補をリジェクトする機能が非常に重要であることがわかった.そのためには,今後,単語間の意味的関係だけでなく,表情や空間表現などの末使用情報の利用や,文脈処理が必要となる.