- 著者
-
原田 仁
宮尾 祐介
金治 新悟
掛地 吉弘
- 出版者
- 神戸大学
- 雑誌
- 挑戦的萌芽研究
- 巻号頁・発行日
- 2016-04-01
本研究の目的は,手術動画を自動で文章化するプログラムの開発,および映像データと言語データが相互に検索可能な新しい手術記録データベースの構築である。手術動画内の解剖,器具,動作,事象を言語で意味付けし,機械学習によりパターン化させることで,手術動画から手術記録を自動作成するプログラムを開発する。また,映像と言語が互いに関連付けられた手術記録データベースを構築することで,膨大な手術データが客観性の高い均質化された手術記録として保存管理し,データベースから必要な映像データを言語で検索することを可能とする。具体的には,手術映像から選別した特定の場面を用いて,解剖,手術器具,動作,事象を認識しテキスト化する手術認識アルゴリズムを作成し,手術認識アルゴリズムを基に手術動画を自動で文章化するプログラムを開発するとともに,映像とテキストをリンクさせ相互に検索可能な新しい手術記録データベースの構築を目指す。手術認識アルゴリズムの作成においては,解析用コンピューターにインストールした専用ツールを用いて,手術動画内に登場する臓器・血管などの解剖,鉗子類などの手術器具,把持・切離などの手術操作,出血・血管の拍動などの体腔内の事象などに対し,名称や動作の属性を付与する。これにより言語で意味付けされた動画を保存,蓄積し,映像からテキストデータへの変換を,機械学習によりパターン化させる。機械学習のデータとしては,手術手技として規則性があることが望ましいと考えられる。そのため,手技が定型化された約100症例の腹腔鏡下胃切除の動画をサンプルデータとして使用する。