著者

山本 真司 子安 大士 前川 仁

出版者

情報処理学会

雑誌

情報処理学会研究報告. CVIM, [コンピュータビジョンとイメージメディア] (ISSN:09196072)

巻号頁・発行日

vol.172, pp.Y1-Y8, 2010-05-27

参考文献数

11

---

本研究では,ドラムの演奏動作を撮影した動画像からの動作抽出手法を提案する.ドラムの学習支援の研究として電子ドラムやモーションキャプチャを用いて演奏動作を解析する研究があるが,普段の練習や演奏とは異なる状況で演奏しなければならない制約がある.そこで,我々は演奏動作を動画像からマーカーレスで腕とスティックの動作を抽出し,動作点の動きから奏法を解析する手法を提案している.しかし,見掛けの変化が生じる正面からの撮影では追跡ができないことや,動作点を見失うとその後のフレームの追跡ができないといった動作抽出での問題がある.そこで本研究では,複数のオプティカルフローの情報を確率的に統合することで領域の移動を推定し,その位置関係から奏法の解析に必要な動作点の検出を行う.動作を点ではなく領域により追跡することで追跡のロバスト性が向上し,同時に見え方の変化への対応が可能となる.高速度カメラで撮影された動画像に対して提案手法を適用し,手法の有効性を確かめた.Motion capturing during actual drumming is important both to support of learning and to analyze the performance. Methods based on specialized equipments such as electronic drums or dedicated capturing system with markers may affect the motion to be performed. Therefore we present a marker-less method of motion extraction of drumming stick from video image. In the method, we first track regions of each body part and stick. To track regions robustly, we use a combination of M-estimation and Bayesian approach. Then feature points such as stick-tip and the grip of basic drumming scene are extracted by the boundary of the regions.