平#研究室のページです。研究プロジェクトや、研究室イベント、所属学生について掲載しています。浴槽叩打音による操作システムこの研究では、TubTouchの静電容量センサを浴槽内部に埋め込むことを行っていたのに対し、代わりにピエゾセンサを取り付けて、浴槽を叩いた音を直接に振動(音響信号)として計測し、信号処理することで操作インタフェースにするものです。操作インタフェースとしては、3種類の入力手法が利用でき、叩打位置(叩く場所)、叩打音色(叩き方)、叩打パターン(叩くリズム)をそれぞれ処理することが可能です。その処理結果を操作イベントとして、既存機器のコントロールや、様々な応用に用いることができるシステムとなっています。複数設置したピエゾセンサを用い、叩打位置からの振動の到達時間差を用いて位置を算出しています。Method)による瞬時振幅エネルギーを用いて振動の到達時刻を求めて位置を算出します。Factorization)を用いて、周波数領域で各音色に似たものを求めるという手法で音色判別を行います。当初、NMFの処理はPosessingDrumsの公開プログラムを改造して適用していましたが、現在は独自実装したNMF処理となっています。叩打パターン(叩くリズム)認識処理2連打や3連打の検出や、もう少し高度なリズム(タンタタ、タタンタなど)の認識が可能です。ここでは、あるリズムパターンを構成する最初と最後の叩打音からその間に叩かれた各音の時間位置を確率密度関数を用いてリズムパターンを認識します。TubTouchのような、浴槽縁にメニュー表示を行い、機器操作を行うことはもちろん可能です。ここでは、単に機器操作だけでなく、叩く行為ならではのアプリケーションとして、モグラ叩きゲームや、浴槽打楽器BathDrum、早押しボタンなどを作成しています。