NetworksLINKプロジェクトページPDFモーションキャプチャで記録したダンスの動きと、かかっている音楽の特徴量の関係を学習することで、音楽の特徴にぴったりくるような自然なダンスの動きを自動生成しようという研究。学習に用いるデータは、次のようなモーションキャプチャで得られた関節の動きの時系列データです。それぞれのエネルギーやメルケプストラムなど、音楽情報処理で一般的に用いられている特徴量になります。学習したモデルで生成した動きは次のビデオのようなものです。論文の中で著者が認めているように、まだまだうまくいっていない部分も多いのですが、楽曲の音響的な特徴量からリズムにあった動き(ダンスといえるかどうかは微妙ですが)が生成されているのだけでもは十分面白いですね。learningvaevideowavenetwebwebglwebsite。