STRAIGHT周りの論文を読んできた。Iもっさりのんびりと音周りの話を書いてます。>>2009年10月05日STRAIGHT周りの論文を読んできた。情報処理学会の音楽と音声の会誌で和歌山大の河原教授が書いた論文と、ここ2〜3年の音楽分野(ぼかりすとかのやつ)をざっくり斜め読みしてきた。書いていらっしゃる人もいるし、ぐぐれば出てくるんですが一応個人的なメモとして。何で今まで読んでなかったのかといわれると、不勉強だから...じゃなくてよもや自分でやるとは思わなかったからです。テト声にたぶらかされました。数時間もかけずに斜め読みしたのでかいつまんで面白そうなところを。勘違いしてたらごめんなさい。1.STRAIGHTの根幹についてこれは全く載っていない(あれ〜)。EUROSPEECH'99に載っているみたいです。STRAIGHTについてはこちらでのんびりスペクトルとにらめっこすることになりました、あぅ。それは視覚化するとして、詳細な論文は近場の図書館で置いてあるのが東大だけらしいので、いざとなれば...外部者でも入れたっけ?とりあえずSTRAIGHTでもやっぱり低音は苦手みたいです。TANDEM-STRAIGHTと進化したバージョンではさほどでもないと書いてあったので、TANDEMも試してみようかと思います。なっていましたが、UTAUの先行発音がYAMAHAの特許に触れる?→大丈夫、な話のところで出てきた、母音より前に子音置いてパラメータがどうのこうのの部分の解説がYAMAHAの名義であった。母音開始時点をリズムの頭にするだけでなく、子音部分からのピッチ変動等もパラメータで指定しているようです。C→V,V→Cの全ての音節を網羅し、それに対してピッチなどをパラメータで操作しているんだとか。子音等立ち上がりの部分の音程なんかも全てパラメータで保管しているらしい。基本的には網羅してしまえば問題無いだろう、的な書き方がされてた。3.話し声→歌声変換ツールなんかそんな研究あったね、と言いつつこれが今一番欲しかった情報かもしれない。a.)歌声フォルマント4kHz周辺にオペラ歌手から発見された云々かんぬん。このあたりにF4があって、そこが話し声と比べて12dbほど強調されているのが歌声らしい。ポップスでもそうらしい。論文だとこの周辺のスペクトルを増幅して、いい感じの響きを得たとかなってた。式は覚えてないけど、複雑なものじゃない。b.)F0(音程)の動的変化i.)シュートアタック部分は目的の音程よりいったんちょっと上に飛び出る。ii.)ビブラートその後3〜4Hz(?)程度の揺れが乗る。ビブラートをする時にはフォルマントがつられて変化する。音量が同期して独特な揺れを持つ、が正解みたい。iv.)プリパレーションリリース部分は一度落ち込んでからポルタメントする。このあたりは確かに自動で生成した方が楽そうな気がする。僕より詳しい解説をvocasimの和泉様が書いていらっしゃるので割愛。http://akira-izumi.cocolog-nifty.com/patent/2008/07/vocasim004.htmlちなみにF0のラインについては画像を用意しました。上がリンちゃん、下が友人にみなそこの冒頭を歌ってもらった波形を何かのフリーソフトで解析しました。vocasimシミュ挑戦の名残です。c.)母音等による発音の変化どのサンプルデータをとっても母音間の変化は100msくらいらしい。流されてたし、この数字をどうみるかだなぁ...d.)総括シュートは大事。シュートとビブラートを合わせたらいい感じ。歌声フォルマントでもっといい感じっていう論文だった。歌ってもらったデータをパラメータで合成するらしい。レイヤー増やして合成したのもあるらしいけど、この方向だと辛いよねってことみたい。んじゃあ何が感情なんだってところはさぱーり分からないから、みんなでサンプル持ち寄って解析したいね、って論文があった気がします。読んでいないのですが、情報処理学会ではVOCALOID熱にあてられた若い研究者達がこぞって実験しているようなイメージ。このあいだMMDであったハープの演奏動画と同じように、ショパンの楽譜から手の動きを再現しようなんていうのもあった。正直な話お金にならないってところなのかな。河原教授のスキャットの生成の論文に、21世紀は豊かさを求めて夢のある研究を、的なことが書いてあったんですが、こういう方面は面白いと思うんだけどなぁ。やったもん勝ち、的な感じに見えた。みんな楽しそうすぐる。あ、後ミックスは残響音と直接音を一定の比率になるようにやっているっぽい、って論文があったのですが読み飛ばしちゃった。興味のある方はぜひ読んでみるといいかも。音声合成に限らず、結構面白いものも多いと思います。発表してきた僕が通りますー。僕も結構あそこまわりの論文は読んだなあ、今「ぼかりす」やってる人の当時の論文とかすごく参考にさせてもらったりしたし。23:14正直な話Vocoder型の解析&再合成に関してはSTRAIGHTもしっかり研究が行われているので、音楽人的には新しく入る理由があんまり無い気がします。惜しいのは折角高性能な解析装置がありながら、あまり活用されていないように思えることです。お金にならないと言われればそれまでなんですけどね。研究が進んでいないのはありありと伝わってくるし、折角フリーで公開されているからには使わないと嘘かなぁとか。暇なのでちょいちょい遊びつつ使って行こうと思います。[必須入力]※画像の中の文字を半角で入力してください。Aカテゴリ日記(197)打ち込み(33)プログラミングメモ(15)完成した曲(18)音声合成(11)作曲(123)合唱(7)音楽全般(20)v.Connect(5)過去ログ2010年12月(2)2010年10月(3)2010年09月(1)2010年05月(3)2010年04月(4)2010年03月(7)2010年02月(1)2010年01月(1)2009年12月(2)2009年11月(2)2009年10月(7)2009年09月(11)2009年05月(1)2009年04月(2)2009年03月(2)2009年02月(1)2009年01月(1)2008年12月(3)2008年11月(2)2008年10月(10)Seesaaブログ×この広告は180日以上新しい記事の投稿がないブログに表示されております。