自分の声をキャラクターの声にリアルタイム変換するSFのような技術、リアチェンvoiceが楽器フェアに登場!52539370124音声信号処理により、自分の声をまったく別の人の声に変換するというSFのような技術が登場してきました。東京・世田谷区にあるクリムゾンテクノロジーが開発した「リアチェンvoice」というのがそれ。戸田智基客員教授(名古屋大学教授)の戸田智基教授の研究グループとクリムゾンテクノロジーによる共同開発で、製品は標準版とプロ版の2種類。実際、どのくらい使えるものになっているのかを見てきましたので、紹介してみたいと思います。A1(728x90)伸縮サイズ最近、ゆるキャラの着ぐるみが各地で活躍しています。ゆるキャラをしゃべらせるとなると、なかなか無理も生じてきます。アニメなどの映像では声優さんが声を出しているけれど、着ぐるみとなると、なかなかそうもいかないからです。リアルでリアルタイムに声を変換するという意味でネーミングされているとのこと「キャラクタの声は、特定の声優さんに頼ることになり、着ぐるみなど、活躍の場が広がれば広がるほど、その声優さんに負荷がかかってくるという問題があります。それをなんとか軽減できないか......という声が上がっていたので、それを当社の音声合成の技術で応えられないだろうか...と開発に取り組んできました」と話すのはクリムゾンテクノロジーの代表取締役の飛河和生さん。クリムゾンテクノロジーの皆さん。本業であるクリムゾンテクノロジーは、さまざまな音楽・楽器アプリケーションを開発したり、音楽配信でのアグリゲーションビジネスを行うなど、幅広い展開をしている会社です。そのクリムゾンテクノロジーで、研究開発を進めてきた結果、どのスタッフがしゃべっても、元のキャラクタと近い声質になるような技術として、「リアチェンvoice」を生み出したのだそうです。リアルタイムに声質が変化するシステム自体は、これまでもいろいろあるし、テレビなどでも匿名の人の声を変換して使っていたりしますよね?それらとは違うものなのでしょうか?「これまであったシステムはピッチシフトで声の高さを変えたり、決まった値でフォルマント変換を行うことで声質を変換させるものでした。それに対し、リアチェンvoiceはターゲットとなる声優さんの声にマッチするように、それぞれの人の声を変換するようなシステムにしています。その際、変換によるレイテンシーは100msec以下に抑えているため、ストレスなく使うことが可能です」と話すのは開発を担当した高橋賢一さん。詳細はともかく、高橋さんにデモをしてもらったので、まずはそちらをご覧ください。?最初の声は男の子系女性ボイスのRisa、2番目がイケメンボイスのTakuya、3番目はキャラクタ系男性ボイスのRyotaとのこと。明らかに従来のボイスチェンジャーなどとは異なる次元のものであるのは分かりますよね。これはどのような仕組みになっているのでしょうか?「当社が開発したMetamorphoneという技術を使っているのですが、ここでは予めキャラクターの声をデータベースに登録しておく一方、現場で実際に声を出すスタッフの声も登録し、そのマッチングを図れるように音声学習を行うのです。その変換モデルデータを生成しておくことで、簡単に、そしてリアルタイムに声質変換を実現しているのです」と高橋さん。誰がしゃべっても、目的とするキャラクターの声になるというわけではなく、予め登録しておいた人の声を変換できるというわけなんですね。3人のスタッフがいれば、3人とも事前に声を収録して、変換モデルデータを作っておく必要があるわけです。ここで紹介しておきたいのが、リアチェンvoiceにはプロ版と標準版の2種類があること。「プロ版というのは、大規模イベント施設をターゲットとしたもので、現在活躍中のキャラクターの声優さんの声を収録し、その声が出せるようにするシステムです。一つの標準版は自治体やイベント提供会社、またコールセンターなどを対象にしたもので、予め用意されたキャラクタの声を出せるようにしたシステムとなっています。ゆるキャラの着ぐるみの声を出すとか、電話サポートや電話セールスなどで男性が受け答えしていても女性がしゃべっているように演出することで、会話をスムーズにする......といった効果を狙えるのでは...と想定しております」と話すのは営業担当の金森均さん。3種類の決まったキャラクターの声が用意されている標準版ちなみに標準版で使えるのが先ほどのビデオでデモしていたTakuya、Risa、Ryotaの3ボイスですが、今後このボイスライブラリは拡充していくとのことでした。いずれにせよ、現時点ではビジネス向けの製品であり、個人向けのシステムというわけではないそうです。ここで気になるのは、声の収録にどのくらいの時間がかかるのか...という点です。リアチェンvoiceの導入までの流れ高橋さんに聞いてみたところ、スタッフ1人分の収録にかかるのは約2時間。キャラクターのしゃべり方を真似しながら練習を行い、あとは台本を読んでいくのだとか。現在、収録方法については新たな手法を開発中で、今後より効率よく作業できるようにしていく、とのことでした。この収録や変換モデルデータの生成はクリムゾンテクノロジー側で行い、ユーザーに開放はされていないようです。声を完全に変えられるということで、悪いことに使おうと考える人もいそうですが、どこの企業が使っていて、誰の声を活用しているのか...といった情報は記録されるわけですから、下手な使い方はできないとは思いますよ。声質は変わるし、ピッチチェンジは上下1オクターブの幅で設定できるけれど、ピッチの動き自体は保持されるとのことです。歌って音痴に変換されてしまうことはないし、ピッチをいじらないか、上下1オクターブで設定していれば、モニターしながら歌うことも容易なわけですね。Windows版のリアチェンvoiceコンバータの画面ところでユーザー側のシステムには、比較的シンプルです。ここには収録用のシステムなどはなく、「リアチェンvoiceコンバータ」という音声変換ソフトと、Metamorphone変換モデルデータという変換のためのデータベースがインストールされるだけ。レイテンシーを小さくし、音質を向上させる目的からオーディオインターフェイスを用いて、ASIOドライバを使う形になっています。リアチェンvoiceの仕様なお、現時点ではWindowsでの動作のみで、サンプリング周波数は44.1kHz/48kHz、サンプリング分解能は16bit。いえ、すでにiOS版はほぼ完成しているようなので、まさに着ぐるみの中に持ち込んで使うことができそうですよね。posts.藤本健DTM、デジタルレコーディング、デジタルオーディオを中心に執筆するライター。Laboratoryを2001年より連載。「Cubase徹底操作ガイド」(リットーミュージック)、「ボーカロイド技術論」(ヤマハミュージックメディア)などの著書も多数ある。趣味は太陽光発電、2004年より自宅の電気を太陽光発電で賄うほか、現在3つの発電所を運用する発電所長でもある。Commentsこの記事についたコメント13件のコメントkankanお~っ、今までの製品が谷底に沈むくらい、格段にレベル高い。これ、仮歌でいけたらいいな。流行りのディープラーニング技術を使えばもっと自然なのが作れそうな気もしますね。絵画ではすでにゴッホ風の絵などに簡単に変換できるようになりましたし。どこの企業が使っていて、誰の声を活用しているのか...といった情報は記録されるわけですから、下手な使い方はできないとは思いますよ。ピッチがちがうだけで。「凄い」の一言しかない。これで初音ミクの声で人が歌える!あれ?ボーカロイド誕生の意義が(笑)問題点は下ネタ、エロ方面の許容範囲でしょうね。法人でもバレなきゃいいというところもありますし、やがて別の企業や個人が似たものを開発して一般にまで下りてきた時に。許容する声優が現れて解禁されるが、許容できない声優のもあって、やっぱり皆バレなきゃいい精神で、YouTube等の転載動画のような状況が一般化してしまいそうですね。ねとらじ黎明期の頃から人気声優に声が似ている方がより声を似せて下ネタを言う放送などがありましたから、有名税のような扱いで落ち着いてしまいそうです。AMべろさん地味にすごい技術の進歩だけど、声優さんの仕事を一部食っちゃうのかな。誘拐犯がこれを使って電話をかけてくるのかな。AMとおりしゅがり>>11NAMAROIDとかゆかりねっとは、音声認識で文章をテキスト化したあと、既存のソフトに読ませてるだけ。このリアチェンVoiceはちょっと凝ったボイスチェンジャーって感じ。声の波形その物を弄ってる。PMゲーテ>>9アニメのキャラの繊細な気持ち等、ごくわずかなイントネーションで上手く表現されるようにするにはやはり声優本人の力じゃないといけないかもしれませんよ。コンピューターといえど言ってしまえば偽物ですし、近づける事さえ出来ますが本当にキャラの感情等繊細に扱うには「感情」のある人間が一番良いのかもしれません。何もかも代替品で補っても何か乏しくなって見えたり寂しさが見えてきて声優と比べると全然違うなって思うこともあるかもしれません。声優さんでなければより良いものが仕上がらない!とか。そこを大切に思っている方等がいらっしゃれば声優の仕事もなくなることはあまりないかもしれませんよ。コメントをキャンセルメールアドレスが公開されることはありません。SynthsをAbletonが無料で公開。2020Eventideが物理モデリングでスプリングリバーブ=バネ・エコーをプラグイン化。Creative運営についてABOUT広告募集お問い合わせDTMステーションについてDTM、デジタルレコーディング、DAW、MIDIといった分野の情報を紹介します。初心者の入門用として、プロミュージシャンの実践術としても役立つ記事、製品レビューなどをお届けします。RSSのfeedはこちらです。“DTMステーション”。