unityこの記事は以下の続きです。littlewing4回目の今回は、オープンソースではないですが、海外のものを中心にface-tracking可能なミドルウェアを紹介します。Studiosが開発するFace-Trackingソフトウェア。steamで配信されています。表情豊かな複数のアバターが容易されていて、skypeに利用したり動画として保存することができます。Technologiesのエンジンを利用しているようです。Mixamo社のFace-Trackingツールが「FacePlus」,実際試してみましたがかなり精度の高いアニメーションを実現しています。無料で提供されています。試してみたら、記事をブログにも書こうかと思っています。本記事執筆時点で、WEBサイトが見れなくなっています。リンクだけ載せておきます。調査中で、説明できるほど理解できていないのですが、なかなか良さそうです。顔を横に向けた時にロストしてしまうのですが、そのあたりの精度も高そうに思えます。SDKのアイトラッキングを利用したブラウジングインタラクションが公開されています。WEBカメラの前で目をつぶったりすると、コンテンツが進行していきます。)オムロンが2014年12月に発売した、カメラ+画像認識モジュールです。9種類の画像センシング機能を有する、人を認識する画像センシングデバイスです。経由でホスト(例えば、スマートフォンやタブレット端末など)からのコマンドを受け、実行結果を返します。電源供給には、microUSBケーブルで行います。VISONの顔認識技術を手軽に高精度で利用できるハードウェアとなっています。現時点で発売されている端末はカメラ画像自体は、外部に転送されず、センシングした値のみが送信されるようです。カメラ画像の漏洩などセキュリティー的な問題を考慮して意図的にそのようにしたのか、Bluetoothの転送速度などを考慮したのかわかりませんが、取得したセンサー値のカスタマイズや追加の画像処理など、センシング部分の調整を行いたい場合は、制約がありそうです。今回紹介した、FaceRigやFacePlusにおいて、Face-Tracking技術を用いて、リアルなアバターの操作を行っています。センシング精度よりもアバター側の表現力がとても重要であること。した人間の存在感(=アバターを通して、その人の存在を錯覚的に認識する)を感じることはできません。アバター側において、オーバーアクション気味の表情の作成や、センシング情報には含まれていなリアルな筋肉の動きを表現に取り入れる必要があります。センサーだけを突き詰めるのではなく、総合的な表現力が必要ですね。顔認識技術の紹介はいったん、ここでおしまいの予定で、次回まとめを書こうと思っています。Int...2016-03-18WEBカメラで利用できる顔認識技術まとめ(2016年4月)-その52015年4月に「WEBカメラで利用できる顔認識技術まとめ」という...2015-04-09WEBカメラで利用できる顔認識技術まとめ(2015年4月)-その3この記事は上記の続きです。踊る!アート展と、学ぶ!未来の遊園地@日本科学未来館に行ってきました。最新記事HoloLens2向けのカメラマウントの3Dプリントデータを作りました。読者になるはてなブログをはじめよう!pigshapeさんは、はてなブログを使っています。ブログを報告するスターをつけました引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。