JavaScriptを有効にして再度、お越しください。専任講師などを経て2008年より現職、現在に至る。行動科学研究所に訪問教授として赴任。本研究の目的は、高品質なバーチャルリアリティ(VR)およびオーグメンテッドリアリティ(AR)アプリケーションの構築に活用できる、ソフトウェアエンジニアリングに関する知見を収集・分析することである。ARのアプリケーションとして、フルボディアバターの開発に着目し、ユーザインタフェースおよびソフトウェアエンジニアリングの双方の観点から、既存の課題と潜在的な解決方法を検討している。本研究では、VRにおけるヒューマンインタフェース/インタラクションの構築にかかるアプローチとしてクロスモダリティに着目し、新たな概念としての「拡張クロスモダリティ」を提案する。拡張クロスモダリティとは「所望する感覚や体験に伴う生体情報を、感覚刺激として表現・付加して呈示する」アプローチと定義する。拡張クロスモダリティによって、VR空間で生起される感覚・体験強度の増進やアプリケーションの明確化について、実証実験を通して検討を行うことが、本研究の目的である。3D映像化して、ヘッドマウントディスプレイ(HMD)に仮想現実感として描出して、胆管癌・膵癌と血管および胆管の立体関係をより明確で分かりやすく映像化する次世代の没入型画像呈示システムを構築した。3D映像作成においては、画像抽出(segmentation)と3DCGの作成のプロセスにおいて時間短縮が可能となり、3DCGの品質を向上した。3DCGをVR(AR)コンテンツ化して観察することで手術シミュレーションを行った。本研究では、立体視(3D)映像を、エンタテイメントや文化を支える新たなメディアとして確立するために、「3D映像ならでは」の情緒表現を可能とする、機能的な奥行き感の演出アプローチを提案・検証した。具体的に、感情を喚起する画像群(感情画像)を対象として、両眼視差を付加する3D化技術を用いた実験的な検討を行った。結果から、いずれの感情においても3D化によって覚醒度が上昇し、その奥行き方向の再生範囲を拡大する視差操作によって、その傾向が増進することが認められた。本研究課題では、視触覚におけるクロスモーダルな錯覚を利用した新たな感覚ディスプレイの開発や感覚メディアのコンテンツ創造に寄与する、ヒトのクロスモーダル知覚特性の基礎的な検討を行い、具体的なシステムの構築方法についての提案を行った。当初の計画においては、これまでの研究で対象としていた触運動錯覚を対象としてコンテンツへの応用方法の確立を目標としたが、AR技術への応用を検討する中で、触刺激なしに触覚を体験させるという微触感錯覚の誘発手法を新たに発見した。