Interaction/ヒューマンコンピュータインタラクション)、超音波、インタフェース等に関する最新論文を厳選し、日本語要約と共に時系列順に随時更新、一覧にしている場所です。本ページのようにアーカイブベースではなく、速報ベースで取得したい方は、月1回の配信で最新論文を紹介するWebコンテンツもあります。最初に、索引として「A~Z」順に並べています。索引を飛ばす場合はこちら。Interfaces巨大巻き笛モジュールで部屋を拡張する研究。複数のモジュールを自由に連結し床や壁を作成。各モジュールは空気圧と電磁弁で制御し150cmまで伸縮可能。使用例:タイルを付けて椅子や机。パーテーションや巨大看板。VRオブジェクトの再構築など。Furniture木箱ブロックを自由に配置できる多機能スマート家具システムの研究。一辺36cmのカスタマイズ可能な木製立方体を複数組み合わせ机や椅子等に。近隣の木箱同士が連動し検出し合う。組み替えても検出する。例:人を感知しライトをON、書類をスキャンしプロジェクタに映すなど。Interfaces衣類などの生地に刺繍(ししゅう)できる100%繊維製の圧力センサーの研究。生地に抵抗材料を重ね導電糸で縫合。Arduinoボードを別途縫合し電子デバイスにする。使用例:押すと色が変化するライト、オートバイのグローブとシートに縫合し運転中の乗車姿勢を検出等。StrapDisplays腕時計の画面が3つになるバンド。バンド内側画面は腕をひねる事なく見える。パノラマ映像を横長表示も。draws血液サンプルを採取するロボットの研究。採血した31人の参加者の全体的な成功率は87%。静脈にアクセスしやすい25人の場合、成功率は97%。装置内には、静脈から血液を採取する超音波画像誘導システムが組み込まれている。Device親指と人差し指の腹にあるバルーンの膨張を制御しバーチャルオブジェクトに触れた力覚(つかむ、握る)を生成する研究。ペルチェ素子で温度、LRAで振動も生成。組み合わせて温かいモノをつかむ等が可能。Printer家庭用プリンタ1台で電子回路を印刷する研究。空インクカートリッジに導電性銀ナノ粒子/導電性ポリマー/絶縁インクを入れ市販プリンタにセットでデザインツール設計の電子回路を印刷。タトゥーペーパー等に印刷可能。Illusion「ハンガー反射」を用い、バランススクーターに乗車したユーザーの運転方向を制御する手法。Drift等の乗車者を遠隔制御する。ハンガーの代わりにバルーンを使用。DisplaysHMD着用者の顔面に映像に合う触覚を提供するデバイスを研究。顔を囲み配置する6箇所の丸いシリコンで最大15mmでせん断する。運転中ヘルメットの振動や速度に合う風圧。VR博物館でのガイドナビ等。Probeどこから撮影すれば被写体に太陽光が綺麗に当たり、明るいポートレート写真が撮れるか事前に教えてくれるツールを提案する研究。物理的に撮影者の撮影場所を提示。撮影前に被写体の顔を置く箇所から360°カメラで太陽光を計測。HMD生体情報(光電容積脈波と呼吸波形)を計測するHMD着脱式システムを提案する研究。覚醒度を心拍変動から推定。「AISkin」を提案する研究。人の皮膚が約50%に対しスキンセンサーは破壊せず400%伸ばせる。圧力、ねじれ、温度、湿度等の変化を電気信号で測定。皮膚に貼り付けるタッチパッド、関節の曲がりを測定、ソフトロボットに活用等。colourful見る角度で色が変わるカメレオン・チョコレートを提案する研究。合成着色料を添加せず虹色に変化させる。Audio動画編集時に音の質から視覚的に余分/重複シーンを推定し排除する技術。デモ動画:左が元映像で右が加工後。ダウンヒル、ヘアカット等。動画後半では採用/不採用の音を確認できる。RFIDバッテリーレスで完全ワイヤレスの組立て自由なモジュール式タッチセンサーパッドシステム「RFTouchPads」を提案する研究。各タイル型パッドにはRFIDのRFタグが内蔵、RFIDリーダーが届く範囲2mで検出。RFIDとはSuica等で使用の近距離無線通信の事。人体などの曲面に張り付け、組み立てて使用等。Compiler木工作品の設計図から製作プロセスを生成する日曜大工サポートシステムを提案する研究。利用できる材料と工具を入力し、どの木材をどれだけ使い、どこをどの順番で切るかの作り方に変換。さまざまなコスト(製作時間、作品の精度、費用)を優先した製作プロセスプランが提案され選択できる。画像:左が完成品、右が作成図。番号が切る順で番号色が工具の種類。Stimuli2台の扇風機で多様な風向き知覚する研究。前後の扇風機2台、立体音響、流れる風の立体映像の3つを同時に制御し少ない風源で様々な風向きを生成。視聴触クロスモーダル効果により現実とは違う方向から風が来たように感じる。2台のみなので低コスト。Tabletopスクリーンが変形する共同作業向け切り紙式テーブル「KirigamiTable」を提案する研究。フラットな状態から、中央が山形に盛り上がり、個別に2人用モニター、4人用モニターを作れ、フラットに戻して情報を共有できる。Sensing」を提案する研究。Motionを統合し胸部で固定、手の動きによりセンサーの角度を変化させ追跡エリアを拡張する。縦/ピッチに290度,142%の増加、横/ヨーに216度,44%の増加。Synthesis漫画キャラのせりふを感情のこもった音声合成に変換する研究。漫画本ページを入力に各キャラクターが発する吹き出しのせりふを分析(性別,年齢,感情を推定)物語に沿って適切な感情をこめた音声に変換。違う言語で音声を出力する外国語学習への応用も。Interface天井などの任意の表面に固定できるロボットアーム型プロジェクターカメラシステムを提案する研究。真空グリッパーを使用し凸凹表面にも安定吸着。ハンドジェスチャーや音声入力でページ切替などを操作。天井と壁の関係は直角が多いためキャリブレーションが容易。Printerプリンタとアイロンを用いて、金属箔を電子回路にするプリンテッド・エレクトロニクスのラピッドプロトタイピング手法。一般的なプリンタでトナー転写紙にデザインした電子回路を印刷、様々な素材に転写し上からアイロンで金属箔を熱圧着。LED等を加え電子デバイス作成。銅箔と低融点ハンダで電子部品を半田付け可。素材によって電子部品を曲げても壊れない。Design視覚障害者向けかるたシステムを提案する研究。読まれる音声をカードに見立てたスマートフォンへ音として変換することで、どのカードを取ればよいかを提示する。これにより、視覚情報がなくてもカードが取れる。Feedback手袋に組み込まれたエアバッグに送り込まれる空気の量と温度を制御することで、手に熱と力のフィードバックを同時に提供する空気圧グローブを提案する研究。Interfaces既存のマーカーのように大きく目障りな手法ではなく、小さく目立たないポイントライトを用いて、現実にデジタル情報をオーバーレイするAR法。Wi-Fiルーターのステータスライト、PCの電源ライトや電化製品のライト、加えて電球などの一般的な照明などでも可能。System同じ空間で複数の人がそれぞれ好みの照明環境下で過ごせる多重化照明システムを提案する研究。高速で開閉するシャッターメガネと高速に点灯状態を変化させる光源を同期し制御する手法。同じ空間の人達がお互い邪魔せず各々好きな照明(白く明るい光、暖かみあるオレンジ色の光等)を同時実行できる。Interfacesボタン部分に取り付け可能なセンサーを提案する研究。タップで入力、回してボリューム調整、手足のモーションキャプチャなどが可能。2.4グラム、直径19ミリ、厚さ9ミリ。静電容量式タッチセンサーで触れたことを検出し、ジャイロスコープで回転を検出。array超音波を用いて、遠隔で発泡スチロールの摩擦を変えて触覚を生成する装置を提案する研究。発泡スチロールの表面に超音波を当てると、スクイーズ膜効果による表面摩擦の低減で多様な触覚を生成。超音波は画面に触れたときのみ放射される。発泡スチロールな為、衛生的で使い捨て大型スクリーンにも可能。Annotations電子文書(デジタルドキュメント)に後から手書きメモを書く場合、余白ではなく、文字をどかせて空白を作り、そこに書く手法を提案する研究。メモは後から場所移動も可能。Balloon超音波を用い、操作する風船に映像を投影するバルーン型ディスプレイシステムを提案する研究。天井に下向きの超音波フェイズドアレイを複数並べ、音響放射圧でヘリウム風船を3次元操作。風船を追跡し投影することで映像やバーチャルオブジェクトが空中を移動しているかのように感じる。手で動かすことも可能。Keyboard人差し指の腹、第一関節までをキーボードエリアに、同じ手の親指で26アルファベットをブラインドタッチ入力できる手法を提案する研究。単語決定は予測候補から選択する方式。最小限のタイポに抑える配列を実証。spiders蜘蛛にヒントを得た超小型深度センサーを提案する研究。Flightではなく、フラットメタレンズで異なる2枚のボケ画像を生成し深度計算する手法。超小型、ARグラスやワイヤレスイヤフォンへの搭載に期待。Vessels手持ち容器内の流体を再現する触覚デバイス「SWISH」を提案する研究。モーター作動システムを使用して、手持ち容器の重心を再配置し続け、液体を含む手持ち式容器の重心移動をシミュレートする。surface表面の粘着力を動的に変化させることでフィードバックする触覚ディスプレイ「StickyTouch」を提案する研究。温度で粘着力が変わる感温性粘着シートや冷却/加熱面が入れ替わるペルチェ素子等で表面の粘着力を局所的に制御。モニターと重ね納豆の質感を提示、粘着でスワイプ指を止め指定場所を伝達など。DisplaysVRにおける顔への触覚(パンチ、打撃、衝突ど)を再現するデバイス「ElastImpact」を提案する研究。モーターとブレーキで制御。頭部の両側に取り付けられ、VRシーンに合わせて、顔に向かって法線方向に衝撃を与える。Forceピンポン玉の軌道を変化させる「Hopping-Pong」を提案する研究。ピンポン玉位置の高速センシングと軌道予測、及び超音波による非接触力を組み合わせることで動的物体の起動制御を実現。Ultrasound柔軟で丈夫なチューブ型プレスセンシング技術「EchoTube」を提案する研究。導波管使用のフレキシブルチューブ内で超音波パルスを放射し、チューブの変形によって引き起こされる反射を検出することでインタラクションを検知する。踏まれたりの衝撃や、水圧の水中でも使用可能。Plane2台の小型プロペラを搭載したリアルタイムに力覚を生成するVR向け触覚フィードバックデバイス「Aero-plane」を提案する研究。事例として、平面上を転がるボールの再現や、異なる形状とサイズのキッチンツールの再現などを紹介。Vibrations棒状の剛体デバイスから曲げ、伸縮、ねじるの錯覚を生成する触覚フィードバック技術「PseudoBend」を提案する研究。6自由度力センサーと振動アクチュエータが備わっており、デバイスに加えられる力またはトルクの変化に基づいて、オブジェクトの変形中に発生する振動をシミュレートし再現。Sensing布地上に電気を通す物体を置くとそれが何かリアルタイムに特定するセンシング装置を提案する研究。93.9%の精度で分類に成功。Systems安価で手軽に構築できるアーム型触覚フィードバックシステム「Mantis」を提案する研究。アームの押し返す力で触覚を再現。同等品の20分の1の費用で構築できる。Devices人工皮膚をつねったりなぞったりして入力するインターフェース技術を提案する研究。人工皮膚は、シリコンをベースに作成し、内部に層になるようセンサー類を組み込む。タップしたり、なぞったり、つねったり、人の皮膚を触っているかのように操作できる。Handrail超音波による空中触覚を用いた案内用ヴァーチャル手すりシステムを提案する研究。超音波による触覚は、点ベースで振動による刺激が与えられ、点を切り替えることによって目的地までのパス、つまり触覚ラインを提示する。Skin人工皮膚のような触覚をリアルタイムに提供する柔軟で伸縮性のあるデバイスを提案する研究。シリコンと電極で作られたデバイスは、着用者の手の形状に適合し、圧力と振動で触覚フィードバックをリアルタイムに提供する。Applications薄くて軽く伸縮性が高い触覚スキンを作成できる3Dディスプレイ技術を提案する研究。cmの入力電圧で動作する。Interactionタッチパネルに透明なシートを重ねて動かすと、スクロールやズームなどジョイスティックのような操作ができるインタフェース「ShearSheet」を提案する研究。スマートフォン上に透明シートを重ね、シート自体をスライドさせ操作。動画の早送り、カーレースゲームの運転操作などで活用。Earphones発話中に口を手で押さえると小声で音声入力ができるインタフェース「PrivateTalk」を提案する研究。片側から口を手で覆うしぐさをして小声で話すと音声入力され、押さえず話すと入力されない仕様。両耳のAirPodsが取得する音声信号で区別する。Controls」を提案する研究。テーブルの上に取り付けたRGB-Dカメラを使用して紙の色と深度を取得し、ユーザーの指と紙の形状をマーカーレスで追跡する。30種類以上の応用方法が紹介される。Display」(MATD)を提案する研究。超音波浮遊させた粒子に照射し表示。目の残像効果より速く粒子を動作させ3次元像を再現。Interfaces伸縮させたり曲げたりできるスクリーンを搭載したデバイス「BEXHI」を提案する研究。広げたり曲げたりするスクリーンを追跡し、外部プロジェクターがコンテンツを投影する。Beverages電気分解を利用し、飲料表面にドットの文字や数字を表示できる“泡ディスプレイ”「BubBowl」を提案する研究。飲料表面にドットの文字や数字を表示。泡なので混ぜると消え、味も変わらない。カフェオレやオレンジでも可。コーヒーに表示する応用例など。PLASTeR」を提案する研究。(DEA)である「e-Rubber」を配置し、電圧を印加すると収縮し触覚を生成する。指に小型顕微鏡カメラを装備することで、直感的に対象物へ接触でき、また好きな位置にスライドして観察できる。AgencyEMSを用いて、意志よりも早く動かされる身体と「自分がやった」知覚の境界を探求する研究。実験の件か、「自分がやった」と思いながら、身体を約0.08秒早く動かすことに成功。devices食べ物の味を変える手袋型デバイスを提案する研究。手袋型デバイスを着用し、人差し指部に取り付けられている電極から金属製の食器、または手づかみで食べる食品を介して、舌に電気味覚(味覚器に電気刺激が加わることで生じる味質変化のこと)を付与する。Engagement脳活動と眼球運動から注意力の低下を検出し音声および触覚で警告する眼鏡型デバイス「AttentivU」を提案する研究。脳の活動と眼球の動きの両方を利用して注意レベルを予測する。Interactionゴムボールのような弾性物体の柔らかさ等を再現する触覚ハンドヘルドコントローラ「TORC」を提案する研究。Actuator)方式の振動アクチュエータをベースに、親指と人差し指、中指を使って触覚を再現。内側に取り付けた12枚のLEDにから、可視光出力により、触覚を伴わずに温覚を提示する。Systems」を提案する研究。融点が約29.8度のガリウム金属が用いられるため、人の体温で融け腕にぴったりフィットするスマートウォッチなどが可能になる。interfaces伸縮性のある電子パッチを皮膚に貼ってロボットハンドを制御する技術を提案する研究。伸縮性のある電子パッチはフォトリソグラフィーを用いた構造で、厚さ50nmの電気伝導体、インジウム・亜鉛酸化物、ポリイミド、SU-8などから構成。電子パッチを手の甲に装着し、ロボットハンドを制御する。VR片手15箇所にピンを押し当てることで触覚を再現する軽量低電力のハプティクスデバイス「TacTiles」を提案する研究。片手に対して局所的に15箇所、電磁アクチュエータの中心には動作するピンがあり、これが皮膚に押し当たる事で触覚を生成する。Interactionsバーチャルスティックを物体に衝突させた際の触覚を再現するハンドヘルドVRデバイス「PaCaPa」を提案する研究。開閉する部分(翼と呼ぶ)を2つ搭載する直方体の機器。ユーザの手を軸として移動しようとしているのとは反対の方向に回転しているように感じる触覚を再現。Guidelinesスマートフォンで撮影した画像から実世界の3Dシーンをよりリアルに再構築する手法を提案する研究。スマートフォンで格子状に撮影した複数枚の画像を入力に、実世界の3Dシーンを合成する。Pedestrians混雑した環境における視覚障害者と歩行者の衝突回避支援スーツケース「BBeep」を提案する研究。視覚障害者が空港などの混雑した環境を移動する際、ユーザと周囲の歩行者両方に対して警告音を用いて衝突の危険性を通知することで、歩行者と衝突しない経路をユーザに提供するシステム。Interfacesステッカーに埋め込んだ形状記憶合金スプリングを用いて、肌に直接触覚を再現するインタフェースを提案する研究。耳の上のメッセンジャー、背中でガイドインターフェース、胸の上で呼吸コーディネーター、そして肩でリュックを背負っているようなバーチャルリアリティバックパックなど。(SSPD)、鰓感覚提示装置(GSPD)の3つの装置を備えており、本来人間には備わっていないエラ機能を使用する感覚を生成。Learning人の触動作を計測し、人の触れている対象の触覚情報を映像ベースで推定するCNNを用いた手法を提案する研究。テレビでの食事レポートの際に、対象表面を押下してその柔らかさを伝えることに着想を得たもの。RealityVR内のバーチャルショッピング体験の触覚を再現するシステム「HoverHaptics」を提案する研究。ホバリングや移動を用いて、ハンガーを物理的に手に取ったり、生地の素材を提示したりなどの触覚フィードバックを生成する。generation素材に触れた時の触振動を画像からそれっぽく生成し、効率的な触感デザインを可能とするCNNを用いた手法「TactGAN」を提案する研究。素材の表面画像や表面属性の入力から、それらに適合した振動による触覚を生成する触覚フィードバック設計システム。無人航空機)をハンドジェスチャで操作し、伸縮するバーチャルハンドと超音波ベースの触覚フィードバックを用いて遠隔地を探索できるVRシステムを提案する研究。ドローンから見える画像に対して、表示されるバーチャルハンドの長さを伸び縮みさせ、対象物に触った感触を超音波アレイから受け取りながら探索する。limbs座ったままバーチャル空間の歩行感覚を提示できるVRシステム「Leg-Jack」を提案する研究。バーチャル歩行中に、足首の前後にあるアキレス腱および前脛骨筋に電気刺激を与え、下肢駆動装置で運動感覚刺激を発生させることによって歩行感覚を提示する。Forearmバーチャルオブジェクトを触った際に、本来指先で生じる触覚情報を前腕部に提示する触覚フィードバックデバイスを提案する研究。前腕に装着するM字型の構造を採用した5節リンク機構で、3本の指(親指、人差し指、中指)で仮想オブジェクトに触れた際を、前腕の3箇所に提供することで再現する。上部ハンドルでは、自身のアバターを移動させるのに使用し、下部ハンドルでは、下部ハンドルで受動的に動く他のオブジェクトを知覚する。Forearm前腕に沿って動くことで触覚フィードバックを生成する自己駆動型ブレスレットを提案する研究。メールが何通未読になっているかの量をデバイスの位置がどこにあるかによって表現したり、電話がかかってきたときに振動する瞬間的な触覚を表現したり、そして、進行状況(移動距離でパラメータとして時間を再現)や、ナビゲーション(次の角を曲がるまでの距離を徐々に動いて再現)など。DisplaysVRにおいて、ユーザの顔に垂直に圧力を発生させるヘッドマウントディスプレイ・システム「FacePush」を提案する研究。HMDの両サイドに整備するプーリーシステムを用いて、ユーザの顔を押す2つのモーターによって触覚を提供する。Flow指先での触覚(圧力、振動、温度)を再現する装着型ハプティックデバイス「HydroRing」を提案する研究。チューブ内の液体の特性を動的に調整することにより、触覚フィードバック(圧力、温度、振動)の範囲を作り出す。振動はバルブを連続して開閉することで生成し、圧力はバルブを閉じ逆流も防ぐことで生成。ToolsVR内のバーチャルオブジェクトを知覚できない程度に調整することで多様な触覚を再現するお箸デバイスを提案する研究。箸の動きはすべて同じでありながら、バーチャルオブジェクト側を動的に調整することで錯覚させ、それぞれの触覚を再現。Reality空気圧を用いたVR向け触覚フィードバックデバイス「PuPoP」を提案する研究。何もないときは折りたたまれており、バーチャルオブジェクトを把握すると、空気圧で形状が変化し(膨らませ)触覚を提供する。形状は、球体や筒状、長方形など。Brakeバーチャルオブジェクトをつかんだ把持感を再現する力覚と振動を備えた触覚フィードバック・デバイス「DextrES」を提案する研究。ユーザーがバーチャルオブジェクトをつかむと、人差し指ブレーキと親指ブレーキ、そして指先振動を同時に作動させ、あたかも物体を掴んでいる錯覚を提供する。Stimulation)」を用いて、味覚を制御する手法を提案する研究。電極を顎、顎より下、および首の後部に取り付けて味覚をコントロールする。顎から口腔内の液体(唾液等)や舌、口腔内壁を経て首の後ろに到達することで、味覚を増強させる。Force-FeedbackVRの触覚を再現するプロペラベースの手首装着型デバイス「Wind-Blaster」を提案する研究。手首に装着する2つの無人機プロペラを回転させて、触覚フィードバックを発生させる。異なる4つの武器(銃、盾、剣、魔法の剣)の触覚を再現。Illusion1台のハンドヘルドコントローラを用いて、重量と角度を動的に変化させることで、VR内の手持ちオブジェクトの様々な形状の触覚を再現するVRハプティクデバイスを提案する研究。剣、盾、弓などのさまざまな形状の触覚をVRに合わせて再現する。MultirotorVR/ARにおける触覚を再現する2つのロータユニットで構成された棒状デバイス「LevioPole」を提案する研究。ロータユニットは、コンテンツの用途に応じて駆動し、回転運動および直線運動を生成する。ボートを漕ぐ、上向きの力で高いジャンプ、重量挙げ、さらにユーザー誘導に使用したりも可能にする。Jacket」を提案する研究。腕や胴体に配置された26個のエアバックは、それぞれが独立して膨張、収縮、振動し、VRと連動して目標の力を提供する。RealityVRの触覚フィードバックにおける物理オブジェクトと仮想オブジェクトの不一致を最小限に抑える連続的な触覚リターゲッティング技術を提案する研究。不一致を緩和させるために空間を歪ませることでリターゲットし、最小の不一致にする事で滑らかな体験をもたらす。電気機器を検知したりできる低コストのセンシング技術「Wall++」を提案する研究。静電容量センサと電磁センサという2つのモードで動作。壁に対して、ユーザのタッチやジェスチャを検出し、近くに立っている人の姿勢を推定、電磁ノイズを捉えることでアプライアンスがいつ実行されているのか、どの位置にあるのかを検知できる。StimulationARオブジェクトに触れる感覚を電気筋肉刺激(EMS)を用いて再現する触覚フィードバック・システムを提案する研究。肩の筋肉を作動させ触覚を再現。バーチャルソファを両手で押す場面、押すと肩と手首が引っ張られる感覚が与えられ、押している触覚を得られる等。Actuator)を用いた触覚スキンデバイスを提案する研究。VRでの接触を触覚として再現する機能をもたらす。背中を押したり、こすったり、くすぐったりなど、複数の刺激モードを介して触覚フィードバックをシミュレート。Reality人差し指に動作を加えてVR内の触覚を再現するハンドヘルドVRハプティックコントローラ「CLAW」を提案する研究。3つの異なる触覚(仮想物体の把持、仮想表面の接触、拳銃などのトリガ)を再現。ハードだけでなくソフトの感触も可能。Revolver」を提案する研究。接触するとホイールが上昇して人差し指に接触し感触を伝える。表面に沿った手の動きの速度に基づいて回転し、指先の表面との摩擦をシミュレートする。Links」を提案する研究。ライフルの場合は前後に固定、車のハンドルも丸くなるように固定。与えるために、範囲に沿って剛性を設定する。Hammer」を提案する研究。各プロペラは重心から離れた外向きの気流を作り出し、押したり引っ張ったりなど3次元の力を生成する。DisplaysVR空間においてバーチャルオブジェクトの触覚を動的に再現できる立体ディスプレイを提案する研究。下から突きあがる複数のピンがバーチャルオブジェクトの接触時にその形状に変位し再現する。Simulation視覚障害者がVRでナビゲートできるようにする白杖をシミュレーションした新しい触覚杖コントローラ「Canetroller」を提案する研究。杖コントローラを駆使して適切に歩行する訓練をする。杖がバーチャルオブジェクトに触れたとき、ブレーキ、振動、音の3つで知らせる。Network動画に含まれる画像や音から機械学習を用いて適切な触覚情報を推定し視聴者に提供するモデル「VibVid」を提案する研究。画像フレームと音データを含むビデオから適切な加速度を推定し、視聴者に正確な振動触覚を与える事でより質の高い視聴体験を提供するニューラルネットワークモデル。テニスの一人称視点ビデオからテニスラケットに伝達する振動を推定など。「腕が伸びる感覚」をVR体感できるシステム「Stretchar(m):ストレッチャー」を提案する研究。HMDを装着した体験者と協力者とが対面となり、一対一でポールを引っ張り合う過程で表現する。自分の腕が表示され、「(現実世界の)腕を引っ張られる強さ」に応じて、「(イメージの世界の)腕の⻑さ」を滑らかに伸ばし、あたかも腕が伸びる感覚を再現。superimpose隣り合って離れた2人が「触覚付きAR」を裸眼と素手でリアルタイムに空中操作できる超音波ベースの視触覚クローンシステム「HaptoCloneAR」を提案する研究。A地点に紙風船をセットすると、B地点にも光で生成された紙風船クローンが表示され、B地点のユーザが紙風船クローンを指で突っつくとA地点のリアル紙風船も動くといった感じで、触覚付きの双方向性が生まれる。Sensations色、匂い、味(舌への電気刺激)を制御し様々な風味を作成できるバーチャルカクテル・システムを提案する研究。ビジュアル(飲み物に投影されたRGB光)、味(舌の先端での電気刺激)、匂い刺激(マイクロエアポンプによって放出される)の組み合わせによって様々なフレーバーを体験する。Devicesウェアラブルデバイスの入力用にエンドウ豆くらいの大きさの変形する半球体「DeformWear」を提案する研究。DeformWearは、直径10mm、高さ7mm(エンドウ豆くらい)の大きさで、柔軟な半球体を2本の指でつまんだり、押したりすることで操作する。つまんで前後左右斜めに動かしたり、押して前後左右斜めに動かしたりといった細かな入力を検知。Fireworks打ち上げ花火の感触を伝えるシステムを提案する研究。スクリーンの背面からウォータージェットを噴霧し表面に触覚効果を生じさせるというもので、ユーザーは打ち上げ花火が投影されるスクリーンを手で触ることで同時に花火を感じる。視覚障害者の方にも花火を新たな角度から提供できる。Sensing指から放射される熱信号を感知して親指と人差し指の微小動作でジェスチャー認識する技術「Pyro」を提案する研究。はてなマーク、チェックマーク)を区別する。Actuation同時に体験する2人ペアのVRユーザーに対し、別々のシチュエーションでありながら相互に関連する行動を紐付けて実行する研究。一方が魚釣りで竿の反発力を再現し、一方が凧揚げの引きを再現する。一方は出現する柱を踏んで前進するのに対して、一方がパズルを解くためにボックスを再配置する。RealityVRにおけるバーチャルオブジェクトをつかんだときの「把握力」と「重さ」の2つをシミュレートする装着可能な触覚デバイス「Grabity」を提案する研究。人差し指と親指にブレーキが作動し、両サイドの外側への力が把持力フィードバックを生成。持ち上げると2つのボイスコイルモータ型アクチュエータが作動し、重力および慣性を生成する。imaging超音波イメージングを使用して手のジェスチャーを感知する新しいハンドトラッキング技術を提案する技術。画像処理アルゴリズムと機械学習を使用して、筋肉の動きをジェスチャーとして分類。Interfaceユーザーがモニター内に配置されたバーチャルオブジェクトを指で掴んだりといったインタラクティブに操作するデスクトップVR環境の研究。バーチャル内ミラーも提案しており、鏡に写ったハンドでコントロールしたりも可能。Emissions無線機能がない電子機器でも指タッチするとデータ送信が可能になる技術「EM-Comm」を提案する研究。リストバンド型デバイスを装着しタッチするとデータが移動する。プリンタとスマートフォンをリンクし印刷。公共のLCDディスプレイから地図をスマートフォンに取得。コーヒーマシン上のボタン機能のツールチップを表示など。Scenes物体にタッチすることで質感/光/色変更などの編集をリアルタイムで可能な技術を提案する研究。編集をリアルタイムに操作できる。displaysVRヘッドセット内側5箇所に熱フィードバックモジュールを統合させVR体験に熱冷触覚を与える「ThermoVR」を提案する研究。熱い、温かい、冷たいを表現することができ、また、5箇所を組み合わせて左方向が温かいなど位置的にも表現できる。Haptics」を提案する研究。指の腹にエアーバッグを膨らませ圧力をかけることで3Dオブジェクトの触覚フィードバックを提供。電子部品が一切入ってないので水中の環境でも動作する。RealityHMDに3つのディスプレイを追加し非HMDユーザーを同じVR空間で操作させることを可能にするデバイス「FaceDisplay」を提案する研究。Riftのフロントに3つのディスプレイを設置し、そのディスプレイから非HMDユーザーが視聴およびタッチでインタラクティブに参加もできる。ExplorationVR内バーチャルオブジェクトを触った時の感触を伝えてくれる指先装着型触覚フィードバック・デバイスを提案する研究。指の腹に圧迫、縦、横の3自由度で動く。把持、圧迫、押し上げ、持ち上げ、ストロークなどの運動に対しての相互作用を感じる。walls」を提案する研究。4つの筋肉群を作動させ、腕を後ろに引っ張る反作用力を生成する。壁の再現、ビリっと反発壁の再現、キューブを持ち上げる、物体をスライドさせる、ボタンを押す、投射物が当たる感触など。RealityVR内のモノの感触を伝える低電力ブレーキベースの触覚フィードバックデバイス「Wolverine」を提案する研究。低電力ブレーキベースのロックスライダーの作用を利用して、指それぞれのフィードバック制御により抵抗を与えVR内のオブジェクトを伝える。Input口にくわえたマウスピース型静電容量センサーから口腔内の舌の動きを検出し、無発声音声や舌ジェスチャを認識するシステム「TongueBoard」を提案する研究。(SVM)を用いて分類。入力用の21単語と9つの舌ジェスチャを持つサイレントスピーチインタフェースを構築。Playerバレーボールにおけるトスの動きから0.3秒後のボール軌道を予測するニューラルネットワークを用いた手法を提案する研究。深度センサーを用い、トスをする動きに対して3次元骨格座標をセッターの正面から計測し、時系列順に並べたデータセットをニューラルネットワークの入力に使用。ボール軌道との誤差が小さくなるように学習。learningを組み合わせて検出するシステム「SottoVoce」を提案する研究。顎の下側に取り付けた超音波イメージングプローブによって口腔内の状況を計測し、観察される口腔内の情報からニューラルネットワークを用いて音響特徴を生成する。オーディオスピーカから再生することで音声合成として無発声音声を出力する。Reserved.ページ上部へ戻る。