IB2017.1.12UX/UIインフォバーンKYOTOIDL×KITchenナビゲーションシステムプロトタイピングとセンサFacebookTwitterはてなブックマークみなさんこんにちは、インフォバーンKYOTOの可兒です。LAB.(以下IDL)が2016年9月に大阪のhu+gMUSEUMで開催したKITchen(https://www.infobahn.co.jp/idl/kitchen/)デモ展示で、プロトタイピングした料理ナビゲーションシステムのセンシングについての解説と代表的なセンサやその活用事例について紹介します。ここではKITchenプロジェクトの詳しい経緯や内容に関しては以下のブログを閲覧いただくとして、勝手ながら割愛をさせていただきます。Talk:http://www.kitchen-talk.com/さて9月に行った料理ナビゲーションシステムの体験デモ展示では、そこまで複雑な調理工程は再現せず、あくまで情報インターフェイスの”プロトタイピング”という位置づけで、比較的簡単に子供から大人まで楽しめる「パンケーキ」の調理工程を再現、ナビゲートするシステムを構築しました。Fig.1まず展示で行ったパンケーキの調理工程を以下に列挙します。パンケーキミックスが入っている容器(Fig.1-1)の中にチョコレート(Fig.1-2)を入れる※5mm大ほどに粉々にしたもの※今回はデモ展示用にアレンジしてチョコレートを入れています。皿に出す※展示では牛乳やパンケーキミックスの粉を準備する工程までは、事前に運営スタッフが用意。上記の工程の中で、体験者の視線の範囲に次の工程や行動を促すグラフィック表示を行っていますが、その”次”の工程を適切なタイミングで表示するため、センサを使って検知し、工程を進めるようにデザインしています。H.8の「皿に出す」の皿に出した。いったものがあり、今回これらを簡易的にもセンシングして次のステップへと送っています。それでは、それぞれの工程でどういったセンシングをトリガーにしているか見ていきましょう。その前に前提条件として、Fig1-1の容器にはパンケーキミックス、Fig1-2の容器にはチョコレートの粉末、Fig1-2の容器には牛乳が予めセットされています。A:光量検知Fig1の2にある黒い円形の台がありますが、この天板に照度センサ(光量を検知)が組み込まれています。容器が上に置いてある状態(暗い)容器を持ち上げてFig1-1の容器に入れる(明るい)容器を黒い台へ戻す(暗い)の暗い→明るい→暗いの一連の流れを検知して、Fig1-1の容器に”チョコレートを入れた”と認識しています。Aと同じく照度センサを使い、トリガー仕様は同様です。Bが終わった後に、平均的に混ぜ終わる時間を予め計測した秒数をタイマー管理して、次のステップへと送っています。混ぜる時にユーザが容器を手に持って混ぜるのは自然な行為だと思います。このナビゲーションシステムでは、容器や調理器具、食材のすぐ近くに必要なグラフィック要素を表示するため、リアルタイムでユーザの動きに追従する必要があります。そこでFig1-1の容器は人の動きを検知して、表示グラフィックが追従するよう実装しています。行い、特定の箇所を検知して追いかけています。”フライパンにパンケーキの材料(パンケーキミックス、牛乳、チョコレートを混ぜたもの)を入れた、垂らした”の検知ですが、フライパン上部からカメラを使いフライパンの色とパンケーキの材料の色の面積と画面内の動き(活動量)を解析、比較することで”フライパンにパンケーキの材料を入れ終わった”を検知しています。E:時間管理フライパンに材料を垂らした後の、表面の焼き加減の検知ですが、ここは材料を入れ終わった後、平均的にいい感じに焼きあがる時間を予め計測した秒数でタイマー管理して、次のステップへと送っています。展示会場のコンロ自体が最先端のスマートコンロを使用しているため、フライパンの表面温度を一定に保つ機能があり、時間管理だけで環境条件に依存せず焼き加減を一定の状態にすることが可能でした。この工程も実際はユーザの環境条件に合せてサーモグラフィーカメラなど別の検出条件で焼き時間を適宜ユーザの環境にアダプトするのが理想だと考えています。Dと同様にフライパンの色とパンケーキの焼き色の面積と画面内の動きを解析、比較して検知しています。Eと同じく、予め計測した秒数でタイマー管理して、次のステップへと送っています。Dとは逆で、パンケーキの焦げ目の色が画面上から消えた(面積が激減)したということを検知して、次へ送っています。今回の展示は、色々な制約がある中、一定の環境条件を揃えた上での一連の体験デモでしたが、パンケーキを作る工程はほぼ自動化が図れました。Things)として、こういった調理体験や行為の中のユーザのクセや行動履歴を収集・分析することで、将来的にはパーソナライズ化されたナビゲーションシステムへと拡張できると考えています。IoT時代の到来を迎え、こういったさまざまなセンシング技術が重要な役割を果たす時代になるでしょう。IDLでは、プロトタイピングするにあたり、様々なセンサやセンシングについてリサーチと選定、検討を繰り返してきました。最後に、それらの経験から代表的なセンサ類とその活用事例について、簡単に紹介したいと思います。センサと活用事例さてみなさんセンサとはそもそも何でしょうか?まずは五感で考えてみましょう。これら五感は何のためにあるかというと、我々人が外部の情報を知るために備わっているものです。何のために備わっているかというと、例えば、熱いものを手で触った時には、反射的に手を引っ込めます。これは手が”熱”を検知し、”熱い”という情報を処理して手を引っ込めたわけです。このようにセンサとは外界で起こるさまざまな物理現象を検出するものと定義できます。IoTの世界では信号はすべてデジタルである必要があり、我々の現実世界で起こっている物理現象をデジタル信号として変換する機能が必須なため、センサは読み取り情報によって、様々な種類が存在しています。・お風呂の給水、および排水検知etc...「モノのインターネット」と言われている時代、このように生活空間の中で多種多様に使われてきたセンサやモノがインターネットを介して互いに情報を共有・分析を行い、新しい体験や価値、有益な情報を生み出すことで、これまで実現できなかったような魔法のような世界が創り出される日も近いかもしれませんね。テクニカルディレクター。Flashを中心にキャンペーンサイト、インタラクティブデザイン、Webアプリケーション開発、RIA開発、ゲーム開発なと様々な企業のインタラクティブコンテンツ制作に従事。web制作会社を数社経験の後、2012年インフォバーンに入社。京都支社のテクニカルディレクターを務める。2019レポートーアクセス数は二の次でいい。2019年11月2019年8月2019年5月2019年4月2019年3月2018年11月2018年9月2018年7月2018年4月2018年1月2017年12月2017年11月Ask各種ご質問やご相談については下記よりお問い合わせください。