#1」が開催されました。このイベントは、AR技術による価値創造実現を見据えて発足した、日本初のARコミュニティイベント「ARISE」の第一弾。日本のAR業界を牽引するトップランナーによるトークや、最新デバイスのデモなど、多数のコンテンツが用意されました。CEOの水口哲也氏によるスペシャルセッションの模様から、冒頭の自己紹介パートを中心にお送りします。2」と題しまして、本日は建築家の豊田啓介さんとエンハンスの水口さんと一緒に、これからの建築系のARであったり、もしくはコモン・グラウンド、それからARの可能性について、3人でディスカッションできればと思っています。ご登壇されていますけれども、みなさんもう1度拍手をお願いします。(会場拍手)それではお2人から、ご自身がどういったことをやられているのかというのを、資料をお見せしながらお伝えいただければなと思います。豊田さんからお願いします。豊田啓介氏(以下、豊田):みなさんこんにちは。noizの豊田と言います。ディスカッションのつかみということで、いくつか乱暴にネタを投入できればと思うんですが。僕は建築の設計事務所をやってまして、建築家という肩書きにはなるんですが。「コンピューテーショナルデザイン」という言い方をするんですけれども、デジタル技術を使って設計とか施工とか、その前後の使い方とかがどう変わっていくのかに注力しながらやっている建築の設計事務所として、noizを東京と台北の二拠点で二人のパートナーと一緒にやっています。いわゆる建築として建物を作ったりするのが本業なわけですけども、プログラミングだけ納品したりとか、インスタレーションみたいなことをやることも多くて。(モニタに流れるデモを指して)例えばこれはBAOBAOさんのちっちゃいショーウィンドウのディスプレイだけなんですけども。BAOBAOさんから、この柔らかくて伸びるLEDスクリーンを使ってくれという、ぜんぜん根拠のない依頼があって(笑)。しようか迷ったんですが。4年くらい前なんですけどね。「伸びる」というおもしろさは使わなきゃいけないけど、まだ開発中の商品だったので解像度低いわ、発色悪いわで、どうしようみたいな話で。結局BAOBAOのロゴとちょうど解像度が合ったので、こう自律的にどんどんロゴが自壊していくようにプログラムをすることにしました。その上であえて柔らかいディスプレイの下にファンを付けて。ファンがたまにランダムなタイミングで風を送ると当然ディスプレイがはためくんですが、同時に映像もその風で飛んでいくように、あえてロゴも勝手に飛んでいくみたいなことをやっています。これはもちろん、のれんみたいに風が吹いてバサバサやるっていうのは物理現象で、でもロゴが風を受けているみたいに飛んでいくのは、当然物理シミュレーションをやっているので計算の話です。実際にはインタラクションしてないんですが、そういうことをやればあたかも情報と物理がインタラクションしているような、情報としてのデジタル画像のほうが物理的な素材感を持つ、みたいなことができるんじゃないかと思っています。高次元の情報を高次元のまま記述して、外部化できるようになった豊田:僕ら建築家は当然物理世界を扱う職能なわけですが、情報と物との境目みたいなものがどんどんなくなっていく可能性というのも、デジタル技術をきっかけにしてできるんじゃないかというようなことをnoizでは特にやっています。情報と物質の境界というものがどんどんなくなっていくみたいなことをやっているんですが、普段は1時間くらいかけてなんとかお伝えする内容を、今回10分くらいでパーっとやるのでかなり強引なんですが(笑)。(スライドを指して)このダイアグラムをよく使わせてもらうんですが......右下ですかね。建築家っていわゆるXYZの......あ、これはうちのWebページでもダイアグラムを公開してるので、今撮らなくても大丈夫ですよ。(会場笑)興味のある方は言ってください。建築家ってXYZの物理空間を扱うプロフェッショナルというのが古来より数千年来続いてきたわけです。実際には3次元だけでなくて、例えば工程っていう時間の因果関係とか、素材とか構造とか、いろんな情報として扱える次元を扱うわけですね。3次元どころか10次元、20次元、50次元、100次元っていうのを扱っているんですが、その高次元情報というのは、どうやっても他者と客観的に共有しようがないんですね。結果的には、3次元くらいまでのものの組み合わせでしか我々人間とこの世界では客観的な共有ができないと。それを僕らは、2次元の図面か、せめて3次元の模型というものに、本来はある高次元情報をダウングレードして共有していたんです。そのプロセスを洗練させることで3次元のオブジェクトを作るというのが数百年来の建築の正しい道だったと。プログラミングができることで、高次元情報を全部......とは言わないけれども、高次元のまま記述して、外部化して流通させてグレードアップして、みたいなのができるようになりつつある。これってけっこう画期的なことです。それを使っていくと高次元を記述するプロセスモデル、いわゆるグラフィカルコーディングみたいなことを感覚的に使ったり、それで出てくるかたちを見て、またフィードバックをして、みたいなことができるようになってきました。これまで勘とか経験とかいうあいまいなものとしてしか扱えなかった高次の知の体系が、外部化して共有できるようになってきているわけです。情報的相対自体が建築だとして、建築家はその技術体系を手にしているのか豊田:さらに、それを使ってできたかたちを無理矢理作るのは難しいっていうのが、例えばザハ・ハディドの新国立競技場だったりするんですが。今であれば、例えばデジタルファブリケーションとかいろんなものが出てきてますし、変な形を変な形のまま出すほうが、むしろ合理的な作り方だっていうのはあるかもしれない。いうものを開発するというのも建築の世界の仕事だろうと。左上のデジタルファブリケーションっていう、道をもっと開こうよといったことにいろんな機械を使っていたり、そこの開発に投資するのが今建築や都市領域に必要なことでしょと。それでできたものを使っているデータとか、新しく環境が変わったときにそれをスキャンして、また取り込んでデータをアップデートして、またそれを作ってみたいと考えていくと、できたものはできて終わりじゃないと。物理世界の変化する情報をいかにデジタル世界に取り込むかっていう、センシングやスキャニングが今、すごく大事になってきてるんです。使っているうちにまたフィードバックして、上から新しくなってっていうアクティブなフィードバックループがあるとすると、そのより広義な情報的総体みたいなものが実は本来建築のあるべき姿で、建物という物理的な構造物は実は氷山の一角でしかないのかもしれない。情報的総体こそが本来あるべき建築だとしたときに、我々建築家がそれを扱うノウハウとか技術体系を持ってますかというと、たぶん持ってないよねっていう意味で、その拡張した領域をちゃんと扱える建築というのは何があるのかな、みたいなことをいろいろやっています。さっき言った道、デジタルファブリケーションくらいまではだいぶできてきたんですが、もう一度、できたものとか現実にある状況をどう取り込んで、今度はデジタル側に持ってきて、もう1回さらにアップデートするために必要なのがスキャニングとかセンシングとか、群データの制御みたいなところになってくるわけですね。ここがクリティカルですと。なると、もう建築の世界は参照できなくて。ゲームとか映画の世界が参照先になるんです。僕たちは建物を死体として扱っている豊田:今ってもう、映画の撮影はこんな感じなわけですね。ベネディクト・カンバーバッチがモジモジくんみたいなスーツを来てるんですが、全身にマーカー付けて、声と動きと表情も全部モーションキャプチャしているわけです。『トイストーリー』の最初のころというのは、顔をいくつかのパッチに分けて1個1個スライダーで表情を作っていたのが、今はモーションキャプチャーで何百万点も同時に扱えるようになってきている。複雑すぎて、すべてのパッチにスライダーを付けて手で入力するなんていうことは逆にできなくなってしまってるわけです。なると、カンバーバッチを雇ってモーションキャプチャーのスタジオを作って、機材を使って一発撮りするのが一番安くて合理的な手法になるわけですね。いうことで、ある技術の分水嶺を越えたときに、なにが安くてなにが高いかみたいなものがどんどん変わってくる。いう扱いの仕方っていうのが、例えば映画とかエンタメの世界に先に入るんですが、本来はこれ建築がやらなきゃいけない話なんじゃないかと思うんです。身体についても、モーションキャプチャーとか骨格・筋肉のシュミレーションで、僕の身体がジャッキー・チェンみたいな動きをすることもできるようになる。人体だとそれくらいセンシングとかシミュレーションの研究進んでるわけですが......例えばこの建物にセンサーがどれだけ付いているかというとぜんぜん付いてないですし。そもそも動いたり変化したりする前提ないから、シミュレーションがどれだけできますかっていってもできないですし。僕らは、建物は死体として動かない、センシングもしないものであることを、当然のように諦めて納得しちゃってるんですが、もっとできてもいいんじゃないかと。センサーがあって積極的に動いていいんじゃないか、みたいなことを考えるわけですね。実際、技術としてはできるはずなので。20年後の都市計画に必要なノウハウ豊田:例えば筋電義手みたいなものがかなり実装に近づいてきています。(モニタに流れるデモを指して)このおじさんは腕がない方で、筋電のセンサーを複数入れておいて、もちろん練習は何度もしなくちゃいけないんですが、練習すると、考えるだけでこの腕が動いて水を飲んだりできるようになると。これができるということは、普通の人間の能力をどんどん超えていく可能性がある。腕が3本あってもたぶん動くわけですし。4本あっても動くし、5本くらいはたぶん動かせるんじゃないか。いうことができるという前提になったときに、いわゆる不足を補う技術というよりも、能力を拡張する側に技術が展開し始める。腕が肩に付いている必然性はないわけですよね。同じ原理で床に付いてたって腕は動くし、玄関に付いててドアを開けてくれるようにしたっていいわけですし。タクシーに付いてれば運転できるかもしれないと。要はどこまでが自分の体で、どこから先が環境かみたいな、これまで哲学的だったような問いまで、普通の市販品が問い直すような状況起り始めているわけです。技術で身体や物理環境そのものが実装環境でありインターフェースでもありのような形でどんどん曖昧になっていくようになったときに、なにをもって建築で、なにをもって自分の体で、誰がどれを制御するのかみたいなことを、僕らはガチで建築の環境として設計しなきゃいけない段階になっています。それをどう制御したらいいかというノウハウを僕らは持ってないわけですね。そのへんをもっと建築という世界に閉じずに考えてなきゃいけないと。Robotics(アマゾン・ロボティクス)みたいなところでやってますが。倉庫と単体の制御しやすい環境ですが、今これができているということは、たぶん10年後の都市の交通とか物流とかっていうものが、複合的にこういう群知性というか、個別制御ベースなのに全体最適するような新しいシステムでの制御をせざるを得なくなるわけです。それを前提にしたときに、どういうセンサーがどういう範囲で付いていて、それに対してどういうスケールや密度、形式のシステムを街が持ってなきゃいけないのか。そのノウハウを僕らはやっぱ持ってなくて。これがないと、たぶん今は都市計画ってできないはずなんですね。20年後の都市計画なんて、今普通に始めないといけないのに、です。豊田:それをやるにあたって、当然エッジ側の開発はいろんなメーカーさんがやっているので、僕ら建築側としてはエッジが認識しやすいデータ形式で、ある程度汎用的な環境をあらかじめしておいてあげるというのが重要だろうと考えているわけです。複数のサービスに共通する環境側のデジタルプラットフォーム化ってどういうことで、そこにどういう単位で、どういうマーカーが、どういうセンサーが入ってると彼らが動きやすい環境として汎用化できるのか、みたいなことを設計事務所としてやっていたりします。今の建築ってBIMっていう結構な精度の3Dデータを環境として作るんですが、ただBIMはあくまでも建設という閉じた世界にしか特化してないので、いろんなサービスの環境データとしての能力は非常に低いんですね。これをどう環境データ化してあげるか。BIMがないところを点群スキャンして環境データ化してあげるか、みたいな。いわゆる点群と、たぶんゲームエンジンがベースになるんですが、BIMデータっていうものをどうシームレスにつないであげるかみたいなことを開発したり。ゲーム中での各種のキャラクターAIとか、ゲームの世界で使うようなAIみたいなことを参照して、実世界でいろんなエージェントとか環境が主体的に動ける状態を作っていくための参照や実証実験をしてみたり。芸大のキャンパスをまず点群スキャンして、これをどういうデータ形式で、どうすれば半自動で変換できるか、みたいなことをやったりしています。いうのを「コモングラウンド」という言い方をしています。コモングラウンドっていうのはわれわれ物理世界の住人にも認識ができて、同時に自律走行モビリティやロボット、ARアバターなどいろんな形のデジタルエージェントにもちゃんと物理世界が認識ができるような、情報と物が重なり合っているような世界のことを言っているわけですが、そんな環境をまず作ることからしか、そこから先へは行けないだろうみたいなことを最近言ってるわけですね。それって以外なくらいに新しくゼロから作らないといけない領域なんです。その実装機会として、2025年に万博が大阪に来ることが決まったんですが、その会場計画にも僕はかかわっていて。コンセプトとしての誘致段階の計画段階では、配置の決定やバランスの制御もインタラクティブです。作ったあとも、もちろん建物は動かない部分が多いんですけれども、いろんなレイヤーで考えたときに、高次元に考えればインタラクティブであるとか、機能の定義や所有の形態が状況に応じて移動するとか、さらには会場や会期というものに制限されない、いろんな高次元のインタラクションのかたちというのを、いわゆる広義の会場計画としてデザインしなきゃいけないみたいなことをやったりしてます。それではあまりにも複雑すぎるので、いろんな入り口から徐々にできることの組み合わせを示して、いろんなプレイヤーに徐々に開発と実装を進めてもらわないといけない。その一環として(スライドを指して)例えばこんなものを考えました。解体がきまってしまった昭和の名建築で「都城市民会館」というものがあるんですが、その建物をいろいろな方に協力してもらってスキャンして......3Dスキャナーやレーザースキャンを使ってデジタル化して、複数のデジタルデータとして後世に残すっていう価値の提示もアリじゃないかと。今ちょうどスキャニングの作業が済んでいて、昨日このポケットAIみたいなもののアプリが公開されたところです。これをいろいろダウンロードして、今ちょうど解体が始まった建物はどんな使い方ができるのかな、みたいなものを遊んでみたりしています。建築って、たぶんモノとして以外にもいろんな価値の生み方があるはずで、その辺がまさにARとかそういう世界と繋がるんじゃないかと。まとまりがないですが、ネタの投入ということで。ありがとうございました。小林:ありがとうございます。お話ししたい内容をけっこう詰めていただいた感じですけれども、けっこうARとかの深い部分でこのあといろいろお話させていただければと思います。続きまして、水口さんお願いします。水口哲也氏(以下、水口):水口と言います。エンハンスという会社の代表をやっているんですが、2014年に起業したばかりのまだスタートアップ......でいいんですかね。実はアメリカで起業しまして、東京で研究開発をしています。マーケティングとかビジネスの拠点はアメリカに持っているということですね。その理由は何かと言うと、2013年から2014年くらいでしたかね、「VRからXRが始まるぞ」みたいなときに、どうしてもやっぱりアメリカの会社のプレーヤーが多いじゃないですか。新しいテクノロジーがシリコンバレーからガンガンやってくるので、日本にいるとすごく時間がかかっちゃうんですよね。契約事もそうだし、交渉も。アメリカにいるとアメリカの会社としてすぐに交渉ができるということで。日本にいると、日本の法人を通さなきゃいけないという変なルールが多い会社がたくさんあるんですよね。それでアメリカで起業しました。あとシナスタジアラボ(共感覚ラボ)。シナスタジアって共感覚という意味なんですけど、ここのラボの主催もやっています。僕自身はいろんなゲームを今まで作ってきたんですけど、とくにエンターテインメントの世界で時間をいっぱい使ってきて。Eden」というゲームですね。音がシンクロして、音楽化していくっていう。指揮者のように遊ぶっていうものです。Infinite」というゲームです。プレイステーション4とプレイステーションVRで遊べるようなかたちでスタートして。そのあとPCとかOculusとかで展開していきました。今日はちょっと音が出ないので少しさみしいですけど(笑)。効果音をどんどん音楽化していくのを3Dで見るという、音楽を目で見ていく、視覚的に見ていくという、そういったちょっと不思議な体験を目指しています。テトリスをVR化したのか?水口:エンハンス自体は、共感覚的でまったく新しい未曾有の体験を作るということを念頭に置いてまして。それを言語に関係ないグローバルで、世界中の人が体験できるというようなコンテンツ作りを続けています。最近、去年ですかね、テトリスをVR化しました。VR化するというときに多くの人が「え?」って。「なんでですか?」みたいな(笑)。小林:テトリスってめっちゃ2次元じゃんみたいな(笑)。水口:「別にテトリスをVRにする理由がないんですけど」みたいなことをみんな最初は言うんですけど、実際にやると「あ、そういうことだったんですか」というね。これは作る前のアートとかからスタートするんですけど、実際に1つひとつのアクションの効果音が音楽化して、テトリスを揃えるのがまるで演奏するような気持ち良さに変わっていく。周りの世界がどんどん変化していきつつ、ストーリーテリングになっていく。これを3Dで見ていますので、フレームのない3Dの世界で体験すると、かなりオーバーウェルミングな体験になるというところは、いろいろと実証できたかなぁ思っています。あとはゲームの周辺で、アート系のこともいろいろと試していて。Tokyoという、毎年六本木ヒルズで2月から3月に行われるメディアアートの祭典みたいなのがあるんですけど、そこでシナスタジア・スーツというのを発表しました。共感覚スーツってやつですね。触覚(ハプティック)デバイスを26個、全身に配置して、VRでゲームをやって、ゲームプレイと完全にシンクロした音楽を、テクスチャー付きの触覚で全身で感じるとどうなるのかってことを試してみたかったんですね。キックとか、バスドラムがバーンバーンバーンときて、それがドラムで本当に叩かれているような触感が下半身にきたり。肩にハイハットが来て、例えばドッドッドッと感じたり。触覚が音ともに全身を動いて体験するっていう、ちょっとみなさんが体験がしたことのないような未体験ゾーンというのを試してみたかったということですね。水口:(モニタに流れるデモ動画を指して)これまたちょっと違う試みなんですけど。VENTっていうアートエキシビジョンで、我々がやってるようなパーティクルを無数に出して、それを音楽とフィジクスを連動させるっていうような、そういうインタラクティブなアート作品を作りました。大谷石採掘場ってありますよね、宇都宮のほうに。縦35メートルの大きい天井にプロジェクションして、Kinect的を使ってインタラクティブなメディアアートをやってみようということでやりました。これが最後なんですけど。2.44」という、椅子も実は作ってしまったんですね。これはハプティックチェアなんですけど、どういうふうになっているかと言うと44個の振動組織を全身に配置して、音楽とともに触覚が全身を動くんですね。音を今聞いてもらえないのが残念なんですけど、想像してみてください(笑)。これで体験すると、実はビジュアルは光しかないんですけれども、かなり共感覚的な新しい体験ができる。MESONの梶谷さんは「これもARだ!」ってブログに書いてくれましたけど。いうところから、実際にAR的なグラスをかけてどういう共感覚的な体験ができるかみたいなことも、今ちょっと実験を始めています。