ゲームだけじゃない「Unityソリューションカンファレンス2014」開催。人間を拡張する技術に関する基調講演レポート

東京大学教授 暦本純一氏

　2014年12月4日，ユニティ・テクノロジーズ・ジャパンは都内で「Unityソリューションカンファレンス2014」を開催した。これは，ゲームエンジンとして知られるUnityを使って行われているゲーム以外の分野での事例を集めて紹介するカンファレンスだ。手軽にリアルタイム3Dが扱えるためか，バーチャルリアリティ関連での建築分野，医療分野などの出展・講演が見られた。ここでは，基調講演として行われた東京大学教授の暦本純一氏による「人間の拡張、スポーツの拡張」の内容を紹介してみたい。

　暦本氏は，ソニーコンピュータサイエンス研究所の副所長も務めており，同社で長くARやユーザーインタフェースなどの研究に携わっていた人物でもある。ARの基本概念を盛り込んだNaviCAMの開発が1994年（Windows 95が発売された頃），2000年にはマルチタッチデバイスの開発が行われている。現在，タッチデバイスで一般的に見られる，二本指を開いたり閉じたりするピンチイン/アウトのインタフェースやPS Vitaで使われた背面タッチを考案した人でもある。スマートフォンが登場し，ウェアラブルデバイスが注目され，時代が追いついてきた感がある現在，氏が見据える次なる技術はどんなものなのだろうか。

暦本氏が関わったプロジェクト

　冒頭，暦本氏は，1994年に作成したというスライドを提示し，コンピュータワールド（バーチャルワールド）とリアルワールドの人間との関わり方について，氏のスタンスを明らかにしていた。それは，リアルワールドとバーチャルワールドの間に人間が介在して操作を行うGUI，リアルワールドを廃しバーチャルワールドで代替するバーチャルリアリティ，リアルワールドとともに多くのコンピュータの情報もやり取りする，現在でいう“Internet of Things”のようなもの，そしてコンピュータで人間の能力を拡張する人間強化型の4種類に大別され，氏が重点的に関わっているのは人間強化型のアプローチである。
　なお，講演でたびたび出てくる「Augmentation」は拡張の意の英単語である。


　さまざまなインタフェースを開発してきた暦本氏だが，こういったコンピュータと人間の間にあるインタフェース以外に，人間とリアルワールドの間のインタフェースについても考えようということで，いくつかの例が紹介された。


　どのようなものかというと，（氏の研究ではないが）汗が出てくると通気性が上がるスポーツウェアなどが挙げられ，人間と環境の間に介在するインタフェースとして重要なものだそうだ。似た感じのもので，建物の外壁を可動にして外観を変えようというKinetic Facades（キネティックファサード）も紹介された。デザイン的にも面白く，通気性などを変えることもできる。コンピュータでのピクセルの概念がリアルワールドに展開されることで，暮らしやすさが変わる可能性があるという。


　氏が関わっているプロジェクトとしては，透明度が変わる液晶ガラスを使った「Squama」が紹介された。これは内部にあるパーティクルの疎密度を変えることで透明度を制御することができ，タイル状に並べると粗いピクセルとして扱ったりもできる未来の窓ガラスだ。あらゆる建築物の窓がディスプレイになるというビジョンも示された。


　この素材を使ってなにをしているかというと，まず視野の遮蔽が紹介された。これは，外部から部屋の中の人の顔や見られたくない部分が見えないように部分的に隠してしまおうという技術である。マンションなどで，リビングから外を眺めると隣のマンションのリビングが見えるといった状況でのプライバシー確保などが念頭にあるようだ。
　デモでは，覗いている人の位置から計算して，見られたくない部分を隠すように窓の一部が曇る様子が示されていた。なお，人体の認識にはKinectが使われているとのこと。
　そのほか，窓の外の風景の一部を描き変えて看板を消すとか，指定した場所にだけ影を落とすといった応用も「未来の窓」には期待できるようだ。

顔の位置を認識して外から見えないように「部分的に窓を不透明にする」といったデモが示された

風景から看板を消し去る

指定位置に影を作る。温室は，温度が上がりすぎるのでエアコンが使われることもあるが，光合成に必要ない部分の光を遮蔽できれば省エネにもなる

透明度変化型の液晶ではなく，最近出てきた透明液晶を使って情報表示している例

　続いて暦本氏は，ナイフなどの道具を例に，「ツール」と人間の能力の拡張について話を広げ，機能を提供することで人間の能力を拡張するものと定義していた。優れた職人に見られるように，道具と一体化しているような理想的な状況では，道具が人間の能力を拡張しているとみなしてもよいだろう（図中の「Unity」は開発ツールのUnityではなく「一体化」の意）。スマートフォンなどのように，道具が複雑になってくると人間との関係が分かりにくくなるのだが「どういう能力を与えているか」という観点から見ることが重要だとのこと。


　人間の能力を拡張するということに関しては，マウスの発明者であるダグラス・エンゲルバート氏の有名な論文での「マウスの発明は人間の知性を拡張していくプロジェクトの小さな断片にすぎない」という言葉を挙げ，こういった試みが50年以上前から行われていることが紹介された。


　また，IBMのコンピュータが当時の世界チェスチャンピオンだったガルリ・カスパロフ氏を下したとされる一戦を挙げ，ではチェスは終わってしまったのかと問いかけつつ，最近の動向が紹介された。Cyborg Chessは，人間とコンピュータが組になって対戦を行うもので，コンピュータの計算力を利用した新しいチェスの競技になっているという。
　2045年にはコンピュータが人間の知性を超えてしまうと信じられているそうで，チェスに続いて将棋などでも人間のチャンピオンがコンピュータに敗れる日は遠くないと氏は見ているようだが，そのようなテクノロジーを人間の能力を拡張する方向で使われるようにしていくが氏の目標なのであろう。


　ここで人間の能力を拡張していく例として紹介された概念が「Jack-In」というものだ。
　例を挙げると，人間の視覚をドローン（小型ヘリコプタ）のカメラと連結し，感覚を拡張するような技術となる。人間の後ろからついてくるようにプログラムしてランニングフォームを確認したり，水中潜行ロボットにカメラをつけて水泳フォームを確認したりといった研究が行われているという。スポーツ関係ではかなり有用な研究となりそうだ。


　ここで話題は一転して，表情フィードバック仮説が取り上げられた。これは，嬉しいと笑顔になる事象を反転して，笑顔にすれば嬉しくなるんじゃないかという身体心理学上の仮説だ。因果関係は逆転しているのだが，多くの実験では効果が裏付けられている。紹介された「ボールペンをくわえる実験」では，縦向きにくわえた人よりも横向きにくわえた人のほうがポジティブになるらしい。


　これを応用していくためのデバイスがHappiness Counterという機器で，カメラによる表情認識によって，笑顔かどうかをチェックすることができる。それを鏡に取り付けて笑顔を確認できるようにしたり，笑顔でないと開かない冷蔵庫を作ったりといろいろな実験が行われている。その冷蔵庫を高齢者のところで実験した様子が報告されていたが，初日の笑顔はぎこちなくても，10日も経てば自然な笑顔ができるようになるという。


　これを会議室の開閉に利用すれば，会議の中身も変わるのではないかといったものや，目覚まし時計に付けて，朝から笑顔で1日を開始するような応用が検討されているようだ。

　話題は再度Jack-Inに戻り，今度は他人の視界を共有する技術について紹介された。暦本氏が「最も成功したウェアラブルデバイス」と語った小型カメラGo Proは，さまざまな人の体験を映像で共有することを可能にしている。氏の研究では，そこからさらに一歩進んで，視界を共有したり，撮影者の場所で自由に視野を変えることができるようなシステムが模索されている。

　まず，HMDとカメラを組み合わせたデバイスでは，着用者が見た景色を自動的につなぎ合わせて周りの情景を構成しつつ，遠隔地にいる第三者がその空間内でいろいろ見渡すことができるというシステムが紹介された。離れた場所から道案内や探し物の指示などができる。

実験に用いられたデバイスとその視野映像

　
　さらにそれを進めて，全周囲カメラと組み合わせた例も紹介された。LiveSphereは6方向にカメラがついたサークレット状のデバイスで，頭にかぶれば，その人の周りの情景を遠隔地に送ることができる。


　全周囲映像なので，Oculus Riftのようなデバイスを使えば，第三者が装着者とは別の視線でものを見ることができる。それを使ったバンジージャンプや鉄棒での大車輪などのデモが示された。

大車輪中の映像

　ただ，そういった激しい動きでは第三者が「酔う」危険が大きく，それを軽減させるために，装着者の動きを取り去るイメージスタビライザの技術が導入されることになった。
　これにより，先ほどの大車輪やトランポリンでの空中回転などといった激しい動きでも映像は大きく動くことなく，装着者の位置からの映像を第三者が自由に見渡せるようになる。まあ，上下移動しているだけなので，これだと空中回転などは追体験できないのだが，全周映像の共有では非常に意味のある技術である。

大車輪の映像にスタビライザを適用

こちらはトランポリンでの宙返り中

　感覚の拡張として紹介されたAquaCaveというプロジェクトは，映像を投影した水槽内で体験するバーチャルリアリティである。全壁面に映像を投影するイリノイ大学のCaveというプロジェクトを水中にしたようなものらしいが，小さなプールにいながら世界中の海底を泳ぎ回ったり，空中を泳ぐ（！）こともできるのだという。浮遊体験ができるバーチャルリアリティというのは珍しいらしく，体験としても非常に印象的なものになりそうだ。


　最後に紹介されたHoverBallは，球状の枠に入ったドローンをボールに見立てて遊ぶ，インテリジェントな球技用デバイスだ。ハリー･ポッターに登場する魔法球技「クィディッチ」がイメージ映像として紹介されたのだが，ボールの速度を変えたり，必ず相手のもとに届くようにしたり，逆に軌道を自在に変えた変化球でのキャッチボールなどができる。このまま実用化というのは（強度的に）難しいとは思うが，これがテクノロジーによって拡張されたスポーツの姿ではあろう。


　最後に，暦本氏は，ネットワークの進化が，単純なネットワークからIoTによるモノのネットワークに進化していることに触れ，その次にくるのは能力のネットワークだろうと予測する。ゲームと直接関係のない話ではあるのだが，未来のエンタテイメントや暮らしのあり方を啓示するような示唆に満ちた講演だった。