腕がびよ～ん、指がびよよ～ん - 情報処理学会「インタラクション2016」で身体拡張など先端研究に触れてきた

●影絵のようで影絵でない?
3月2日から4日まで、東京都千代田区の科学技術館にて情報処理学会(5つの研究会)が主催するシンポジウム「インタラクション2016」が開催された。展示はパネルではなく、デモを交えたインタラクティブな発表となっており、最終日の4日は一般の来館者も無料で展示を見ることができた。最終日の発表から、面白そうなものをピックアップしよう。

○影絵のようで影絵でない? プロジェクタを用いたインタラクティブシャドウ

愛知工業大学のグループは、実物影と仮想影を使ったデモ。手前にはMicrosoftの入力デバイス「Kinect」と仮想影を投影するプロジェクタ、そしてスクリーンの手前に仮想光を投影するプロジェクタがある。

人間が手前のプロジェクタとスクリーンの間に入って行動することで、スクリーンの影が変化するという仕組みだ。Kinectでオブジェクトの認識を行い、これに対するアクションでバーチャルの影が動く。

デモでは、じょうろ、植木鉢、カボチャ、鳥かごをオブジェクトとして用意。これらを動かしたり触ったりすることで、仮想影と仮想光が表示される。人間のボーンモデルを使えば「人が立っているのに奥の影はガイコツ」といったこともできるそうだ。

○タブレットやスマホを通じて手を伸ばす「Extended Hand」

大阪大学のグループは、スマホやタブレットを通じて遠隔に投影する身体拡張技術を披露した。過去にAndroid向けのアプリを作成したことがあるそうだが、今回はWindowsタブレット向けのアプリを開発。サイトからダウンロードして試すことも可能だ。ただしWindows 8.1用で、Windows 10では不具合が出るケースがあるという。

○指がもっと長ければ(多ければ)、ピアノをうまく弾けるに違いない

身体拡張を疑似体験するシステム「えくす手」を展示していたのは、東京大学のグループだ。画面が投影された装置に手を入れて「ピアノ」を弾くと、バーチャルなピアノ画像を表示するのだが、デモでは10本指という何とも微妙な物体がピアノを弾いていた。「身体拡張」といえばその通り。

●懐中電灯じゃダメですかぁ?
○懐中電灯じゃダメですかぁ?

福山大学のグループは、展示物の一部を照らし出すスポットライティングがテーマ。Kinectのボーンモデルを使用して、腕にライトを持っているかのように照らし出す。複数人や両手での指示も可能で、デモ設定ではグーで移動可能。パーで位置固定といったように、指示者の負担を減らす実装を紹介していた。なお、博物館で展示内容の説明をする実験も行われており、おおむね好評だったそうだ。

○自動ドアでプロジェクションマッピング

慶應義塾大学大学院メディアデザイン研究科のグループは、自動ドアに新しい体験を生み出すというプロジェクションドアを展示。自動ドアが開閉する度合いはセンサーでわかるので、動きにも対応する。既存のガラス製自動ドアに特殊スクリーンを取り付けて、投影用プロジェクタやシステムを置くことによって、イルミネーションや広告利用を想定しているようだ。

実際の設置例として、昨年(2015年)の「SIGGRAPH ASIA会場」がある(SIGGRAPHは、Special Interest Group on Computer GRAPHicsの略で、コンピューターグラフィックの分科会)。また、神奈川県・海老名市の「RICOH Future House」に試験導入中ということだ。

●「肌」と「超音波」の入力装置
○音を可視化する室内音響認知支援システム

青山学院大学のグループは、室内音響認知支援システムを展示。Kinectのステレオマイクを使って、音源の位置を推定し、中心周波数に応じた擬音語を表示する。中心周波数によって文字を変えているので、画像だけで音の雰囲気がわかるのは面白い。

○「肌」を伝う超音波でウェアラブルデバイスをコントロール

早稲田大学のグループは、肌を伝わる超音波の周波数分布に着目。手首に付けたトランスミッタとレシーバ、反対側の手に持つレシーバを使用し、ジェスチャーやタッチ位置によって変化する超音波の周波数分布を、入力装置として使用するデバイス(プロトタイプ)を展示していた。

現状では被験者が少ないものの、かなり高い認知率を出している。いわゆる「腕時計型ウェアラブルデバイス」の入力範囲を、大きく広げることができそうだ。ただし、認知率を上げる周波数範囲の拡大や、デバイスに組み込むための小型化と省電力化が今後の課題ということ。実用化への道はまだ遠そうだ。