富士通研究所、部屋全体をデジタル化するUI技術を開発

富士通研究所、富士通デザイン、富士通ソーシアルサイエンスラボラトリは、富士通デザインが開設している新たな価値づくりなどに取り組む場「HAB-YU platform」にて8月よりから来年3月まで、富士通研究所が開発した部屋全体をデジタル化するUI技術と富士通SSLが開発した共創支援アプリケーションの実証実験を実施すると発表した。

富士通研究所が開発した部屋全体をデジタル化するUI技術は、持ち込んだスマート端末とその場に設置された表示機器が自動的に連携してUIをその場全体に拡張させる技術。プロジェクターとカメラを組み合わせた装置を複数設置して壁や机などの広い空間を一つのウィンドウシステムとして機能させることができるという。

また、ユーザーが持っているスマート端末の位置を認識しIDを特定するセンシング技術や大画面と人の動きが連動した直感的なUI技術も開発している。

ユーザーが持っているスマート端末の位置を認識しIDを特定するセンシング技術では、カメラなどで構成された環境センサーとスマート端末内のセンサーの連携により、ユーザーの位置と持っているスマート端末のIDを同時に検出できるもの。位置を正確に検出できるが端末IDは認識できない環境センサーと、位置はわからないが端末IDは取得できる端末内の慣性センサーの情報を歩く、止まるなどの人の行動を用いて紐付けることで、位置とIDのセンシングを実現した。これにより、個人とスマート端末を紐付けることができるため、特定のスマート端末の画像を共有・表示することなどが可能になるという。

一方、大画面と人の動きが連動した直感的なUI技術では、決められた簡単なジェスチャで、目の前の壁に自分の使用するスマート端末の画面を転送したり、アプリケーションを呼び出したりできるという。また、壁に投影された画面上に手書きでメモする操作、手書き文字を選択して文字認識する操作、認識結果の文字を付箋サイズで表示する操作など、大画面でのアイデア創出を補助する手書き文字をベースとしたUIを開発した。

実証実験では、HAB-YU platform(東京都港区六本木 アークヒルズサウスタワー3F)に設置された表示機器と持ち込んだスマート端末を動的に連携する技術を開発し、その技術を使って、アイデア発想のワークショップに参加した複数のメンバーが、様々な人のアイデアを共有することで効率よく活発な議論が行えることを検証する。富士通研究所は今後、「HAB-YU platform」での実証実験において抽出した課題から技術開発をさらに進め、富士通SSLと共同で富士通SSLがすでに販売している共創支援＆学習支援ツール「WebコアInnovation Suite」への適用を進めていく。