富士通研究所は、紙や本など実世界にあるものを指で直接選択するだけでデータのやり取りを可能にするシステムを開発しました。
"紙やいろいろな物がタッチパネルのように触って操作ができると考えています。この装置は、特別なハードウェアは一切使っていなくて、通常のウェブカメラ相当のものと市販のプロジェクターのみで構成して、画像処理の技術を使ってこの機能を実現しています。"
この技術を用いることで、書類を指でなぞって必要な箇所を電子データとして取り込むことができます。 操作対象となる実世界の物体の形状を計測し、カメラとプロジェクターと実世界の3つの座標系を自動で調整する技術により、テーブルや紙など平坦な面だけでなく、厚みのある本などの歪んだ面であってもタッチと表示を正確に合わせることが可能です。
"今までの手の動きを使ったジェスチャー操作は、ジェスチャーでパソコンやいろいろな機器を操作するといったものが多かったと思いますが、こちらはパソコンの操作をするものではなくて、直接実際のものに触って、その物とICTの機器を融合させようというインターフェースになっています。"