日常生活にＶＲ（仮想現実）を溶け込ませるための技術開発が進んでいる。スマートフォンなど身近な端末で周囲を３次元計測し、ＣＧのキャラクターや家具、矢印などを配置する。ＶＲ家具を部屋に表示して模様替えの様子を確かめたり、道案内などに使える。ＶＲと現実の境目が失われる日は近付いている。

立体破綻なし

　ＶＲを現実世界に重ね合わせる技術は拡張現実（ＡＲ）や複合現実（ＭＲ）などと呼ばれる。従来はスマホのセンサーで東西南北や画面の傾き、場所を計測して、方向と距離を合わせてＣＧを表示する程度の応用が多かった。ＣＧを画像の上に表示するだけで、家具や扉などの物陰に隠れることはない。家具などの多い部屋の中では簡単に立体表現が破綻してしまった。

　米グーグルはスマホの単眼カメラと中央演算処理装置（ＣＰＵ）一つで３次元計測しＡＲ表示する技術を開発した。二眼カメラなどのない普及用端末でも立体破綻のないＡＲを楽しめる。

　新技術では画像だけでカメラから映ったモノまでの距離を推定する。スマホをもって歩くなど、カメラを動かすと少しずつズレた画像が連続的に撮れる。このズレを二眼カメラの視差のように利用して粗い距離イメージを生成する。この段階では３次元データはひどい凸凹があるが、滑らかに処理してきれいな平面に直した。扉の陰からこちらをのぞくキャラクターや、テーブルとイスの寸法や立体配置を正しくＡＲで表現できる。

誤差１ｍ以内

　米メリーランド大学は施設内案内ＡＲを開発した。建物の間取りなどはクラウドに用意し、スマホのカメラとジャイロセンサーで自分の位置や移動量を計測する。同大のタル・ルスタギさんは「床を撮って目的地を選べばリアルタイムにルートをガイドしてくれる」と胸を張る。床の平面を基準面にして建物の間取りデータの縮尺を現実空間に合わせる。誤差１メートル以内でガイドできる。

　東京大学の大石岳史准教授とローハス・メナンドロ博士研究員らは、ＶＲと現実の重ね合わせをよりリアルにするために物体認識を導入した。道路や自動車、植木などを、背景と単純物体、複雑物体の三種に分類する。単純物体とＶＲの境目はクッキリなまま、複雑物体との境目はぼかしてなじませる。大石准教授は「なじませると自然になる」と説明する。枝葉の陰や金網フェンスの裏のように自然光が複雑に散乱する場合、クッキリとＣＧと現実を重ね合わせると不自然さが目立つ課題があった。

　自動運転車やバスなどの車内からＡＲで観光する用途に提案する。屋外は単眼カメラだけでは距離データを作るのが難しい。だが車両に搭載したレーザーセンサーや全周カメラ、計算機などを利用できる。リアルタイム物体認識のように計算負荷の大きい処理も実装可能だ。大石准教授は「将来、ＶＲか現実か簡単にはわからないようになる。人混みの中をＡＲのキャラクターが自然に歩いているようになれば世界観が変わる」という。ＶＲと現実が急速に混ざりあっている。
（文＝小寺貴之）