ビデオシースルー型拡張現実感のためのステレオ画像合成

神原 誠之 (9751038)


現実環境と仮想環境を合成する技術は拡張現実感と呼ばれ,現実環境に情報 を付加することが可能であることから新たな情報提示手法の1つとして注目 されている.拡張現実環境をユーザに提示するには,幾何学的整合性問題を 実時間で解決する必要がある.幾何学的整合性問題には,現実環境と仮想環 境の位置ずれのない環境をユーザに提示するためにユーザの視点の位置姿勢 情報を獲得する問題と,正確な奥行き前後関係を表現するために現実物体と 仮想物体の位置関係を推定する問題とが含まれる.

本研究では,幾何学的整合性問題を解決した拡張現実環境の実現を目的とし, 現実環境と仮想環境のステレオ画像合成手法を提案する.ここでは,現実環 境と仮想環境の時間的な同期が取れるため,幾何学的整合性問題を解決すれ ば,画像の合成段階では理論的に両者の位置ずれが生じないという特徴を持 つビデオシースルー型拡張現実環境に注目した.本手法は,まず,現実環境 中に配置されたマーカを,2眼のステレオカメラで撮影した画像からカメラ パラメータを推定することで現実環境と仮想環境の位置合わせを行なう.つ ぎに,現実物体と仮想物体の正確な前後関係を表現するため,ステレオ画像 対から,現実環境の奥行き情報を動的に取得する.その際,カメラパラメー タから仮想物体の投影される画像上の領域を求め,その領域に対してのみ奥 行き推定を行なうことで計算量を削減する.最後に,それらの結果を用いて 画像を合成し,ユーザへ提示する.また,頭部装着型ディスプレイ(HMD: Head Mounted Display) に取り付けられた2眼のステレオカメラを用いたビ デオシースルー型拡張現実環境提示システムのプロトタイプを試作し,提 案手法を用いた画像合成の有効性を確認した.