Facebookはより良い仮想ミラーを作ることができるカメラシステムを作った

SIGGRAPHはすぐ近くにあり、Facebook Reality Labのような研究グループが最先端の研究の一部を明らかにし始めています。 FRLの最新情報( 以前のOculus Research )は、実世界からの鏡の外観を捉える方法を示しています。

新しい研究 鏡と反射面を特徴とする複雑な現実世界の環境の様子を撮影するための扉を開きます。 ミラーは数多くのコンピュータビジョンアプリケーションの敵であり、Facebookの調査がその問題を解決するために使用できる場合、最終的には多くの有用なアプリケーションにつながる可能性があります。

“ミラーとガラスの表面は、私たちの日々の環境の中で不可欠な要素ですが、スキャンするのは難しいことで有名です。 反射された平面ターゲットをロバストに検出する簡単な考え方から、ミラーとガラス面を備えたシーンの堅牢で正確な再構成のための完全なシステムを実証します。 レポートは読む 。 「捕捉が容易であることから、我々のシステムは、反射表面を検出するための学習ベースのアプローチのためのトレーニングデータを収集するためにも使用することができる。 室内シーンをスキャンする当社のコアアプリケーションに加え、複数の拡張とアプリケーションを想定しています。

システムは、カメラリグ上にあるターゲットを探してミラーを見つけ、画像のさまざまな特徴を分析してミラーの形状を精緻化します。

「私たちの重要なアイデアは、キャプチャリグにカメラを鏡やガラスの表面に向けてしか見えないタグを追加することです。

最も明白なアプリケーションは、VRでより現実的な環境をキャプチャする方が簡単です。 この研究では、実際のロケールの表現を、鏡や反射面が多数ある場合でも、あなたのアバターのようなデジタル要素とより現実的に混在させることができます。

トーマス・ヴェラン(Thomas Whelan)研究科学者は、オキュルスのブログ記事で「ミラーは3D再構成では一般的に周りを回っており、ほとんどの初期の研究では存在しないものとして無視している」と語った。 しかし現実の世界では、彼らはどこにでも存在し、再建のアプローチの大半を破壊しています。 そういう意味で、私たちは型を壊し、3D再構成の最前線の問題のうちの1つに取り組んでいます」

シェアする

  • このエントリーをはてなブックマークに追加

フォローする