Cover photo by テル
〈Apple〉は最新AIモデル『Depth Pro』を発表しました。これは、わずか0.3秒で単一の2D画像から高精細な3D深度マップを生成できる驚異的な技術です。
最新のiPhoneに搭載されるかが注目されていますが、この技術は、写真編集、AR、VR、さらに自動運転にまで広がる応用が期待されています。今回は、『Depth Pro』の仕組みとその活用例をご紹介します。
高速かつ精密な3Dマップ生成の仕組み
『Depth Pro』は、効率的な「マルチスケールビジョントランスフォーマー」を採用し、画像全体の大まかな構造と細部を同時に把握できる設計です。通常、深度推定には複数の画像やカメラ設定情報が必要とされますが『Depth Pro』はこれを不要にし、単一の2D画像から精密な3Dデータを瞬時に算出します。
公開されているモデルを使用して、編集部にて生成
また、オブジェクトの輪郭を正確にトレースすることで、髪の毛や草木といった細かな構造を忠実に再現できる点が際立っています。これにより、AIによるリアルな3D体験が可能になり、ARや自動運転分野でも新たな応用が期待されます。
より精密なボケと被写体分離
『Depth Pro』が生成する高精細な深度マップを活用することで、背景ぼかしや被写体選択がより迅速かつ正確になり、高品質なボケがスマートフォンでも実現可能になります。AIがピクセル単位で奥行き情報を把握するため、微細な毛や葉の際立つエフェクトも可能です。
Photo by littlekiss photography
AR・VRにおけるリアリティ向上
『Depth Pro』はARやVRの品質向上にも大きく貢献します。従来の深度認識モデルとは異なり、カメラのメタデータなしでも深度を即座に推定し、現実空間に仮想物体を正確に配置することが可能です。
これにより、家具配置の視覚化や、ゲームでのリアルなエンゲージメントが一層強化されます。
自動運転への応用と今後の展望
『Depth Pro』の速さと精度は、車載カメラを活用した自動運転の深度検知に最適です。AIがリアルタイムで周囲の状況を把握し、道路上の障害物を認識することで安全性を高めます。
Photo by Yuzurigima
〈Apple〉はすでにこの技術をオープンソース化しており、今後さらに多くの分野での利用が広がることが期待されています。
