Cover photo by 텔
〈Apple〉은 최신 AI 모델 'Depth Pro'를 발표했습니다. 이는 단일 2D 이미지에서 0.3초 만에 고해상도 3D 깊이 맵을 생성할 수 있는 놀라운 기술입니다.
최신 iPhone에 탑재될지 주목받고 있으며, 이 기술은 사진 편집, AR, VR, 자율 주행까지 다양한 응용이 기대됩니다. 이번에는 'Depth Pro'의 작동 원리와 활용 사례를 소개합니다.
고속 및 정밀한 3D 맵 생성의 원리
'Depth Pro'는 효율적인 '멀티스케일 비전 트랜스포머'를 채택하여 이미지 전체의 대략적인 구조와 세부 사항을 동시에 파악할 수 있는 설계입니다. 일반적으로 깊이 추정에는 여러 이미지나 카메라 설정 정보가 필요하지만 'Depth Pro'는 이를 불필요하게 하여 단일 2D 이미지에서 정밀한 3D 데이터를 즉시 산출합니다.
공개된 모델을 사용하여 편집부에서 생성
또한, 객체의 윤곽을 정확히 추적하여 머리카락이나 잔디와 같은 세밀한 구조를 충실히 재현할 수 있는 점이 두드러집니다. 이를 통해 AI에 의한 현실적인 3D 경험이 가능해지며, AR 및 자율 주행 분야에서도 새로운 응용이 기대됩니다.
더 정밀한 보케와 피사체 분리
'Depth Pro'가 생성하는 고해상도 깊이 맵을 활용하여 배경 흐림이나 피사체 선택이 더 빠르고 정확해지며, 고품질의 보케가 스마트폰에서도 구현 가능합니다. AI가 픽셀 단위로 깊이 정보를 파악하기 때문에 미세한 털이나 잎의 두드러진 효과도 가능합니다.
Photo by littlekiss photography
AR·VR에서의 현실감 향상
'Depth Pro'는 AR 및 VR의 품질 향상에도 크게 기여합니다. 기존의 깊이 인식 모델과 달리, 카메라의 메타데이터 없이도 깊이를 즉시 추정하여 현실 공간에 가상 물체를 정확히 배치할 수 있습니다.
이를 통해 가구 배치의 시각화나 게임에서의 현실적인 몰입감이 더욱 강화됩니다.
자율 주행에의 응용과 향후 전망
'Depth Pro'의 속도와 정밀도는 차량 카메라를 활용한 자율 주행의 깊이 감지에 최적입니다. AI가 실시간으로 주변 상황을 파악하고, 도로상의 장애물을 인식하여 안전성을 높입니다.
Photo by Yuzurigima
〈Apple〉은 이미 이 기술을 오픈 소스로 공개하였으며, 앞으로 더 많은 분야에서의 활용이 기대됩니다.
