magazine
2024.10.08

Apple AI 'Depth Pro' thay đổi thế giới nhận thức độ sâu 3D mới | Release #335

2024-10-apple-depth-pro-3d-cover-image

Ảnh bìa của テル

đã công bố mô hình AI mới nhất 'Depth Pro'. Đây là công nghệ đáng kinh ngạc có thể tạo ra bản đồ độ sâu 3D chi tiết từ một hình ảnh 2D đơn lẻ chỉ trong 0,3 giây.

Người ta đang chú ý liệu công nghệ này có được tích hợp vào iPhone mới nhất hay không, nhưng ứng dụng của nó được kỳ vọng sẽ mở rộng trong chỉnh sửa ảnh, AR, VR và thậm chí cả tự động lái. Lần này, chúng tôi sẽ giới thiệu cơ chế và các ví dụ ứng dụng của 'Depth Pro'.

Cơ chế tạo bản đồ 3D nhanh chóng và chính xác

'Depth Pro' sử dụng 'transformer thị giác đa tỉ lệ' hiệu quả, được thiết kế để nắm bắt đồng thời cấu trúc tổng thể và chi tiết của hình ảnh. Thông thường, ước tính độ sâu cần nhiều hình ảnh hoặc thông tin cài đặt máy ảnh, nhưng 'Depth Pro' loại bỏ nhu cầu này, tính toán dữ liệu 3D chính xác từ một hình ảnh 2D đơn lẻ ngay lập tức.

2024-10-apple-depth-pro-3d-image-4
2024-10-apple-depth-pro-3d-image-5

Sử dụng mô hình đã công bố, được tạo bởi ban biên tập

Ngoài ra, bằng cách theo dõi chính xác các đường viền của đối tượng, nó có thể tái hiện trung thực các cấu trúc nhỏ như tóc và cây cỏ. Điều này cho phép trải nghiệm 3D chân thực do AI mang lại, và các ứng dụng mới trong lĩnh vực AR và tự động lái cũng được kỳ vọng.

Bokeh và tách đối tượng chính xác hơn

Bằng cách sử dụng bản đồ độ sâu chi tiết do 'Depth Pro' tạo ra, việc làm mờ nền và chọn đối tượng trở nên nhanh chóng và chính xác hơn, cho phép tạo ra bokeh chất lượng cao ngay cả trên điện thoại thông minh. AI nắm bắt thông tin độ sâu ở cấp độ pixel, cho phép các hiệu ứng nổi bật của tóc và lá cây nhỏ.

2024-10-apple-depth-pro-3d-image-9

Ảnh của littlekiss photography

Nâng cao thực tế trong AR và VR

'Depth Pro' cũng đóng góp lớn vào việc nâng cao chất lượng AR và VR. Không giống như các mô hình nhận thức độ sâu truyền thống, nó có thể ước tính độ sâu ngay lập tức mà không cần dữ liệu meta từ máy ảnh, cho phép đặt chính xác các vật thể ảo trong không gian thực.

Điều này làm tăng cường việc hình dung bố trí nội thất và sự tương tác thực tế trong trò chơi.

Ứng dụng trong tự động lái và triển vọng tương lai

Tốc độ và độ chính xác của 'Depth Pro' là lý tưởng cho việc phát hiện độ sâu trong tự động lái sử dụng camera trên xe. AI nắm bắt tình huống xung quanh trong thời gian thực, nhận diện chướng ngại vật trên đường, nâng cao an toàn.

2024-10-apple-depth-pro-3d-image-14

Ảnh của Yuzurigima

đã mở mã nguồn công nghệ này, và dự kiến sẽ được sử dụng rộng rãi hơn trong nhiều lĩnh vực trong tương lai.