magazine
2024.10.08

AI ของ Apple 'Depth Pro' เปลี่ยนโลกใหม่ของการรับรู้ความลึก 3D | Release #335

2024-10-apple-depth-pro-3d-cover-image

ภาพหน้าปกโดย テル

Apple ได้เปิดตัวโมเดล AI ล่าสุด 'Depth Pro' ซึ่งเป็นเทคโนโลยีที่สามารถสร้างแผนที่ความลึก 3D ที่มีความละเอียดสูงจากภาพ 2D เพียงภาพเดียวภายในเวลาเพียง 0.3 วินาที

มีการคาดการณ์ว่าจะถูกนำไปใช้ใน iPhone รุ่นล่าสุด และเทคโนโลยีนี้ยังมีการประยุกต์ใช้ที่คาดหวังในด้านการแก้ไขภาพ, AR, VR และการขับขี่อัตโนมัติ ในครั้งนี้เราจะนำเสนอเกี่ยวกับกลไกของ 'Depth Pro' และตัวอย่างการใช้งาน

กลไกการสร้างแผนที่ 3D ที่รวดเร็วและแม่นยำ

'Depth Pro' ใช้ 'มัลติสเกลวิชันทรานส์ฟอร์เมอร์' ที่มีประสิทธิภาพ ซึ่งออกแบบมาเพื่อให้สามารถจับโครงสร้างโดยรวมและรายละเอียดของภาพได้พร้อมกัน โดยปกติการประเมินความลึกต้องใช้ภาพหลายภาพหรือข้อมูลการตั้งค่ากล้อง แต่ 'Depth Pro' ทำให้สิ่งนี้ไม่จำเป็น และสามารถคำนวณข้อมูล 3D ที่แม่นยำจากภาพ 2D ได้ทันที

2024-10-apple-depth-pro-3d-image-4
2024-10-apple-depth-pro-3d-image-5

สร้างโดยใช้โมเดลที่เปิดเผย

นอกจากนี้ยังสามารถติดตามขอบของวัตถุได้อย่างแม่นยำ ทำให้สามารถสร้างโครงสร้างที่ละเอียดเช่นเส้นผมและพืชได้อย่างสมจริง ซึ่งทำให้สามารถสร้างประสบการณ์ 3D ที่สมจริงด้วย AI และมีการคาดหวังการประยุกต์ใช้ใหม่ในด้าน AR และการขับขี่อัตโนมัติ

การเบลอและการแยกวัตถุที่แม่นยำยิ่งขึ้น

ด้วยการใช้แผนที่ความลึกที่มีความละเอียดสูงที่ 'Depth Pro' สร้างขึ้น ทำให้การเบลอพื้นหลังและการเลือกวัตถุเป็นไปได้อย่างรวดเร็วและแม่นยำยิ่งขึ้น และสามารถสร้างการเบลอที่มีคุณภาพสูงได้แม้ในสมาร์ทโฟน AI สามารถจับข้อมูลความลึกในระดับพิกเซล ทำให้สามารถสร้างเอฟเฟกต์ที่โดดเด่นสำหรับเส้นผมและใบไม้ได้

2024-10-apple-depth-pro-3d-image-9

ภาพโดย littlekiss photography

การเพิ่มความสมจริงใน AR และ VR

'Depth Pro' ยังมีส่วนช่วยอย่างมากในการปรับปรุงคุณภาพของ AR และ VR แตกต่างจากโมเดลการรับรู้ความลึกแบบเดิม สามารถประเมินความลึกได้ทันทีโดยไม่ต้องใช้ข้อมูลเมตาของกล้อง และสามารถวางวัตถุเสมือนในพื้นที่จริงได้อย่างแม่นยำ

ทำให้การมองเห็นการจัดวางเฟอร์นิเจอร์และการมีส่วนร่วมในเกมที่สมจริงยิ่งขึ้น

การประยุกต์ใช้ในรถยนต์อัตโนมัติและแนวโน้มในอนาคต

ความเร็วและความแม่นยำของ 'Depth Pro' เหมาะสมอย่างยิ่งสำหรับการตรวจจับความลึกในการขับขี่อัตโนมัติที่ใช้กล้องติดรถยนต์ AI สามารถรับรู้สถานการณ์รอบข้างแบบเรียลไทม์และจดจำสิ่งกีดขวางบนถนนเพื่อเพิ่มความปลอดภัย

2024-10-apple-depth-pro-3d-image-14

ภาพโดย Yuzurigima

Apple ได้เปิดเผยเทคโนโลยีนี้เป็นโอเพ่นซอร์สแล้ว และคาดว่าจะมีการใช้งานในหลายๆ ด้านมากขึ้นในอนาคต