Meta ปล่อย Passthrough Camera API สำหรับ Quest แล้ว!นักพัฒนาทดลองใช้ได้ แม้แอพ Store จะยังไม่รองรับ

11 ชั่วโมง ago

Meta เปิดตัว Passthrough Camera API สำหรับ Quest 3 และ Quest 3S อย่างเป็นทางการแล้ว! แม้ว่าตอนนี้แอพที่อยู่ใน Meta Horizon Store จะยังไม่สามารถใช้งาน API นี้ได้ แต่นักพัฒนาสามารถทดลองและแจกจ่ายแอพผ่านแพลตฟอร์ม SideQuest ได้

Passthrough Camera API คืออะไร?

API นี้ช่วยให้แอพสามารถเข้าถึงกล้องสีของเฮดเซตเพื่อใช้ในการ สแกน QR Code, ติดตามวัตถุ หรือ รวมฟังก์ชัน AI เช่น โมเดลภาพ LLM บนคลาวด์ อย่างไรก็ตาม กล้องพาสทรูของ Quest มีความละเอียดสูงสุด 1280 × 960 @ 30FPS และมีความหน่วงอยู่ที่ 40-60 มิลลิวินาที ซึ่งอาจไม่เหมาะกับการติดตามวัตถุที่เคลื่อนที่เร็ว

ใช้งานบน Android XR และ Unity

API นี้ไม่ใช่ส่วนขยายของ OpenXR โดยตรง แต่นักพัฒนาสามารถใช้ Camera2 API ของ Android เพื่อดึงข้อมูลภาพและท่าทางของเฮดเซต ในขณะที่ Unity สามารถเข้าถึงกล้องผ่าน WebCamTexture API แต่รองรับได้ทีละตัวเท่านั้น

Meta ได้ปล่อยตัวอย่างโปรเจกต์สำหรับ Unity บน GitHub รวมถึง CameraViewer, Object Detection, QR Code Tracking และอื่น ๆ เพื่อช่วยนักพัฒนาเริ่มต้นใช้งาน

📌 สำหรับนักพัฒนาที่สนใจ สามารถศึกษาเอกสารและดาวน์โหลดตัวอย่างโค้ดได้ที่: GitHub / Meta Developer Docs

https://youtu.be/1z3pcMJbnRA