วิดีโอการทดสอบการติดตามมือ และการบดบังด้วยมือของ Apple Vision Pro โดยนักพัฒนา

นักพัฒนา Vision Pro โพสต์วิดีโอ แสดงการติดตามมือและการตรวจสอบการบดบังด้วยมือ บนชุดเฮดเซตใหม่ของ Apple

Apple Vision Pro คาดว่าจะเปิดตัวในอีกไม่กี่เดือนข้างหน้า จะใช้การติดตามด้วยมือเป็นวิธีการป้อนข้อมูลหลัก โดยรวมเข้ากับ การติดตามด้วยสายตาในรูปแบบ “มองแล้วแตะ” นักพัฒนาก็สามารถสร้างแอปพลิเคชัน ที่ให้ผู้ใช้โต้ตอบกับแอปพลิเคชันโดยตรงโดยใช้มือ

การติดตามมือบน Vision Pro สามารถแบ่งออกเป็นสองความสามารถที่แตกต่างกัน: “การติดตามมือ” และ “การบดบังด้วยมือ”

การติดตามมือเป็นแบบจำลอง 3 มิติโดยประมาณของมือ ข้อต่อ และตำแหน่งของปลายนิ้ว แบบจำลองนี้ใช้เพื่อกำหนดว่าเมื่อใดที่วัตถุถูกสัมผัส คว้า และโต้ตอบด้วย

การบดบังด้วยมือ เกี่ยวข้องกับวิธีที่ระบบซ้อนทับภาพมือจริงของคุณบนเนื้อหาเสมือนจริง แทนที่จะวาดโมเดล 3 มิติของมือเสมือนลงในฉาก Vision Pro จะนำภาพมือจริงแสดงในฉาก เพื่อเพิ่มความสมจริงอีกชั้นหนึ่งให้กับเนื้อหาเสมือนจริง เนื่องจากสามารถมองเห็นมือที่มีเอกลักษณ์เฉพาะตัวของตัวเองได้

เราจะเห็นได้ว่าการติดตามมือ และการบดบังด้วยมือ นั้นดีมาก แต่ยังไม่ได้สมบูรณ์ เมื่อเคลื่อนไหวอย่างรวดเร็ว จะเห็นการตัดบางส่วนบริเวณขอบของมือ

รวมถึงตำแหน่งการติดตามมือ จะล่าช้ากว่าการบดบังด้วยมือ ซึ่งอยู่ด้านหลังประมาณ 100–200 มิลลิวินาที อย่างไรก็ตาม เราไม่สามารถระบุเวลาความหน่วง (Latency) ที่แท้จริงของการติดตามมือของ Vision Pro ได้ เนื่องจากเรามีเพียงมุมมองของมือติดตามการบดบังเพื่อเปรียบเทียบ (ซึ่งตัวมันเองจะมีความหน่วงแฝง เล็กน้อยเกี่ยวกับมือจริง)

วิดีโอมาจากการสนทนาของนักพัฒนา Unity โดยกล่าวว่าการทดลองในช่วงแรกกับ Vision Pro แสดงให้เห็นความล่าช้าในการติดตามด้วยมือที่สูงมาก ซึ่งเห็นได้ชัดเมื่อเปรียบเทียบกับความสามารถในการติดตามด้วยมือของ Quest ล่าสุด นักพัฒนา Unity รายอื่น ๆ ต่างเห็นพ้องกันว่าพวกเขาก็เห็นความหน่วงที่คล้ายคลึงกันบนอุปกรณ์ Vision Pro ของตนเอง

อย่างไรก็ตาม วิดีโอที่เป็นปัญหาคือการผสานรวมการติดตามด้วยมือภายในแอป Unity ซึ่งหมายความว่าประสิทธิภาพและความล่าช้าในการติดตามมือนี้ อาจมีปัจจัยเพิ่มเติมที่เกี่ยวข้องกับ Unity ที่ไม่ปรากฏเมื่อใช้เครื่องมือพัฒนา Vision Pro บุคคลที่หนึ่งของ Apple และเมื่อพิจารณาว่าชุดเฮดเซตที่ยังไม่เปิดตัวและเครื่องมือเหล่านี้ยังอยู่ในระหว่างการพัฒนา เราอาจเห็นการปรับปรุงเพิ่มเติมเมื่อชุดเฮดเซตออกขายจริง


ที่มา
roadtovr