แก้วแอปเปิ้ล

มีข่าวลือว่า Apple มีทีมลับที่มีพนักงานหลายร้อยคนที่ทำงานในโครงการเสมือนจริงและความเป็นจริงเสริม

• ใช่
• เลขที่

โครงการเสริมความจริงเสมือนและความลับของ Apple

สารบัญ

1. โครงการเสริมความจริงเสมือนและความลับของ Apple
• ชุดหูฟังความเป็นจริงผสม
• แว่นตาอัจฉริยะ AR
• iOS 14 AR รั่วไหล
• AR ใน Xcode
• ห้างหุ้นส่วนจำกัดวาล์ว?
• ข่าวลืออื่นๆ
2. ความเป็นจริงยิ่งกับความเป็นจริงเสมือน
3. ทีม VR/AR ของ Apple
• จ้าง
• การเข้าซื้อกิจการ
4. สิทธิบัตร AR / VR
5. วันที่เปิดตัว
6. แผน AR/VR ในอนาคต
7. ไทม์ไลน์แว่นตา Apple

Apple ได้สำรวจเทคโนโลยีความจริงเสมือนและเทคโนโลยีความจริงเสริมมาเป็นเวลานานกว่า 10 ปีจากการยื่นจดสิทธิบัตร แต่ด้วยความจริงเสมือนและความจริงเสริมที่ได้รับความนิยมอย่างล้นหลามด้วยการเปิดตัว ARKit การเล่นของ Apple นั้นรุนแรงขึ้นเรื่อยๆ และคาดว่าจะนำไปสู่ ​​​​AR/ ผลิตภัณฑ์ VR ในปี 2022

มีข่าวลือว่า Apple มีหน่วยวิจัยลับที่มีพนักงานหลายร้อยคนที่ทำงานเกี่ยวกับ AR และ VR และสำรวจวิธีที่เทคโนโลยีเกิดใหม่สามารถนำมาใช้ในผลิตภัณฑ์ Apple ในอนาคตได้ การจ้างงาน VR/AR เพิ่มขึ้นในช่วงหลายปีที่ผ่านมา และ Apple ได้เข้าซื้อกิจการบริษัท AR/VR หลายแห่ง เนื่องจากมีการขยายงานในพื้นที่ AR/VR

มีข่าวลือว่า Apple กำลังทำงานอย่างน้อย สอง โปรเจ็กต์ AR ที่รวมชุดหูฟังความเป็นจริงเสริมที่จะเปิดตัวในราวปี 2565 ตามด้วยแว่นตาเสมือนจริงที่เพรียวบางกว่าที่จะมาในภายหลัง ข่าวลือจำนวนมากมุ่งเน้นไปที่แว่นตาเพียงอย่างเดียว อย่างไรก็ตาม ทำให้เกิดความสับสนเกี่ยวกับแผนของ Apple แต่ดูเหมือนว่าชุดหูฟัง AR/VR จะเป็นผลิตภัณฑ์แรกที่เปิดตัว

Ming-Chi Kuo นักวิเคราะห์ของ Apple เชื่อว่าชุดหูฟัง 'mixed reality' ของ Apple จะออกมา ในช่วงปลายปี 2022 หรือต้นปี 2023 โดยที่ Apple Glasses จะตามมาในปี 2025 แม้ว่าแหล่งอื่น ๆ จะบอกว่าแว่นตาจะมาในปี 2023 ชุดหูฟังนั้นเป็น AR/VR หรือที่รู้จักในชื่อความเป็นจริงผสม ในขณะที่แว่นตาของ Apple เป็นเทคโนโลยีความจริงเสริม

ชุดหูฟังความเป็นจริงผสม

ข้อมูล และ Bloomberg ได้ทั้งสองกล่าวว่า Apple กำลังทำงานเกี่ยวกับแว่นตาอัจฉริยะและชุดหูฟัง AR/VR (หรือที่เรียกว่าความเป็นจริงผสม) โดยชุดหูฟังจะออกมาก่อนตามด้วยแว่นตา มีข่าวลือว่าชุดหูฟังจะคล้ายกับชุดหูฟังเสมือนจริง Oculus Quest ของ Facebook แต่ด้วยการออกแบบที่เพรียวบางกว่าที่ใช้ผ้าและวัสดุน้ำหนักเบาเพื่อให้แน่ใจว่าชุดหูฟังนั้นสบาย

ว่ากันว่ามีคุณสมบัติ จอแสดงผล 8K ความละเอียดสูงสองจอ และกล้องตรวจจับดวงตาที่จะให้ผู้ใช้ 'อ่านแบบเล็ก' และ 'เห็นคนอื่นยืนอยู่ข้างหน้าและข้างหลังวัตถุเสมือนจริง' ชุดหูฟังจะทำแผนที่พื้นผิว ขอบ และขนาดของห้องด้วย 'ความแม่นยำที่มากกว่าอุปกรณ์ที่มีอยู่ในตลาด' จะมีหน้าจอที่ล้ำหน้ากว่าและชิปที่เร็วกว่าโปรเซสเซอร์ M1 ในปี 2020 Macs

ข้อมูล ในเดือนกุมภาพันธ์ กล่าวว่าจะติดตั้งกล้องมากกว่าหนึ่งโหลสำหรับติดตามการเคลื่อนไหวของมือ นอกเหนือไปจากกล้องสำหรับมองโลกภายนอก และการออกแบบจะปิดกั้นการมองเห็นรอบข้างเพื่อป้องกันไม่ให้แสงรั่วไหลเข้าสู่มุมมองของผู้สวมใส่ นอกจากนี้ยังอาจมีกระบังหน้าหันออกไปด้านนอกในจอแสดงผลเพื่อให้ผู้สวมใส่แสดงกราฟิกให้ผู้อื่นเห็นได้

The Elec อ้างว่า ชุดหูฟัง VR จะมีหน้าจอ micro OLED ความละเอียดสูงถึง 3,000 พิกเซลต่อนิ้ว ก่อนหน้านี้มีข่าวลือว่าจอแสดงผล micro OLED สำหรับแว่นตาอัจฉริยะ แต่ไม่ใช่ชุดหูฟัง VR

Ming-Chi Kuo นักวิเคราะห์ของ Apple เปิดเผยว่าหูฟังผสมความเป็นจริงเสมือนของ Apple กำลังจะเปิดตัว จะมีโมดูลกล้องออปติคัล 15 โมดูล เบ็ดเสร็จ. โมดูลกล้องแปดตัวจากทั้งหมด 15 ตัวจะใช้สำหรับประสบการณ์ความเป็นจริงเสริมที่มองเห็นได้ 6 โมดูลจะใช้สำหรับ 'ไบโอเมตริกที่เป็นนวัตกรรม' และโมดูลกล้องหนึ่งโมดูลจะใช้สำหรับการตรวจจับสภาพแวดล้อม

กัว ยังเชื่อ ว่าชุดหูฟังของ Apple จะติดตั้งระบบติดตามการมองขั้นสูงที่ใช้เพื่อมอบประสบการณ์การมองเห็นที่ใช้งานง่ายซึ่งโต้ตอบกับสภาพแวดล้อมภายนอกได้อย่างราบรื่นพร้อมกับการใช้งานที่เป็นธรรมชาติมากขึ้นที่สามารถควบคุมด้วยการเคลื่อนไหวของดวงตาและลดภาระในการคำนวณในรูปแบบที่ลดลง ความละเอียดที่ผู้ใช้ไม่ได้มอง

การออกแบบที่ชาญฉลาด ชุดหูฟังได้รับการอธิบายว่ามี 'กระบังหน้าโค้งที่เพรียวบางติดกับใบหน้าด้วยวัสดุตาข่ายและแถบคาดศีรษะแบบถอดเปลี่ยนได้' ที่คาดศีรษะข้างหนึ่งมีเทคโนโลยีเสียงรอบทิศทาง เช่น AirPods Pro สำหรับประสบการณ์เสียงเซอร์ราวด์ ขณะที่อีกสายหนึ่งช่วยยืดอายุการใช้งานแบตเตอรี่ขณะเดินทาง Apple กำลังทำงานในวิธีการควบคุมที่หลากหลาย รวมถึง 'อุปกรณ์ที่มีลักษณะคล้ายปลอกนิ้วสำหรับสวมใส่บนนิ้วของบุคคล' ชุดหูฟังยังสามารถตอบสนองต่อการเคลื่อนไหวของดวงตาและท่าทางมือของผู้สวมใส่ได้ ในขณะที่ชุดหูฟังต้นแบบตัวหนึ่งยังมีหน้าปัดทางกายภาพที่ด้านข้างของกระบังหน้า Apple ยังได้ทดสอบอินพุตของ Siri ด้วย

แอปเปิ้ลต้องการ สร้าง App Store สำหรับชุดหูฟังที่เน้นการเล่นเกม การสตรีมเนื้อหาวิดีโอ และการประชุมทางวิดีโอ มันถูกอธิบายโดย Bloomberg เป็น 'สภาพแวดล้อมดิจิทัล 3-D ที่ครอบคลุมทุกอย่าง' ที่ออกแบบมาสำหรับการเล่นเกม ดูวิดีโอ และการสื่อสาร

ต้นแบบชุดหูฟังในปัจจุบัน ถูกกล่าวว่า ที่จะมีน้ำหนักประมาณ 200 ถึง 300 กรัม แต่ Apple ตั้งเป้าที่จะลดน้ำหนักสุดท้ายเป็น 100 ถึง 200 กรัม หากปัญหาทางเทคนิคสามารถแก้ไขได้ ซึ่งจะทำให้ชุดหูฟังมีน้ำหนักเบากว่าอุปกรณ์ VR ที่มีอยู่ ชุดหูฟังจะพกพาสะดวกด้วยพลังงานและพื้นที่จัดเก็บที่เป็นอิสระ แต่จะไม่ 'เคลื่อนที่' เหมือนกับ iPhone มันจะมอบ 'ประสบการณ์ที่สมจริง' ที่เหนือกว่าผลิตภัณฑ์ VR ที่มีอยู่ในปัจจุบัน และสามารถรวมเข้ากับ Apple TV+ และ Apple Arcade ได้

ฟังก์ชัน Augmented Reality สำหรับชุดหูฟังนั้น 'มีข้อจำกัดมากกว่า' และในขณะที่มีการวางแผนเปิดตัวในปี 2022 มีการกล่าวกันว่า Apple ได้ประสบปัญหาด้านการพัฒนาหลายประการ และมีการประมาณการยอดขายที่ 'ระมัดระวัง' สำหรับอุปกรณ์ Apple คาดว่าจะขายได้ประมาณ 180,000 เครื่อง ซึ่งเทียบเท่ากับอุปกรณ์ที่มีราคาแพงกว่าอย่าง Mac Pro ชุดหูฟังคาดว่าจะมีราคาแพงกว่าชุดหูฟังจาก บริษัท อื่นและ ข้อมูล กล่าวว่า Apple ได้หารือเกี่ยวกับการกำหนดราคาชุดหูฟังที่ประมาณ 3,000 ดอลลาร์

การออกแบบเริ่มต้นประกอบด้วยพัดลมและโปรเซสเซอร์ที่ทรงพลัง ส่งผลให้อุปกรณ์มีน้ำหนักมากเกินไป Apple ถูกกล่าวหาว่าตัดสินใจนำชุดหูฟังเข้าใกล้ใบหน้าเพื่อลดขนาด ผู้ใช้จะไม่สามารถสวมแว่นตาขณะใช้ชุดหูฟังได้ ดังนั้น Apple จึงได้สร้างระบบที่สามารถใส่เลนส์สั่งตัดพิเศษบนหน้าจอ VR ได้

Kuo เชื่อว่าชุดหูฟัง จะใช้การออกแบบเลนส์ Fresnel แบบไฮบริด , ครอบเลนส์ซ้อนกันสามชั้นต่อตาหนึ่งอันทำจากพลาสติกน้ำหนักเบา จุดประสงค์คือการออกแบบเพื่อให้ใช้ทางยาวโฟกัสสั้นพิเศษและประสิทธิภาพด้านออปติคอลที่ได้รับการปรับปรุง ตลอดจนมุมมองที่กว้าง และรักษาน้ำหนักของชุดหูฟังให้ต่ำกว่า 150 กรัม

ในแง่ของพลังงาน ชุดหูฟัง AR/VR ที่จะมาถึงจะมีฟีเจอร์ a โปรเซสเซอร์หลักระดับไฮเอนด์ ซึ่งคล้ายกับชิป M1 ที่ Apple เปิดตัวสำหรับ Apple silicon Macs เมื่อปีที่แล้ว พร้อมกับโปรเซสเซอร์ระดับล่างสุดสำหรับจัดการด้านที่เกี่ยวข้องกับเซ็นเซอร์ของอุปกรณ์

Ming-Chi Kuo นักวิเคราะห์ของ Apple อ้างว่าจะสามารถทำงานได้อย่างอิสระโดยไม่ต้องพึ่ง Mac หรือ iPhone ซึ่งเป็นการออกจากข่าวลือก่อนหน้านี้ที่กล่าวว่า ต้องการสายโยง ไปยังไอโฟน ชิปพลังสูงในชุดหูฟังจะขับเคลื่อนจอแสดงผล 4K Micro OLED จาก Sony และโมดูลออปติคัลหกถึงแปดโมดูลเพื่อให้มีฟังก์ชันการทำงานแบบ AR แอปเปิ้ลมี เสร็จงาน บน SoC สำหรับชุดหูฟัง AR/VR และจะปรับให้เหมาะสมสำหรับการส่งข้อมูลแบบไร้สาย การบีบอัดและคลายการบีบอัดวิดีโอ และประสิทธิภาพการใช้พลังงานเพื่ออายุการใช้งานแบตเตอรี่สูงสุด และไม่มีเอ็นจิ้นประสาทเหมือนชิปอื่นๆ ของ Apple

ชุดหูฟังความเป็นจริงผสมที่จะเกิดขึ้นของ Apple จะ มี WiFi 6E รองรับซึ่งเป็นข้อกำหนด WiFi ล่าสุด กล่าวกันว่า Apple กำลังวางแผนที่จะใช้ WiFi 6E เพื่อมอบประสบการณ์ระดับไฮเอนด์ที่ดื่มด่ำด้วยการเชื่อมต่อไร้สายที่แข็งแกร่ง WiFi 6E มีประโยชน์ทั้งหมดของ WiFi 6 แต่เพิ่มคลื่นความถี่ 6GHz นอกเหนือจากแถบความถี่ 2.4GHz และ 5GHz สำหรับแบนด์วิดท์ที่เพิ่มขึ้นและการรบกวนระหว่างอุปกรณ์น้อยลง

การแสดงผลชุดหูฟังแบบผสมความเป็นจริง

ดีไซเนอร์ อันโตนิโอ เด โรซา พัฒนาการแสดงผล 3 มิติ ตามรายละเอียดที่แบ่งปันโดย ข้อมูล ทำให้เรามาดูกันว่าชุดหูฟังแบบผสมความเป็นจริงของ Apple อาจมีลักษณะอย่างไรตามข่าวลือในปัจจุบัน

ข้อมูล ได้อธิบายชุดหูฟังว่าเป็น 'กระบังหน้าโค้งที่เพรียวบางติดกับใบหน้าด้วยวัสดุตาข่ายและแถบคาดศีรษะแบบถอดเปลี่ยนได้' ที่มีให้เลือกหลายสี

ต้นแบบชุดหูฟังยุคแรก

ข่าวลือก่อนหน้านี้จาก CNET ในปี 2561 แนะนำว่า Apple กำลังทำงานบนชุดหูฟัง AR/VR อันทรงพลังพร้อมจอแสดงผล 8K สำหรับแต่ละตาที่ไม่ต้องผูกมัดจากคอมพิวเตอร์หรือสมาร์ทโฟน และจะทำงานร่วมกับแอพพลิเคชั่นเสมือนจริงและความเป็นจริงเสริม

แทนที่จะอาศัยการเชื่อมต่อกับสมาร์ทโฟนหรือคอมพิวเตอร์ ชุดหูฟัง CNET ที่อธิบายไว้จะเชื่อมต่อกับ 'กล่องเฉพาะ' โดยใช้เทคโนโลยีไร้สายระยะสั้นความเร็วสูงที่เรียกว่า WiGig 60GHz กล่องจะใช้พลังงานจากโปรเซสเซอร์ Apple ขนาด 5 นาโนเมตรแบบกำหนดเองที่ 'ทรงพลังกว่าสิ่งใด ๆ ที่มีอยู่ในปัจจุบัน' เห็นได้ชัดว่ากล่องนี้คล้ายกับหอคอย PC แต่ 'จะไม่ใช่คอมพิวเตอร์ Mac จริงๆ' การออกแบบที่เหมือนกล่องนี้เป็นหัวข้อของข่าวลือในช่วงแรกและอาจเป็นต้นแบบที่ถูกละทิ้งตั้งแต่นั้นมาสำหรับรุ่นที่โฉบเฉี่ยวกว่าที่เล่าลือกันในตอนนี้

ความขัดแย้งภายในได้กำหนดและเปลี่ยนเป้าหมายของ Apple สำหรับชุดหูฟัง AR เมื่อเวลาผ่านไป แอปเปิ้ลเคยเป็น ตอนแรกเล็ง สำหรับระบบที่ทรงพลังเป็นพิเศษซึ่งมาพร้อมกับฮับสำหรับติดตั้งโปรเซสเซอร์ตามที่อธิบายไว้ข้างต้น แต่ Jony Ive ซึ่งลาออกจากบริษัทตั้งแต่นั้นมา ไม่ต้องการขายอุปกรณ์ที่ต้องใช้อุปกรณ์ที่อยู่กับที่แยกต่างหากเพื่อให้ทำงานได้เต็มรูปแบบ

ฉันต้องการชุดหูฟังที่มีเทคโนโลยีที่มีประสิทธิภาพน้อยกว่าที่สามารถฝังลงในอุปกรณ์ได้โดยตรง แต่ Mike Rockwell หัวหน้าทีม AR/VR ต้องการอุปกรณ์ที่ทรงพลังกว่านี้ มันเป็นความขัดแย้งที่กินเวลานานหลายเดือน และในที่สุด Tim Cook ก็เข้าข้าง Ive Ive กล่าวว่าชอบแว่นตาอัจฉริยะ AR ที่อยู่ในผลงานเช่นกัน

แว่นตาอัจฉริยะ AR

Apple กำลังทำงานเกี่ยวกับชุดแว่นตาความเป็นจริงเสริมซึ่ง Leaker Jon Prosser ได้แนะนำ Apple จะเรียก 'Apple Glass' ชื่อนั้นจะเป็นตัวเลือกที่ไม่ธรรมดา เนื่องจากมีความคล้ายคลึงกับชื่อ Google Glass ซึ่งเป็นผลิตภัณฑ์ที่มีมายาวนานก่อนที่ Apple จะเปิดตัวแว่นตา AR ดังนั้นจึงอาจไม่ถูกต้อง

กล่าวกันว่าแว่นตาดูคล้ายกับแว่นสายตาทั่วไป โดยเลนส์ทั้งสองจะมีหน้าจอที่สามารถโต้ตอบกับการใช้ท่าทางได้ จะมีตัวเลือกในการซื้อแว่นตาที่ไม่มีเลนส์สายตาในราคาเริ่มต้นที่ 499 ดอลลาร์สหรัฐฯ โดยมีเลนส์สายตาให้บริการโดยมีค่าใช้จ่ายเพิ่มเติม

ตาม Bloomberg , แว่นตาอยู่ใน ระยะเริ่มต้นของการพัฒนา เร็วกว่าชุดหูฟัง AR/VR ที่ Apple กำลังทำงานอยู่ แว่นตาได้รับการอธิบายว่า 'อยู่ห่างออกไปหลายปี' แม้ว่าในตอนแรก Apple วางแผนที่จะเปิดตัวแว่นตาดังกล่าวในช่วงต้นปี 2023 ต้นแบบปัจจุบันคล้ายกับแว่นกันแดดระดับไฮเอนด์ที่มีกรอบหนาซึ่งบรรจุแบตเตอรี่และชิป

Apple ถูกกล่าวหาว่า วางแผนที่จะใช้ ไมโครดิสเพลย์ OLED ล้ำสมัยที่ Sony จัดหาให้สำหรับแว่นตาเสมือนจริงที่มีข่าวลือว่า ไมโครดิสเพลย์ OLED ของ Sony มีอัตราการตอบสนองที่รวดเร็วเป็นพิเศษ คอนทราสต์สูงเป็นพิเศษ ช่วงสีที่กว้าง ความสว่างสูง การสะท้อนแสงต่ำ และไดรเวอร์ในตัวสำหรับการออกแบบที่บางและเบา แว่นตาดังกล่าวมีหน้าจอขนาด 0.5 นิ้วที่มีความละเอียด 1280x960

Kuo คาดว่าแว่นตา AR จะถูกวางตลาดในฐานะอุปกรณ์เสริมของ iPhone และโดยหลักแล้วจะมีบทบาทในการแสดงผลในการโหลดคอมพิวเตอร์ เครือข่าย และการวางตำแหน่งไปยัง iPhone ด้วยแว่นตา ให้ 'ประสบการณ์ AR แบบมองทะลุผ่านแสง' ที่อุปกรณ์เคลื่อนที่เป็นอันดับแรก การนำเสนอแว่นตา AR เป็นอุปกรณ์เสริมของ iPhone จะช่วยให้ Apple รักษาความบางและน้ำหนักเบาได้ Prosser กล่าวว่าแว่นตาจะมีลักษณะคล้ายกับ Ray-Ban Wayfarers หรือแว่นตาที่ Tim Cook ใส่

Bloomberg ได้กล่าวว่าแว่นตา Apple จะใช้ 'rOS' หรือระบบปฏิบัติการเรียลลิตี้ กล่าวกันว่า rOS นั้นใช้ iOS ซึ่งเป็นระบบปฏิบัติการที่ทำงานบน iPhone สำหรับชุดหูฟัง AR นั้น Apple กำลังพัฒนาชิป 'system-on-a-package' ที่คล้ายกับที่อยู่ใน Apple Watch แม้ว่าจะใช้ iPhone ตามที่กล่าวไว้ข้างต้น

ในระหว่างการพัฒนาชุดหูฟัง AR นั้น Apple ได้พิจารณาแผงสัมผัส การเปิดใช้งานด้วยเสียง และท่าทางของศีรษะเป็นวิธีการป้อนข้อมูล และแอปพลิเคชันต่างๆ ตั้งแต่การทำแผนที่ไปจนถึงการส่งข้อความกำลังอยู่ระหว่างการสร้างต้นแบบ ห้องประชุมเสมือนจริงและการเล่นวิดีโอ 360 องศาเป็นแนวคิดที่กำลังอยู่ในระหว่างการสำรวจ

คิดว่ามีข่าวลือแรกเริ่ม ของการเปิดตัวปี 2020 , Bloomberg เชื่อแว่น AR สามารถมา อีกหลายปีก่อนวางจำหน่าย โดยชุดหูฟัง VR จะวางจำหน่ายในปี 2565 รายงานจาก DigiTimes แนะนำแว่นตา AR ของ Apple ที่จะเปิดตัวในปี 2564 และนักวิเคราะห์ของ Apple Ming-Chi Kuo คาดว่าจะเปิดตัวในปี 2565 อย่างเร็วที่สุด .

Leaker Jon Prosser เชื่อว่า Apple จะเปิดตัวแว่นตา AR ในเดือนมีนาคมหรือมิถุนายนปี 2021 แต่ดูเหมือนว่าจะไม่แม่นยำเมื่อพิจารณาจากการประเมินจาก Bloomberg และคุโอ

พรอสเซอร์ยังกล่าวอีกว่า Apple กำลังทำงานเกี่ยวกับแว่นตาอัจฉริยะรุ่น 'สตีฟ จ็อบส์ เฮอริเทจ' รุ่นลิมิเต็ดเอดิชั่นที่ออกแบบมาให้ดูเหมือนแว่นทรงกลมไร้กรอบที่สตีฟ จ็อบส์เคยใส่ แต่ Bloomberg Mark Gurman ของ Mark Gurman เรียกข่าวลือนี้ว่า 'นิยายที่สมบูรณ์'

แอปเปิ้ลคือ ร่วมงานกับ TSMC เพื่อพัฒนาจอแสดงผล micro OLED ที่ 'ล้ำสมัย' เป็นพิเศษ ซึ่งจะใช้ในอุปกรณ์เติมความเป็นจริงเสมือนของ Apple ที่กำลังจะมีขึ้น เช่น แว่นตาอัจฉริยะ จอแสดงผลมีขนาดน้อยกว่าหนึ่งนิ้ว

จอแสดงผล Micro OLED สร้างขึ้นโดยตรงบนชิปเวเฟอร์ แทนที่จะเป็นพื้นผิวแก้ว ซึ่งทำให้จอแสดงผลบางลง เล็กลง และประหยัดพลังงานมากขึ้น การพัฒนาจอแสดงผล micro OLED นั้นอยู่ในขั้นตอนการผลิตทดลอง และจะใช้เวลาหลายปีกว่าที่ Apple และ TSMC จะพร้อมสำหรับการผลิตจำนวนมาก ซึ่งจะทำให้จอแสดงผลเหล่านี้เหมาะสมสำหรับ Apple Glasses ที่มีข่าวลือว่าจะเปิดตัวประมาณปี 2023

ต้นปี 2564 Apple ว่ากันว่าเป็น เข้าสู่ 'ระยะที่สองของการพัฒนา' บนต้นแบบแว่นตาเสมือนจริง แว่นตามีกำหนดจะเข้าสู่ขั้นตอนที่สามของการพัฒนาในอีกไม่กี่เดือน และเมื่อการออกแบบต้นแบบเสร็จสิ้น อุปกรณ์สวมใส่จะผ่านการตรวจสอบทางวิศวกรรมเป็นระยะเวลาหกถึงเก้าเดือน

iOS 14 AR รั่วไหล

รหัสและรูปภาพ พบใน iOS 14 ยืนยันการทำงานของ Apple กับชุดหูฟัง AR หรือ VR โดยมีรูปถ่ายที่พบว่ามีตัวควบคุมทั่วไปสำหรับชุดหูฟังที่มีลักษณะคล้ายกับชุดหูฟัง HTC Vive Focus Apple ได้ใช้ฮาร์ดแวร์ HTC Vive เพื่อวัตถุประสงค์ในการทดสอบภายใน

Apple กำลังทดสอบอุปกรณ์ AR ด้วยแอป iOS 14 ชื่อ Gobi พร้อมกับรหัส QR เพื่อทดสอบประสบการณ์ความเป็นจริงยิ่ง หนึ่งในประสบการณ์ความเป็นจริงยิ่งเหล่านี้คือเกมโบว์ลิ่งบนทางม้าลายที่เกิดขึ้นที่ทางม้าลายเฉพาะในซันนีเวล รัฐแคลิฟอร์เนีย

AR ใน Xcode

รหัสใน Xcode 11 ยืนยัน ผลงานของแอปเปิล บนชุดหูฟัง AR บางประเภท มีการอ้างอิงถึงอุปกรณ์ทดสอบที่มีชื่อรหัสพร้อมกรอบงานและเชลล์ระบบที่เกี่ยวข้องกับอุปกรณ์เหล่านี้ ข้อมูลอ้างอิงแนะนำว่า Apple กำลังพัฒนาการสนับสนุนสำหรับประสบการณ์ AR ที่ติดตั้งบนใบหน้าซึ่งคล้ายกับ Daydream ของ Google

ห้างหุ้นส่วนจำกัดวาล์ว?

ตามไซต์ไต้หวัน DigiTimes , Apple กำลังร่วมมือกับ ผู้พัฒนาเกม Valve สำหรับชุดหูฟัง AR ที่มีข่าวลือ Valve เปิดตัวชุดหูฟัง VR รุ่นแรก Valve Index ในเดือนเมษายน 2019

ก่อนหน้านี้ Valve ทำงานร่วมกับ Apple เพื่อนำการรองรับชุดหูฟัง VR ดั้งเดิมมาสู่ macOS High Sierra โดยใช้ประโยชน์จากการรองรับ eGPU ด้วยซอฟต์แวร์ SteamVR เวอร์ชัน Mac

ข่าวลืออื่นๆ

ในเดือนพฤศจิกายนปี 2017 Apple ได้ซื้อ Vrvana ซึ่งเป็นบริษัทที่พัฒนาชุดหูฟังแบบผสมความเป็นจริงที่เรียกว่า Totem เทคโนโลยีของ Vrvana สามารถใช้กับชุดหูฟังของ Apple ในอนาคตได้ Apple ติดตามการซื้อ Vrvana ด้วยการซื้อกิจการ Akonia Holographics ซึ่งเป็นบริษัทที่ผลิตเลนส์สำหรับแว่นตาอัจฉริยะ AR

ข่าวลือยังแนะนำว่า Apple สามารถรวมการวิจัยความเป็นจริงเสริมเข้ากับโครงการรถยนต์ที่กำลังดำเนินการอยู่ซึ่งเป็นส่วนหนึ่งของระบบซอฟต์แวร์ในรถยนต์ที่อาจรวมถึง heads-up display หรือคุณสมบัติอื่น ๆ

บันทึก: พบข้อผิดพลาดในบทสรุปนี้หรือต้องการเสนอความคิดเห็น .

ความเป็นจริงยิ่งกับความเป็นจริงเสมือน

เทคโนโลยีความจริงเสริม (AR) และความเป็นจริงเสมือน (VR) เป็นเทคโนโลยีที่คล้ายคลึงกัน แต่มีความแตกต่างที่สำคัญระหว่างเทคโนโลยีเหล่านี้กับการใช้งานที่มีศักยภาพแตกต่างกันอย่างมาก ความเป็นจริงเสมือนหมายถึงประสบการณ์ที่เต็มอิ่มในโลกเสมือนจริง ในขณะที่ความเป็นจริงยิ่งหมายถึงมุมมองที่ปรับเปลี่ยนของโลกแห่งความเป็นจริง

ความแตกต่างอาจสรุปได้ดีที่สุดด้วยการเปรียบเทียบระหว่างผลิตภัณฑ์สองรายการ คือ AR และ VR หนึ่งรายการ Google Glass ชุดแว่นตาอัจฉริยะที่เลิกใช้ไปแล้วของ Google เป็นตัวอย่างของเทคโนโลยีความจริงเสริม Google Glass ที่ถนอมสายตาทำให้ผู้ใช้มองเห็นโลกตามที่เป็นอยู่ แต่มีการแสดงข้อมูลล่วงหน้าที่ซ้อนทับข้อมูลที่คอมพิวเตอร์ให้มาที่เกี่ยวข้องในมุมมองโลกจริง เช่น สภาพอากาศในท้องถิ่น แผนที่ และการแจ้งเตือน

สิ่งนี้คล้ายกับสิ่งที่ Apple เรียกว่ากำลังทำงานกับ 'แว่นตาอัจฉริยะ' ที่มีข่าวลือ

ในการเปรียบเทียบ Facebook's Oculus Rift เป็นชุดหูฟังเสมือนจริงที่ให้ประสบการณ์การรับชมที่สมจริงซึ่งไม่ได้เสริมโลกแห่งความเป็นจริงด้วยข้อมูลทางประสาทสัมผัสเพิ่มเติม แต่จะเข้ามาแทนที่โลกแห่งความจริงด้วยโลกจำลองอย่างสมบูรณ์

เทคโนโลยี Augmented Reality ให้บริบทและข้อมูลเกี่ยวกับโลกรอบตัวที่สร้างด้วยคอมพิวเตอร์ ในขณะเดียวกันก็ช่วยให้เราโต้ตอบกับสิ่งรอบตัวได้ ในขณะที่ Virtual Reality ออกแบบมาเพื่อแยกเราออกจากสภาพแวดล้อม เพื่อให้เราสามารถโต้ตอบกับโลกที่สมมติขึ้นได้

iphone xr คือโทรศัพท์อะไร

การใช้งานที่เป็นไปได้สำหรับทั้งสองมีความแตกต่างกันอย่างมาก Virtual Reality มุ่งเน้นเฉพาะการบริโภคเนื้อหาที่ชวนดื่มด่ำ เพราะทำให้ผู้สวมใส่รู้สึกราวกับว่าพวกเขากำลังประสบกับสิ่งที่เกิดขึ้นจริงในโลกจำลองผ่านการตอบกลับด้วยภาพ สัมผัส และเสียง ขณะนี้ Virtual Reality เชื่อมโยงกับการเล่นเกมเป็นส่วนใหญ่ แต่ก็มีศักยภาพที่จะสร้างประสบการณ์ในโลกแห่งความเป็นจริงขึ้นมาใหม่เพื่อวัตถุประสงค์ด้านการศึกษาหรือการฝึกอบรม

ความเป็นจริงเสริมไม่ได้ขึ้นอยู่กับเนื้อหาที่สมจริงและในขณะที่น่าตื่นเต้นน้อยกว่าเพราะเป็นการเติมความเป็นจริงแทนการแทนที่ แต่ก็มีแอพพลิเคชั่นที่มีศักยภาพหลากหลายขึ้น อันที่จริงแล้วแอพและเกมเติมความเป็นจริงนั้นพร้อมให้ใช้งานแล้ว ใน iOS 11 ขอบคุณ ARKit

ARKit ช่วยให้อุปกรณ์ iOS สามารถระบุพื้นผิวเหมือนตาราง จากนั้นจึงเพิ่มวัตถุเสมือนเข้าไปได้ เนื่องจากพลังประมวลผลของ iPhone และ iPad ความสามารถในการเพิ่มความเป็นจริงของ ARKit นั้นน่าประทับใจ มีการใช้ ARKit เพื่อสร้างแอพและเกมที่หลากหลาย โดยผสมผสานวัตถุดิจิทัลเข้ากับโลกแห่งความจริง

เล่น

Apple อาจตั้งเป้าสำหรับผลิตภัณฑ์ที่ใช้งานได้กับทั้งความจริงเสริมและความเป็นจริงเสมือนตามที่แนะนำโดยข่าวลือล่าสุดที่ระบุว่าใช้งานได้กับชุดหูฟัง AR / VR ผลิตภัณฑ์ดังกล่าวสามารถใช้กับแอปพลิเคชันความเป็นจริงเสมือนที่จริงจังรวมถึงประสบการณ์ความเป็นจริงยิ่งและจะคล้ายกับ Microsoft HoloLens

ทีม VR/AR ของ Apple

งานของ Apple เกี่ยวกับเทคโนโลยีเสมือนจริงและความจริงเสริมนั้นเกิดขึ้นมาหลายปีแล้ว แต่ข่าวลือเริ่มมีขึ้นในเดือนมีนาคม 2015 เมื่อมีข่าวออกมาว่า Apple มีทีมงานเล็กๆ ที่ทำงานเกี่ยวกับเทคโนโลยีความจริงเสริม ในปี 2558 และต้นปี 2559 ทีมงานของ Apple เติบโตขึ้นเมื่อบริษัทว่าจ้างพนักงานที่มีความเชี่ยวชาญด้านเทคโนโลยี AR/VR และเข้าซื้อกิจการที่เกี่ยวข้องกันหลายครั้ง

ทีมงาน AR/VR ของ Apple มีวิศวกรหลายร้อยคนจากทั่วทั้ง Apple ซึ่งทุกคนมีความเชี่ยวชาญด้านความเป็นจริงเสมือนและความจริงเสริม ทีมงานทำงานในสวนสาธารณะทั้งในคูเปอร์ติโนและซันนีเวล และ Apple กำลังสำรวจโครงการฮาร์ดแวร์และซอฟต์แวร์หลายโครงการภายใต้ชื่อรหัส 'T288'

ทีมเทคโนโลยีความจริงเสริมของ Apple ผสมผสาน 'จุดแข็งของฮาร์ดแวร์และซอฟต์แวร์ที่เชี่ยวชาญ' และนำโดย Mike Rockwell ผู้ซึ่งมาจาก Dolby อดีตพนักงานของบริษัทอย่าง Oculus, HoloLens, Amazon (จากทีม VR), บริษัทแอนิเมชั่น 3 มิติ Weta Digital และ Lucasfilm กำลังทำงานเกี่ยวกับ AR ที่ Apple

Dan Riccio อดีตหัวหน้าฝ่ายวิศวกรรมฮาร์ดแวร์ของ Apple ในเดือนมกราคม 2021 เปลี่ยนไป สู่บทบาทใหม่ เขาอยู่ไหน ดูแลงานของ Apple บนชุดหูฟัง AR/VR โครงการเผชิญกับความท้าทายในการพัฒนา และผู้บริหารของ Apple เชื่อว่าการมุ่งเน้นของ Riccio อาจช่วยได้

จ้าง

หนึ่งในผู้ว่าจ้าง AR/VR ที่โดดเด่นที่สุดของ Apple คือศาสตราจารย์ด้านวิทยาการคอมพิวเตอร์ Doug Bowman ซึ่งเคยเป็นผู้นำศูนย์การปฏิสัมพันธ์ระหว่างมนุษย์กับคอมพิวเตอร์ของ Virginia Tech เขาเชี่ยวชาญด้านการออกแบบส่วนต่อประสานผู้ใช้สามมิติและได้เขียนหนังสือเกี่ยวกับอินเทอร์เฟซ 3 มิติและประโยชน์ของสภาพแวดล้อมเสมือนจริง เขามีความเชี่ยวชาญทั้งเสมือนจริงและเสมือนจริง

Apple ยังได้ว่าจ้างพนักงานที่เคยทำงานเกี่ยวกับผลิตภัณฑ์เสมือนจริงหรือความจริงเสริมที่ Microsoft และ Lytro พนักงานล่าสุดบางคนบอกว่ามาจากทีม HoloLens ของ Microsoft ในขณะที่คนอื่น ๆ ทำงานที่ Lytro ซึ่งเป็นบริษัทที่ทำงานเกี่ยวกับกล้องที่สามารถผสมผสานไลฟ์แอ็กชันและกราฟิกคอมพิวเตอร์เพื่อประสบการณ์ VR แบบไลฟ์แอ็กชัน พนักงานที่มาจากทีม HoloLens จะมีประสบการณ์ในการสร้างชุดหูฟังความเป็นจริงเสริมขั้นสูง

กล้อง Lytro Immerge 360 ​​องศา

Zeyu Li ซึ่งดำรงตำแหน่งหัวหน้าวิศวกรวิทัศน์คอมพิวเตอร์ที่ Magic Leap (บริษัทที่เพิ่งเริ่มต้นพัฒนาจอแสดงผล AR/VR แบบสวมศีรษะ) กำลังทำงานที่ Apple ในตำแหน่ง 'วิศวกรอาวุโสด้าน Computer Vision Algorithm'

Yury Petrov อดีตนักวิทยาศาสตร์การวิจัยของ Oculus ที่ Facebook เป็นเจ้าของ ตอนนี้ทำหน้าที่เป็น 'นักวิทยาศาสตร์การวิจัย' ที่ Apple ตามโปรไฟล์ LinkedIn ของเขา Petrov ศึกษาประสบการณ์เสมือนจริง ออปติกต้นแบบ และพัฒนาซอฟต์แวร์จำลองด้วยคอมพิวเตอร์

Jeff Norris ผู้เชี่ยวชาญด้าน Augmented Reality เข้าร่วมกับ Apple ในเดือนเมษายน 2017 ในตำแหน่งผู้จัดการอาวุโสที่ทำงานในทีม Augmented Reality ของบริษัท Norris ก่อตั้ง Mission Operations Innovation Office และ JPL Ops Lab ที่ NASA เขาเป็นผู้นำโครงการหลายโครงการที่เน้นการปฏิสัมพันธ์ระหว่างมนุษย์กับระบบโดยเน้นที่ความเป็นจริงเสมือนและความเป็นจริงยิ่ง

Apple ในเดือนพฤษภาคม 2018 จ้าง Sterling Crispin ผู้พัฒนาแอพจิตรกรรมสำหรับชุดหูฟัง VR มือถือ 'Cyber ​​Paint' ให้ผู้สวมใส่ชุดหูฟัง VR สร้างภาพ 2D 260 องศาบน Oculus Go, Daydream, GearVR และ Vive Focus หน้า LinkedIn ของ Crispin กล่าวว่าเขากำลังทำงานเป็น 'นักวิจัยสร้างต้นแบบ' โดยบอกว่าเขาได้ร่วมงานกับทีมที่มีข่าวลือว่ากำลังทำงานเกี่ยวกับเทคโนโลยีชุดหูฟัง VR/AR

Apple ในเดือนธันวาคม 2018 จ้างอดีตนักออกแบบอาวุโสของ Tesla และ Microsoft HoloLens Andrew Kim และจากประวัติของเขา เขาอาจทำงานในโครงการแว่นตา AR ที่ลือกันว่าของ Apple หรือรถ Apple ที่กำลังจะมีการพัฒนา

Arthur van Hoff ผู้ก่อตั้ง Jaunt VR เข้าร่วม Apple ในตำแหน่งสถาปนิกอาวุโสในเดือนเมษายน 2019 ก่อนทำงานที่ Apple บริษัทของเขา สร้างฮาร์ดแวร์ VR รวมถึงกล้อง 3D VR มูลค่า 100,000 ดอลลาร์ที่เรียกว่า Jaunt One ก่อนหน้าที่ Van Hoff ออกจากบริษัท Jaunt ล้มเหลวและเปลี่ยนไปใช้ประสบการณ์ AR

ด้วยทีมงานของ Apple ที่มีพนักงานหลายร้อยคน ทำให้มีผู้ว่าจ้างผู้เชี่ยวชาญด้าน Virtual Reality อีกหลายรายที่ตกอยู่ภายใต้เรดาร์ ใน LinkedIn มีวิศวกรซอฟต์แวร์หลายคนที่มีประสบการณ์ Virtual Reality ที่ Apple ว่าจ้าง แต่ก็ไม่ชัดเจนว่าพวกเขาทำงานในทีมลับ AR/VR หรือไม่

Apple ในเดือนกรกฎาคม 2019 ได้ย้าย Kim Vorrath หนึ่งในผู้บริหารซอฟต์แวร์ของบริษัทไปที่ ชุดหูฟังเสมือนจริง ดิวิชั่นเพื่อ 'สั่งบางอย่าง' ให้กับทีม Vorrath ดูแลการจัดการโปรแกรมในทีมพัฒนาซอฟต์แวร์มาเป็นเวลา 15 ปี และได้รับการขนานนามว่าเป็น 'พลังอันทรงพลัง' ที่ทำให้แน่ใจว่าพนักงานจะทำตามกำหนดเวลาในขณะที่ยังขจัดข้อบกพร่อง

การเข้าซื้อกิจการ

สมาชิกหลายคนในทีม AR/VR ของ Apple อาจเข้าร่วมกับบริษัทแม้ว่าจะเข้าซื้อกิจการ ตั้งแต่ปี 2015 Apple ได้ซื้อบริษัทหลายแห่งที่สร้างผลิตภัณฑ์เกี่ยวกับ AR/VR และการเข้าซื้อกิจการ AR/VR บางส่วนก็ย้อนกลับไปเมื่อหลายปีก่อน

Apple ในเดือนสิงหาคม 2018 ได้ซื้อ Akonia Holographics ซึ่งเป็นบริษัทสตาร์ทอัพที่ผลิตเลนส์สำหรับแว่นตาเสมือนจริง Akonia Holographics โฆษณา 'เลนส์สะท้อนแสงโฮโลแกรมและท่อนำคลื่นปริมาณมากที่มีจำหน่ายในท้องตลาดสำหรับองค์ประกอบการแสดงผลที่โปร่งใสในแว่นตาอัจฉริยะ'

จอภาพที่ผลิตขึ้นนั้นใช้เทคโนโลยี HoloMirror ของบริษัทเพื่อ 'การแสดงสีที่คมชัดเป็นพิเศษ' เพื่อให้สามารถ 'จอแสดงผลแบบสวมศีรษะที่บางและเบาที่สุดในโลก'

ในเดือนพฤศจิกายนปี 2017 Apple ได้ซื้อ Vrvana ซึ่งเป็นบริษัทที่พัฒนาชุดหูฟังแบบผสมความเป็นจริงที่เรียกว่า Totem Totem ซึ่งไม่เคยเผยแพร่สู่สาธารณะ ได้รับการออกแบบมาเพื่อรวมเทคโนโลยีความจริงเสริมและเทคโนโลยีความเป็นจริงเสมือนไว้ในชุดหูฟังเดียว โดยผสานความสามารถ VR เต็มรูปแบบเข้ากับกล้องแบบ Pass-through เพื่อเปิดใช้งานคุณสมบัติความเป็นจริงเสมือนบนหน้าจอ

Totem ใช้ชุดกล้องเป็นหลักในการฉายภาพในโลกแห่งความเป็นจริงลงในจอแสดงผล OLED 1440p ในตัว ซึ่งเป็นวิธีการที่ค่อนข้างพิเศษที่ทำให้แตกต่างจากผลิตภัณฑ์คู่แข่งอย่าง HoloLens ของ Microsoft ซึ่งใช้จอแสดงผลโปร่งใสเพื่อรวมความเป็นจริงเสมือนและความเป็นจริงเสริมเข้าด้วยกัน Apple อาจวางแผนที่จะใช้เทคโนโลยีของ Totem ในผลิตภัณฑ์ในอนาคต

Apple ซื้อ PrimeSense บริษัท ตรวจจับร่างกาย 3 มิติในอิสราเอลในปี 2556 ทำให้เกิดการเก็งกำไรว่าความสามารถด้านการเคลื่อนไหวจะถูกนำไปใช้กับ Apple TV เทคโนโลยีความลึก 3 มิติของ PrimeSense และความสามารถในการตรวจจับความเคลื่อนไหวถูกนำมาใช้ในแพลตฟอร์ม Kinect เริ่มต้นของ Microsoft

PrimeSense ใช้แสงใกล้ IR เพื่อฉายแสงที่มองไม่เห็นเข้าไปในห้องหรือฉาก จากนั้นเซ็นเซอร์ภาพ CMOS จะอ่านเพื่อสร้างภาพเสมือนจริงของวัตถุหรือบุคคล ซึ่งช่วยให้สามารถควบคุมตามการเคลื่อนไหวสำหรับอินเทอร์เฟซของซอฟต์แวร์ แต่ยังสามารถทำสิ่งต่างๆ เช่น วัดวัตถุเสมือนและระบุระยะทางหรือขนาดที่เกี่ยวข้อง ซึ่งมีประโยชน์สำหรับแอปพลิเคชันความเป็นจริงเสริม เช่น การเล่นเกมแบบโต้ตอบ การทำแผนที่ในอาคาร และอื่นๆ เทคโนโลยี PrimeSense สามารถสร้างการสแกนบุคคลและวัตถุได้ 360 องศาที่มีความแม่นยำสูง ซึ่งมีประโยชน์สำหรับแอปพลิเคชันความเป็นจริงเสมือน

Apple เข้าซื้อกิจการบริษัทสตาร์ทอัพด้านเทคโนโลยีความจริงเสริม Metaio ในเดือนพฤษภาคมปี 2015 Metaio ได้สร้างผลิตภัณฑ์ที่เรียกว่า Metaio Creator ซึ่งสามารถใช้สร้างสถานการณ์เสมือนจริงได้ในเวลาเพียงไม่กี่นาที ก่อนที่จะถูกซื้อโดย Apple ซอฟต์แวร์ของ Metaio ถูกใช้โดยบริษัทต่างๆ เช่น Ferrari ผู้สร้างโชว์รูม Augmented Reality

เทคโนโลยี Metaio ยังถูกนำมาใช้ในกรุงเบอร์ลินเพื่อให้ผู้ที่เข้าชมกำแพงเบอร์ลินใช้สมาร์ทโฟนหรือแท็บเล็ตเพื่อดูว่าพื้นที่ดังกล่าวเป็นอย่างไรเมื่อกำแพงเบอร์ลินยังคงยืนอยู่ เทคโนโลยีของ Metaio เป็นเทคโนโลยีที่อาจนำไปใช้เพื่อเพิ่มความสามารถความเป็นจริงเสริมลงในแอปของ Apple เช่น Maps

Apple เข้าซื้อกิจการ Faceshift ในเดือนสิงหาคม 2015 ซึ่งเป็นการซื้อกิจการ Augmented Reality ครั้งที่สองในปี 2015 ก่อนที่ Apple จะเข้าซื้อกิจการ Faceshift ได้ทำงานร่วมกับสตูดิโอเกมและแอนิเมชั่นในด้านเทคโนโลยีที่ออกแบบมาเพื่อจับภาพการแสดงออกทางสีหน้าอย่างรวดเร็วและแม่นยำโดยใช้เซ็นเซอร์ 3D แปลงเป็นใบหน้าที่เคลื่อนไหวได้ เวลาจริง Faceshift กำลังทำงานในผลิตภัณฑ์ที่เน้นผู้บริโภคซึ่งจะช่วยให้ผู้คนสามารถเปลี่ยนใบหน้าของพวกเขาเป็นใบหน้าการ์ตูนหรือมอนสเตอร์ได้แบบเรียลไทม์ใน Skype

เทคโนโลยีของ Faceshift มีกรณีการใช้งานที่เป็นไปได้มากมาย และดูเหมือนว่า Apple กำลังใช้คุณสมบัตินี้เพื่อขับเคลื่อน Animoji ใน iPhone X

Apple เข้าซื้อกิจการ Emotient ซึ่งเป็นบริษัทที่สร้างเครื่องมือสำหรับการวิเคราะห์การแสดงออกทางสีหน้าในเดือนมกราคม 2559 เทคโนโลยีของ Emotient ใช้ปัญญาประดิษฐ์และการเรียนรู้ของเครื่องเพื่ออ่านอารมณ์ของมนุษย์ ซึ่งเป็นคุณสมบัติที่ผู้ลงโฆษณาใช้ในโลกแห่งความเป็นจริงเพื่อระบุปฏิกิริยาทางอารมณ์ โฆษณา

มีหลายสิบอย่างที่ Apple สามารถทำได้ด้วย Emotient ตั้งแต่การตรวจจับใบหน้าที่ดีขึ้นในแอป Photos ไปจนถึงการวิเคราะห์ความรู้สึกของลูกค้าในร้านค้าปลีกของ Apple ไปจนถึงการปลดล็อกอุปกรณ์ iOS แต่ก็ยังมีศักยภาพในการใช้ AR/VR อีกด้วย เช่นเดียวกับ Faceshift เทคโนโลยีของ Emotient สามารถใช้ในการวิเคราะห์และแปลงการแสดงออกทางสีหน้าเพื่อสร้างอวาตาร์เสมือนจริง ซึ่งมีประโยชน์สำหรับวัตถุประสงค์ด้านโซเชียลมีเดียและเกม มีแนวโน้มว่าจะใช้เทคโนโลยีแสดงอารมณ์สำหรับ Animoji

Flyby Media ซื้อเมื่อต้นปี 2559 เป็นอีกบริษัทหนึ่งที่ทำงานเกี่ยวกับเทคโนโลยีความจริงเสริม บินโดย สร้างแอป ที่ทำงานร่วมกับสมาร์ทโฟน 'Project Tango' ที่ติดตั้งเซ็นเซอร์ 3 มิติของ Google ทำให้สามารถแนบข้อความกับวัตถุในโลกแห่งความเป็นจริงและดูได้โดยผู้อื่นด้วยหนึ่งในอุปกรณ์ของ Google

ตัวอย่างเช่น บุคคลสามารถ 'สแกน' จุดสังเกต เช่น สะพานโกลเดนเกตของซานฟรานซิสโก และเขียนข้อความแนบไปกับสถานที่นั้น ผู้ที่มาเยี่ยมชมสะพานในภายหลังจะสามารถสแกนสะพานด้วยแอพ Flyby เพื่อดูข้อความ แอพ Flyby น่าจะดึงดูดความสนใจของ Apple เพราะสามารถจดจำและเข้าใจวัตถุต่าง ๆ ที่สแกน เทคโนโลยีที่ Apple สามารถใช้ได้ในหลายวิธีในแอพเช่น Photos และ Maps

ในเดือนกุมภาพันธ์ปี 2017 Apple ได้ซื้อ RealFace ซึ่งเป็นบริษัทด้านความปลอดภัยทางไซเบอร์และแมชชีนเลิร์นนิงที่เชี่ยวชาญด้านเทคโนโลยีการจดจำใบหน้า ซึ่งอาจใช้สำหรับฟีเจอร์ความเป็นจริงเสริมในอนาคต

RealFace พัฒนาเทคโนโลยีการจดจำใบหน้าที่ผสานรวมปัญญาประดิษฐ์เพื่อการจดจำใบหน้าที่ไร้แรงเสียดทาน มีแนวโน้มว่าใช้เทคโนโลยี Realface ใน iPhone X สมาร์ทโฟนเครื่องแรกของ Apple ที่มีความสามารถในการจดจำใบหน้าในรูปแบบของ Face ID

Apple ในเดือนพฤษภาคม 2020 เข้าซื้อกิจการ NextVR บริษัทในแคลิฟอร์เนียที่ผสมผสานความเป็นจริงเสมือนเข้ากับกีฬา ดนตรี และความบันเทิง โดยนำเสนอประสบการณ์ VR สำหรับการรับชมการถ่ายทอดสดบนชุดหูฟัง VR จาก PlayStation, HTC, Oculus, Google, Microsoft และผู้ผลิตรายอื่นๆ

Apple ในเดือนสิงหาคม 2020 ซื้อ VR เริ่มต้น Spaces บริษัทที่ออกแบบประสบการณ์เสมือนจริงที่ผู้คนสามารถสัมผัสได้ในห้างสรรพสินค้าและสถานที่อื่นๆ เช่น 'Terminator Salvation: Fight for the Future' Spaces ยังสร้างประสบการณ์ Virtual Reality สำหรับแอปสื่อสารผ่านวิดีโอ เช่น Zoom ซึ่ง Apple อาจรวมเข้ากับผลิตภัณฑ์ AR/VR ในอนาคต

สิทธิบัตร AR / VR

Apple ได้ยื่นจดสิทธิบัตรหลายฉบับที่เกี่ยวข้องโดยตรงกับชุดหูฟังเสมือนจริง ซึ่งทั้งหมดย้อนหลังไปหลายปี แม้ว่าเทคโนโลยีจะก้าวหน้าไปบ้างมากกว่าสิ่งเหล่านี้ แต่ก็ให้มุมมองที่น่าสนใจเกี่ยวกับแนวคิดที่ Apple ได้สำรวจมาในอดีต

การยื่นขอจดสิทธิบัตรปี 2008 ครอบคลุมถึง 'ระบบแสดงผลส่วนบุคคล' ที่ค่อนข้างพื้นฐาน ซึ่งออกแบบมาเพื่อเลียนแบบประสบการณ์การอยู่ในโรงภาพยนตร์เมื่อดูวิดีโอ

สิทธิบัตรฉบับที่สองอธิบายถึง 'ระบบแสดงผลแบบสวมศีรษะ' ด้วย 'เครื่องเลเซอร์' ที่ฉายภาพบนจอกระจกใสที่สวมทับดวงตา คล้ายกับแว่นตา ในการกำหนดค่านี้ ชุดหูฟังจะเชื่อมต่อกับเครื่องเล่นวิดีโอแบบใช้มือถือ เช่น iPod เพื่อให้มีพลังในการประมวลผล

สิทธิบัตรฉบับที่สามที่ยื่นฟ้องในปี 2551 นั้นมีความคล้ายคลึงกันในด้านการออกแบบ โดยครอบคลุมชุดหูฟังวิดีโอแบบแว่นตาที่ออกแบบมาเพื่อให้ผู้ใช้รับชมภาพยนตร์และเนื้อหาอื่นๆ โดยระบุโมดูลออปติคัลที่ปรับได้สองโมดูลที่เรียงต่อกันด้วยตาของผู้ใช้ ซึ่งสามารถแก้ไขการมองเห็นและอนุญาตให้ดูเนื้อหา 3 มิติได้ Apple อธิบายว่าสิ่งนี้เป็นการเสนอประสบการณ์การรับชมสื่อส่วนบุคคล

ถึง สิทธิบัตรที่สี่ ตั้งแต่ปี 2008 มีกรอบชุดหูฟังวิดีโอที่คล้ายกับ Google Glass ซึ่งจะทำให้ผู้ใช้สามารถเลื่อน iPhone หรือ iPod ลงในชุดหูฟังเพื่อให้วิดีโอ ชุดหูฟังได้รับการอธิบายว่าเป็นผลิตภัณฑ์เติมความเป็นจริงที่ช่วยให้ผู้ใช้ทำสิ่งต่าง ๆ เช่นดูวิดีโอหรือตรวจสอบอีเมลในขณะที่จับตาดูสิ่งรอบตัว

นอกเหนือจากสิทธิบัตรเกี่ยวกับชุดหูฟังแล้ว Apple ยังได้ยื่นขอสิทธิบัตรที่อธิบายวิธีอื่นๆ ที่คุณสมบัติเสมือนจริงและความเป็นจริงเสริมสามารถนำมาใช้ในอุปกรณ์ของตนได้ ตัวอย่างเช่น การยื่นขอจดสิทธิบัตรปี 2009 ครอบคลุมการแสดง 3D ที่ติดตั้งกล้องซึ่งจะเปลี่ยนมุมมองตามตำแหน่งที่สัมพันธ์กันของผู้ใช้

จอแสดงผลดังกล่าวจะตรวจจับการเคลื่อนไหวของศีรษะ ทำให้ผู้ใช้สามารถเคลื่อนศีรษะไปรอบๆ เพื่อดูภาพ 3 มิติจากมุมต่างๆ ได้ในขณะเดียวกันก็รวมเอาองค์ประกอบต่างๆ ของสภาพแวดล้อมของผู้ใช้ด้วย

สิทธิบัตรปี 2010 และ 2012 อธิบายการใช้เซ็นเซอร์ตรวจจับความเคลื่อนไหวเพื่อสร้างอินเทอร์เฟซ 3 มิติสำหรับอุปกรณ์ iOS โดยใช้เทคนิคความเป็นจริงเสริม Apple อธิบายอินเทอร์เฟซว่าเป็น 'ห้องเสมือน' ที่นำทางโดยควบคุมทิศทางของอุปกรณ์ผ่านเซ็นเซอร์ในตัวหรือผ่านท่าทาง

ในปี 2011 Apple ได้ยื่นจดสิทธิบัตรสำหรับคุณสมบัติความเป็นจริงเสริมในแอพ Maps ที่เกี่ยวข้องกับการทำแผนที่ระยะทางไปยังสถานที่สำคัญที่มีชื่อเสียง เมื่อใช้กล้องนี้ ผู้ใช้สามารถมองดูพื้นที่รอบๆ ตัว และรับการประมาณระยะห่างระหว่างจุดสองจุดแบบเรียลไทม์พร้อมกับการซ้อนทับของข้อมูลที่เกี่ยวข้อง

สิทธิบัตรที่ยื่นในปี 2014 และได้รับในปี 2017 ครอบคลุมระบบ Augmented Reality บนมือถือที่สามารถตรวจจับวัตถุในสภาพแวดล้อมและซ้อนทับกับข้อมูลเสมือนผ่านการใช้กล้อง หน้าจอ และอินเทอร์เฟซผู้ใช้ Apple อธิบายว่าระบบนี้เหมาะสำหรับจอแสดงผลแบบสวมศีรษะ แต่ยังแสดงว่าระบบกำลังใช้งานบนสมาร์ทโฟนอีกด้วย

Apple ได้พัฒนาเทคโนโลยีความเป็นจริงเสมือนที่สามารถทำได้ ใช้ภายในรถยนต์ไร้คนขับ . สิทธิบัตรของ Apple หลายฉบับอธิบายถึงระบบที่รวมระบบเสมือนจริงในรถยนต์ด้วยชุดหูฟัง VR ที่สวมใส่เพื่อให้ความบันเทิงและบรรเทาอาการเมารถจากงานต่างๆ เช่น การอ่านและการทำงานในขณะที่รถกำลังเคลื่อนที่

ถึง การยื่นขอจดสิทธิบัตรกรกฎาคม 2563 ครอบคลุมวิธีการป้อนข้อมูลที่เป็นไปได้ด้วย Apple Glasses ซึ่งอธิบายระบบที่แว่นตาใช้การตรวจวัดความร้อนด้วยอินฟราเรดเพื่อตรวจจับเมื่อมีคนสัมผัสวัตถุในโลกแห่งความเป็นจริง ทำให้แว่นตาสามารถฉายการควบคุมบนพื้นผิวโลกได้

ด้วยวิธีนี้ Apple Glasses สามารถฉายภาพในส่วนต่อประสานการควบคุม AR บนวัตถุจริงในโลกแห่งความเป็นจริงเพื่อให้ได้เอฟเฟกต์ภาพซ้อนทับแบบผสม

Apple ในเดือนกุมภาพันธ์ 2021 ได้ยื่นจดสิทธิบัตรหลายฉบับ เกี่ยวข้องกับการทำงานกับชุดหูฟังความเป็นจริงผสมที่มีข่าวลือ โดยมีสิทธิบัตรครอบคลุมองค์ประกอบการออกแบบ การปรับเลนส์ เทคโนโลยีการติดตามการมอง และซอฟต์แวร์

Apple ได้พัฒนาวิธีการต่างๆ ในการทำให้ชุดหูฟังสวมใส่สบายยิ่งขึ้น ในขณะเดียวกันก็รักษาให้ปลอดภัยและป้องกันแสง นอกจากนี้ยังมีระบบการปรับเลนส์อย่างละเอียดที่ใช้ของเหลวในการเปลี่ยนเลนส์ได้อย่างราบรื่นเพื่อให้พอดีกับผู้ใช้แต่ละคน

Apple ยังให้รายละเอียดเกี่ยวกับระบบติดตามดวงตาที่ใช้แสงอินฟราเรดในการตรวจจับตำแหน่ง และยังมีสิทธิบัตรว่าเอกสารสามารถแก้ไขได้อย่างไรในพื้นที่ 3 มิติเสมือนจริงโดยใช้ชุดหูฟังและการตรวจจับท่าทาง

แอปเปิ้ลมี ระบบที่จดสิทธิบัตร สำหรับการบันทึกวิดีโอจากชุดหูฟังซึ่งเซ็นเซอร์ติดตามการมองในตัวสามารถระบุตำแหน่งที่บุคคลกำลังดูอยู่ ซึ่งสามารถสั่งกล้องในตัวเพื่อบันทึกฉากที่ดวงตาของผู้ใช้อยู่ในตำแหน่ง แทนที่จะบันทึกเพียงแค่การบันทึก สิ่งที่อยู่ตรงหน้าผู้ใช้

คำขอรับสิทธิบัตรอีกฉบับหนึ่ง ที่ยื่นฟ้องในเดือนกุมภาพันธ์ พ.ศ. 2564 แสดงให้เห็นว่า Apple กำลังค้นคว้าเกี่ยวกับอุปกรณ์ที่ติดตั้งกับนิ้วซึ่งมีเซ็นเซอร์หลายตัวและการตอบสนองแบบสัมผัสเพื่อใช้เป็นอุปกรณ์ควบคุมสำหรับชุดหูฟังแบบผสมความเป็นจริง

อุปกรณ์ควบคุมมีรูปร่างที่ช่วยให้ผู้ใช้รู้สึกถึงวัตถุรอบตัวได้อย่างเป็นธรรมชาติ และสามารถตรวจสอบวิธีที่ผู้ใช้ขยับนิ้วและโต้ตอบกับพื้นผิวได้อย่างแม่นยำ กล่าวกันว่าระบบมีความแม่นยำมากจนสามารถตรวจจับแรงที่ผู้ใช้กดบนพื้นผิวและทิศทางที่แน่นอนของแรงนี้ ซึ่งส่งการตอบสนองแบบสัมผัสได้

เมื่อใช้ร่วมกับชุดหูฟัง AR หรือ VR Apple กล่าวว่าอุปกรณ์ที่ติดตั้งด้วยนิ้วนี้สามารถ 'ให้ผู้ใช้มีความรู้สึกโต้ตอบบนแป้นพิมพ์จริงเมื่อผู้ใช้แตะนิ้วบนพื้นผิวโต๊ะ' หรือ 'อนุญาตให้ผู้ใช้จัดหาจอยสติ๊ก -type input' สำหรับเล่นเกมโดยใช้เพียงปลายนิ้วของผู้ใช้

วันที่เปิดตัว

Ming-Chi Kuo นักวิเคราะห์ของ Apple กล่าวในเดือนตุลาคม 2021 ว่าชุดหูฟังแบบผสมความเป็นจริงที่กำลังจะมี ล่าช้า อย่างเร็วที่สุดจนถึงสิ้นปี 2565 โดยจะเริ่มการผลิตในไตรมาสที่สี่ของปี 2565

Bloomberg ยังเชื่อว่าชุดหูฟัง AR/VR ที่ Apple กำลังทำอยู่จะออกมาในปี 2022 ในขณะที่แว่นตา AR ที่กำลังพัฒนาจะออกมาในภายหลัง ข้อมูล ได้แนะนำว่าชุดหูฟัง AR/VR จะออกในปี 2022 ตามด้วยแว่นตาอัจฉริยะในปี 2023 แต่นี่เป็นไทม์ไลน์ที่เร็วกว่าแหล่งอื่นๆ ที่ระบุไว้สำหรับผลิตภัณฑ์แว่นตา

Apple ถูกกล่าวหาว่าอยู่เบื้องหลังการทดสอบแว่นตาอัจฉริยะที่อยู่ในระหว่างดำเนินการ ซึ่งอาจนำไปสู่ความล่าช้า Apple ควรจะเข้าสู่ระยะที่สองของการพัฒนาแว่นตาในต้นปี 2564 แต่การทดสอบระยะที่ 2 ยังไม่ได้เริ่ม ดังนั้นการผลิตในปริมาณมากในไตรมาสแรกของปี 2565 จึงเป็น ไม่ได้คาดหวัง .

นักวิเคราะห์ของ Morgan Stanley เพิ่งกล่าวว่าชุดหูฟัง AR นั้น 'กำลังเข้าใกล้' โดยอิงจาก จำนวนสิทธิบัตร Apple ได้เผยแพร่ นักวิเคราะห์เชื่อว่าพอร์ตสิทธิบัตรของ Apple สำหรับชุดหูฟัง AR/VR นั้นคล้ายคลึงกับพอร์ตสิทธิบัตรที่สร้างขึ้นก่อนการเปิดตัว Apple Watch

แผน AR/VR ในอนาคต

นักวิเคราะห์ของ Apple Ming-Chi Kuo เชื่อว่า Apple สามารถวางแผน 'คอนแทคเลนส์' ที่เติมความเป็นจริงได้ เปิดตัวได้ บางครั้งในช่วงปี 2030

ตามคำกล่าวของ Kuo เลนส์จะนำอุปกรณ์อิเล็กทรอนิกส์จากยุค 'การคำนวณที่มองเห็นได้' ไปสู่ ​​'การคำนวณที่มองไม่เห็น' ขณะนี้ยังไม่มีคอนแทคเลนส์ 'มองไม่เห็น' และไม่ใช่ผลิตภัณฑ์รับประกันว่า Apple จะพัฒนา