Nabalitaan ng XR na ang Apple ay gumagawa ng naisusuot na XR device o nilagyan ng OLED display.

Ayon sa mga ulat ng media, inaasahang ilalabas ng Apple ang una nitong wearable augmented reality (AR) o virtual reality (VR) device sa 2022 o 2023. Karamihan sa mga supplier ay maaaring nasa Taiwan, gaya ng TSMC, Largan, Yecheng, at Pegatron. Maaaring gamitin ng Apple ang pang-eksperimentong planta nito sa Taiwan para idisenyo ang microdisplay na ito. Inaasahan ng industriya na ang mga kaakit-akit na kaso ng paggamit ng Apple ay hahantong sa pag-alis ng market ng extended reality (XR). Ang anunsyo ng device ng Apple at mga ulat na nauugnay sa teknolohiyang XR ng device (AR, VR, o MR) ay hindi pa nakumpirma. Ngunit nagdagdag ang Apple ng mga AR application sa iPhone at iPad at inilunsad ang ARKit platform para sa mga developer na lumikha ng mga AR application. Sa hinaharap, maaaring bumuo ang Apple ng naisusuot na XR device, bumuo ng synergy sa iPhone at iPad, at unti-unting palawakin ang AR mula sa mga komersyal na application patungo sa mga consumer application.

Ayon sa Korean media news, inihayag ng Apple noong Nobyembre 18 na ito ay gumagawa ng XR device na may kasamang "OLED display." Ang OLED (OLED sa Silicon, OLED sa Silicon) ay isang display na nagpapatupad ng OLED pagkatapos gumawa ng mga pixel at driver sa isang silicon na wafer substrate. Dahil sa teknolohiyang semiconductor, maaaring maisagawa ang ultra-precision driving, na nag-i-install ng mas maraming pixel. Ang karaniwang resolution ng display ay daan-daang pixels per inch (PPI). Sa kabaligtaran, ang OLEDoS ay maaaring makamit ng hanggang sa libu-libong mga pixel bawat pulgadang PPI. Dahil ang mga XR device ay mukhang malapit sa mata, dapat nilang suportahan ang mataas na resolution. Naghahanda ang Apple na mag-install ng high-resolution na OLED display na may mataas na PPI.

Konseptwal na imahe ng Apple headset (pinagmulan ng larawan: Internet)

Plano din ng Apple na gumamit ng mga TOF sensor sa mga XR device nito. Ang TOF ay isang sensor na maaaring masukat ang distansya at hugis ng sinusukat na bagay. Mahalagang maisakatuparan ang virtual reality (VR) at augmented reality (AR).

Nauunawaan na ang Apple ay nakikipagtulungan sa Sony, LG Display, at LG Innotek upang i-promote ang pananaliksik at pagbuo ng mga pangunahing bahagi. Nauunawaan na ang gawain sa pagpapaunlad ay isinasagawa; sa halip na simpleng pananaliksik at pag-unlad ng teknolohiya, ang posibilidad ng komersyalisasyon nito ay napakataas. Ayon sa Bloomberg News, plano ng Apple na ilunsad ang mga XR device sa ikalawang kalahati ng susunod na taon.

Nakatuon din ang Samsung sa mga susunod na henerasyong XR device. Namuhunan ang Samsung Electronics sa pagbuo ng mga lente ng "DigiLens" para sa matalinong salamin. Bagama't hindi nito ibinunyag ang halaga ng pamumuhunan, ito ay inaasahang maging isang glass-type na produkto na may screen na nilagyan ng kakaibang lens. Lumahok din ang Samsung Electro-Mechanics sa pamumuhunan ng DigiLens.

Mga hamon na kinakaharap ng Apple sa paggawa ng mga naisusuot na XR device.

Kasama sa mga naisusuot na AR o VR na device ang tatlong functional na bahagi: display at presentation, sensing mechanism, at kalkulasyon.

Ang disenyo ng hitsura ng mga naisusuot na device ay dapat isaalang-alang ang mga kaugnay na isyu gaya ng kaginhawahan at pagiging katanggap-tanggap, gaya ng bigat at laki ng device. Ang mga XR application na mas malapit sa virtual na mundo ay kadalasang nangangailangan ng mas maraming computing power upang makabuo ng mga virtual na bagay, kaya ang kanilang core computing performance ay dapat na mas mataas, na humahantong sa mas malaking konsumo ng kuryente.

Bilang karagdagan, nililimitahan din ng pagwawaldas ng init at panloob na XR na mga baterya ang teknikal na disenyo. Nalalapat din ang mga paghihigpit na ito sa mga AR device na malapit sa totoong mundo. Ang XR battery life ng Microsoft HoloLens 2 (566g) ay 2-3 oras lang. Maaaring gamitin bilang solusyon ang pagkonekta ng mga naisusuot na device (pagte-tether) sa mga external na mapagkukunan ng computing (gaya ng mga smartphone o personal na computer) o power source, ngunit lilimitahan nito ang kadaliang mapakilos ng mga naisusuot na device.

Tungkol sa sensing mechanism, kapag ang karamihan sa mga VR device ay nagsasagawa ng human-computer interaction, ang kanilang katumpakan ay pangunahing nakasalalay sa controller sa kanilang mga kamay, lalo na sa mga laro, kung saan ang motion tracking function ay nakasalalay sa inertial measurement device (IMU). Gumagamit ang mga AR device ng mga freehand user interface, gaya ng natural na pagkilala sa boses at kontrol sa gesture sensing. Ang mga high-end na device tulad ng Microsoft HoloLens ay nagbibigay pa nga ng machine vision at 3D depth-sensing function, na mga lugar din na naging mahusay ng Microsoft mula nang ilunsad ng Xbox ang Kinect.

Kung ikukumpara sa mga naisusuot na AR device, maaaring mas madaling gumawa ng mga user interface at pagpapakita ng mga presentasyon sa mga VR device dahil hindi gaanong kailangang isaalang-alang ang panlabas na mundo o ang impluwensya ng ambient light. Ang handheld controller ay maaari ding maging mas madaling i-develop kaysa sa man-machine interface kapag walang kamay. Ang mga handheld controller ay maaaring gumamit ng IMU, ngunit ang gesture sensing control at 3D depth-sensing ay umaasa sa advanced optical technology at vision algorithm, iyon ay, machine vision.

Kailangang maprotektahan ang VR device para maiwasang maapektuhan ng real-world na kapaligiran ang display. Ang mga VR display ay maaaring mga LTPS TFT na liquid crystal display, LTPS AMOLED na mga display na may mas mababang halaga at mas maraming supplier, o mga umuusbong na silicon-based na OLED (micro OLED) na mga display. Ito ay cost-effective na gumamit ng isang display (para sa kaliwa at kanang mga mata), kasing laki ng isang mobile phone display screen mula 5 pulgada hanggang 6 pulgada. Gayunpaman, ang disenyo ng dual-monitor (na pinaghihiwalay sa kaliwa at kanang mata) ay nagbibigay ng mas mahusay na pagsasaayos ng interpupillary distance (IPD) at viewing angle (FOV).

Bilang karagdagan, dahil patuloy na nanonood ang mga user ng mga animation na binuo ng computer, ang low-latency (mga makinis na larawan, pinipigilan ang blur) at mataas na resolution (inaalis ang screen-door effect) ang mga direksyon sa pag-develop para sa mga display. Ang display optics ng VR device ay isang intermediate na bagay sa pagitan ng palabas at ng mga mata ng user. Samakatuwid, ang kapal (device shape factor) ay nabawasan at napakahusay para sa mga optical na disenyo tulad ng Fresnel lens. Ang epekto ng pagpapakita ay maaaring maging mahirap.

Para sa mga AR display, karamihan sa mga ito ay mga microdisplay na nakabatay sa silicon. Kasama sa mga teknolohiya sa display ang liquid crystal on silicon (LCOS), digital light processing (DLP) o digital mirror device (DMD), Laser beam scanning (LBS), micro OLED na nakabatay sa silicon, at micro-LED na nakabatay sa silicon (micro-LED on silikon). Upang labanan ang interference ng matinding ambient light, ang AR display ay dapat na may mataas na liwanag na mas mataas kaysa sa 10Knits (isinasaalang-alang ang pagkawala pagkatapos ng waveguide, 100Knits ay mas perpekto). Bagama't ito ay passive light emission, maaaring pataasin ng LCOS, DLP at LBS ang liwanag sa pamamagitan ng pagpapahusay sa pinagmumulan ng liwanag (tulad ng laser).

Samakatuwid, maaaring mas gusto ng mga tao na gumamit ng mga micro LED kumpara sa mga micro OLED. Ngunit sa mga tuntunin ng pagkulay at pagmamanupaktura, ang teknolohiyang micro-LED ay hindi kasing gulang ng teknolohiyang micro OLED. Maaari itong gumamit ng teknolohiyang WOLED (RGB color filter para sa puting liwanag) upang makagawa ng mga RGB na micro OLED na naglalabas ng ilaw. Gayunpaman, walang direktang paraan para sa paggawa ng mga micro LED. Ang mga potensyal na plano ay kinabibilangan ng Plessey's Quantum Dot (QD) color conversion (sa pakikipagtulungan sa Nanoco), Ostendo's Quantum Photon Imager (QPI) na dinisenyong RGB stack, at JBD's X-cube (isang kumbinasyon ng tatlong RGB chips).

Kung ang mga Apple device ay nakabatay sa video see-through (VST) method, maaaring gamitin ng Apple ang mature na micro OLED na teknolohiya. Kung ang Apple device ay nakabatay sa direktang see-through (optical see-through, OST) na diskarte, Hindi nito maiiwasan ang malaking ambient light interference, at maaaring limitado ang liwanag ng micro OLED. Karamihan sa mga AR device ay nahaharap sa parehong problema sa interference, na maaaring dahilan kung bakit pinili ng Microsoft HoloLens 2 ang LBS sa halip na micro OLED.

Ang mga optical na bahagi (gaya ng waveguide o Fresnel lens) na kinakailangan para sa pagdidisenyo ng isang microdisplay ay hindi nangangahulugang mas diretso kaysa sa paggawa ng isang microdisplay. Kung ito ay nakabatay sa pamamaraan ng VST, maaaring gamitin ng Apple ang pancake-style na optical na disenyo (kombinasyon) upang makamit ang iba't ibang micro-display at optical device. Batay sa paraan ng OST, maaari mong piliin ang disenyo ng waveguide o birdbath. Ang bentahe ng waveguide optical na disenyo ay ang form factor nito ay mas payat at mas maliit. Gayunpaman, ang waveguide optics ay may mahinang optical rotation performance para sa mga microdisplay at sinamahan ng iba pang mga problema tulad ng distortion, pagkakapareho, kalidad ng kulay, at contrast. Ang diffractive optical element (DOE), ang holographic optical element (HOE), at ang reflective optical element (ROE) ay ang mga pangunahing pamamaraan ng visual na disenyo ng waveguide. Nakuha ng Apple ang Akonia Holographics noong 2018 para makuha ang optical expertise nito.