Apple Ziņas

Ābolu brilles

Tiek baumots, ka Apple ir simtiem darbinieku slepena komanda, kas strādā pie virtuālās un paplašinātās realitātes projektiem.

Mūžīgais personāls 2021. gada 29. novembrī applevr austiņasPēdējoreiz atjaunotspirms 8 stundāmIezīmējiet Pēdējās izmaiņas

Apple slepenais paplašinātās un virtuālās realitātes projekts

Saturs

  1. Apple slepenais paplašinātās un virtuālās realitātes projekts
  2. Papildinātā realitāte pret virtuālo realitāti
  3. Apple VR/AR komanda
  4. AR/VR Patents
  5. Palaišanas datums
  6. Nākotnes AR/VR plāni
  7. Apple brilles laika skala

Apple ir pētījis virtuālās realitātes un paplašinātās realitātes tehnoloģijas vairāk nekā 10 gadus, pamatojoties uz patentu pieteikumiem, taču, virtuālās un paplašinātās realitātes popularitātei strauji pieaugot līdz ar ARKit izlaišanu, Apple iesaistīšanās kļūst arvien nopietnāka, un ir sagaidāms, ka tas novedīs pie AR/ VR produkts 2022. gadā.





Tiek baumots, ka Apple ir slepena pētniecības vienība, kurā simtiem darbinieku strādā pie AR un VR un pēta veidus, kā jaunās tehnoloģijas varētu izmantot turpmākajos Apple produktos. VR/AR darbā pieņemšana pēdējos gados ir palielinājusies, un Apple ir iegādājies vairākus AR/VR uzņēmumus, turpinot darbu AR/VR jomā.

Apple jauktās realitātes austiņu makets





Tiek baumots, ka Apple vismaz strādās pie divi AR projekti, kas ietver paplašinātās realitātes austiņu komplektu, kas tiks izlaists aptuveni 2022. gadā, kam sekos gludāks paplašinātās realitātes briļļu pāris, kas tiks izlaists vēlāk. Tomēr daudzas baumas ir vērstas tikai uz brillēm, kas rada zināmu neskaidrību par Apple plāniem, taču šķiet, ka AR/VRheadset būs pirmais produkts, kas tiks laists klajā.

Apple analītiķis Ming-Chi Kuo uzskata, ka Apple ir “jauktās realitātes” austiņas iznāks 2022. gada beigās vai 2023. gada sākumā, bet Apple brilles tiks piedāvātas 2025. gadā, lai gan citi avoti ir ziņojuši, ka brilles tiks piegādātas 2023. gadā. Austiņas ir AR/VR jeb jauktā realitāte, savukārt Apple brilles ir paplašinātā realitāte.

Jauktas realitātes austiņas

Informācija un Blumbergs abi ir teikuši, ka Apple strādā pie viedajām brillēm UN AR/VR austiņām (pazīstamām arī kā jaukta realitāte), vispirms izlaižot austiņas un pēc tam brilles. Tiek baumots, ka austiņas ir līdzīgas Facebook virtuālās realitātes austiņām Oculus Quest, taču tām ir gludāks dizains, kurā izmantoti audumi un viegli materiāli, lai nodrošinātu austiņu ērtumu.

Tiek teikts, ka tas ir raksturīgs divi augstas izšķirtspējas 8K displeji un acu noteikšanas kameras, kas lietotājiem ļaus 'lasīt mazo burtu' un 'redzēt citus cilvēkus, kas stāv virtuālo objektu priekšā un aiz tiem'. Austiņas varēs kartēt telpu virsmas, malas un izmērus ar “lielāku precizitāti nekā tirgū esošās ierīces”. Tam būs uzlabots displejs un mikroshēma, kas ir pat ātrāka nekā M1 procesors 2020. gada Mac datoros.

ābolu skata koncepcijas labais stūris

Informācija februārī teica, ka tas būs aprīkots ar vairāk nekā duci kameru roku kustību izsekošanai papildus kamerām ārpasaules skatīšanai, un dizains bloķē perifēro redzamību, lai novērstu gaismas noplūdi lietotāja redzes laukā. Displejā varētu būt arī uz āru vērsts vizieris, kas ļautu lietotājam parādīt grafiku citiem.

The Elec apgalvo, ka VR austiņām būs augstas izšķirtspējas mikro OLED displejs ar līdz pat 3000 pikseļiem collā. Iepriekš tika baumots par mikro OLED displeju viedajām brillēm, bet ne VR austiņām.

Apple analītiķis Ming-Chi Kuo ir teicis, ka Apple gaidāmās jauktās realitātes austiņas būs 15 optisko kameru moduļi kopā. Astoņi no 15 kameru moduļiem tiks izmantoti caurspīdīgai paplašinātās realitātes pieredzei, seši moduļi tiks izmantoti 'novatoriskai biometrijai', un viens kameras modulis tiks izmantots vides noteikšanai.

Kuo arī uzskata Apple austiņas būs aprīkotas ar uzlabotu acu izsekošanas sistēmu, ko izmanto, lai nodrošinātu intuitīvu vizuālo pieredzi, kas nemanāmi mijiedarbojas ar ārējo vidi, kā arī intuitīvāku darbību, ko var kontrolēt ar acu kustībām un samazinātu skaitļošanas slogu. izšķirtspēja, kur lietotājs neskatās.

Dizaina ziņā austiņas ir aprakstītas kā ar 'gluds, izliekts vizieris, kas piestiprināts pie sejas ar sieta materiālu un maināmām galvas lentēm'. Tiek apgalvots, ka vienai galvas saitei ir telpiskā audio tehnoloģija, piemēram, AirPods Pro, kas nodrošina telpiskajai skaņai līdzīgu pieredzi, savukārt cita nodrošina papildu akumulatora darbības laiku, atrodoties ceļā. Apple strādā pie vairākām kontroles metodēm, tostarp “uzpirksteņiem līdzīgas ierīces, ko nēsāt uz cilvēka pirksta”. Austiņas spētu reaģēt arī uz lietotāja acu kustībām un roku žestiem, savukārt vienam austiņu prototipam bija arī fiziska ciparnīca viziera pusē. Apple ir arī testējis Siri ievadi.

Apple vēlas izveidot App Store austiņām, koncentrējoties uz spēlēm, video satura straumēšanu un video konferencēm. To ir aprakstījis Blumbergs kā 'visaptveroša 3-D digitālā vide', kas paredzēta spēlēm, video skatīšanai un saziņai.

Pašreizējie austiņu prototipi tiek teikts svērt aptuveni 200 līdz 300 gramus, bet Apple mērķis ir samazināt galīgo svaru līdz 100 līdz 200 gramiem, ja izdosies atrisināt tehniskas problēmas, kas padarītu austiņas vieglākas par esošajām VR ierīcēm. Austiņas būs pārnēsājamas ar neatkarīgu jaudu un atmiņu, taču tās nebūs “mobilas” kā iPhone. Tas nodrošinās “ieskaujošu pieredzi”, kas pārspēj pašlaik pieejamos VR produktus, un to varētu integrēt ar Apple TV+ un Apple Arcade.

Papildinātās realitātes funkcionalitāte austiņām ir “ierobežotāka”, un, lai gan izlaišana ir plānota 2022. gadā, Apple ir saskārusies ar vairākiem attīstības šķēršļiem un ir “konservatīvas” ierīces pārdošanas aplēses. Apple plāno pārdot aptuveni 180 000 vienību, kas ir līdzvērtīgi dārgākām ierīcēm, piemēram, Mac Pro. Paredzams, ka austiņas būs daudz dārgākas nekā citu uzņēmumu austiņas, un Informācija saka, ka Apple ir apspriedusi austiņu cenu aptuveni 3000 USD apmērā.

Sākotnējā dizainā bija ventilators un jaudīgi procesori, kā rezultātā ierīce bija pārāk smaga. Apple, iespējams, nolēma tuvināt austiņas sejai, lai samazinātu izmēru. Lietotāji nevarēs valkāt brilles, izmantojot austiņas, tāpēc Apple ir izveidojis sistēmu, kurā pielāgotas recepšu lēcas var ievietot virs VR ekrāniem.

Kuo uzskata, ka austiņas izmantos hibrīda Fresnel lēcu dizainu , kas ietver trīs saliktas lēcas katrai acij, kas izgatavotas no vieglas plastmasas. Dizaina mērķis ir nodrošināt īpaši īsus fokusa attālumus un uzlabotu optisko veiktspēju, kā arī plašu redzeslauku, kā arī saglabāt austiņu svaru zem 150 gramiem.

Jaudas ziņā gaidāmajām AR/VR austiņām būs a augstas klases galvenais procesors tas ir līdzīgs M1 mikroshēmai, ko Apple debitēja saviem Apple silīcija Mac datoriem pagājušajā gadā, kā arī zemākas klases procesoru, lai pārvaldītu ar sensoriem saistītos ierīces aspektus.

Apple analītiķis Ming-Či Kuo apgalvo, ka tas spēs darboties neatkarīgi, nepaļaujoties uz Mac vai iPhone, kas ir atkāpe no iepriekšējām baumām, ka tā varētu darboties. nepieciešama saite uz iPhone. Lieljaudas mikroshēma austiņās darbinās Sony 4K Micro OLED displeju pāri un sešus līdz astoņus optiskos moduļus, lai nodrošinātu uz AR balstītu funkcionalitāti. Apple ir pabeigts darbs uz SoC AR/VR austiņām, un tas tiks optimizēts bezvadu datu pārraidei, video saspiešanai un atspiešanai, kā arī jaudas efektivitātei, lai nodrošinātu maksimālu akumulatora darbības laiku, un tam nav neironu dzinēja, piemēram, dažām citām Apple mikroshēmām.

Apple gaidāmās jauktās realitātes austiņas piedāvājam WiFi 6E atbalsts, kas ir jaunākā WiFi specifikācija. Tiek ziņots, ka Apple plāno ieviest WiFi 6E, lai nodrošinātu augstākās klases, iespaidīgu pieredzi ar stabilu bezvadu savienojumu. WiFi 6E ir visas WiFi 6 priekšrocības, taču papildus 2,4 GHz un 5 GHz joslām tas pievieno 6 GHz spektru, lai palielinātu joslas platumu un mazāku ierīču traucējumus.

Jauktas realitātes austiņu renderēšana

Dizaineris Antonio De Rosa ir izstrādāti 3D renderējumi pamatojoties uz informāciju, ko kopīgoja Informācija , sniedzot mums ieskatu par to, kā varētu izskatīties Apple jauktās realitātes austiņas, pamatojoties uz pašreizējām baumām.

ābolu skata koncepcija aizmugurē

Informācija ir aprakstījis austiņas kā 'glūnu, izliektu vizieri, kas piestiprināts pie sejas ar sieta materiālu un maināmām galvas lentēm', kas tiek piedāvāts vairākās krāsās.

Sony augsta kontrasta ābolu brilles raksts

Agrīnie austiņu prototipi

Iepriekšējās baumas no CNET 2018. gadā ierosināja, ka Apple strādā pie jaudīgām AR/VR austiņām ar 8K displeju katrai acij, kas būtu atvienots no datora vai viedtālruņa, un tās darbotos gan ar virtuālās, gan paplašinātās realitātes lietojumprogrammām.

Tā vietā, lai paļauties uz savienojumu ar viedtālruni vai datoru, austiņas CNET aprakstītais savienotos ar “speciālo lodziņu”, izmantojot ātrdarbīgu maza darbības attāluma bezvadu tehnoloģiju, ko sauc par 60 GHz WiGig. Kaste tiks darbināta ar pielāgotu 5 nanometru Apple procesoru, kas ir 'jaudīgāks par visu, kas pašlaik ir pieejams'. Acīmredzot kaste atgādina datora torni, taču tas 'nebūs īsts Mac dators'. Par šo kastītei līdzīgo dizainu tika izplatītas agrīnas baumas, un tas varētu būt prototips, kas kopš tā laika ir pamests gludākajai versijai, kuru tagad apraksta baumas.

Tiek uzskatīts, ka iekšējās nesaskaņas laika gaitā ir veidojušas un mainījušas Apple mērķus attiecībā uz AR austiņām. Apple bija sākotnēji mērķējot īpaši jaudīgai sistēmai, kas tika komplektēta ar centrmezglu procesora ievietošanai, kā aprakstīts iepriekš, taču Džonijs Aivs, kurš kopš tā laika ir aizgājis no uzņēmuma, nevēlējās pārdot ierīci, kuras pilnīgai funkcionalitātei būtu nepieciešama atsevišķa, stacionāra ierīce.

Tā vietā es vēlējos austiņas ar mazāk jaudīgu tehnoloģiju, ko varētu iegult tieši ierīcē, bet AR/VR komandas vadītājs Maiks Rokvels vēlējās jaudīgāku ierīci. Tas bija strīds, kas ilga vairākus mēnešus, un Tims Kuks galu galā nostājās Īva pusē. Ir teikts, ka Ive dod priekšroku AR viedajām brillēm, kas arī tiek izstrādātas.

AR viedbrilles

Apple strādā pie paplašinātās realitātes briļļu komplekta, kuru izpludinātājs Džons Prosers ir ieteicis Apple sauksies par 'Apple Glass'. Šis nosaukums būtu neparasta izvēle, ņemot vērā līdzību ar nosaukumu Google Glass — produkts, kas pastāvēja ilgi pirms Apple darbu pie AR brillēm parādījās gaismā, tāpēc tas varētu nebūt precīzs.

Tiek uzskatīts, ka brilles izskatās līdzīgas parastajām brillēm, un abām lēcām ir displeji, ar kuriem var mijiedarboties, izmantojot žestus. Būs iespēja iegādāties brilles bez recepšu lēcām par iespējamo sākumcenu 499 USD, bet recepšu lēcas būs pieejamas par papildu samaksu.

Saskaņā ar Blumbergs , brilles ir iekšā agrīnā attīstības stadijā , pat agrāk nekā AR/VR austiņas, pie kurām strādā Apple. Brilles ir aprakstītas kā “pēc vairākiem gadiem”, lai gan Apple sākotnēji plānoja tās izlaist jau 2023. gadā. Pašreizējais prototips atgādina augstākās klases saulesbrilles ar bieziem rāmjiem, kuros atrodas akumulators un mikroshēmas.

Apple it kā ir plāno izmantot “modernākie” OLED mikrodispleji, ko Sony piegādā saviem paplašinātās realitātes brillēm. Sony OLED mikrodisplejiem ir īpaši ātrs reakcijas ātrums, īpaši augsts kontrasts, plaša krāsu gamma, augsts spilgtums, zems atstarošanas koeficients un integrēti draiveri plānam un vieglam dizainam. Tiek ziņots, ka brillēm ir 0,5 collu displejs ar 1280x960 izšķirtspēju.

apple ar iezīme attēls

Kuo sagaida, ka AR brilles tiks tirgotas kā iPhone piederums, un tās galvenokārt pildīs displeja lomu, pārlādējot skaitļošanu, tīklu veidošanu un pozicionēšanu uz iPhone kopā ar brillēm. nodrošinot vispirms mobilajām ierīcēm paredzēta optiskā caurspīdīgā AR pieredze. Piedāvājot AR brilles kā iPhone piederumu, Apple padarīs tās slaidas un vieglas. Prosers saka, ka brilles izskatīsies līdzīgi Ray-Ban Wayfarers vai brillēm, kuras nēsā Tims Kuks.

Blumbergs ir teicis, ka Apple brilles darbosies ar 'rOS' jeb realitātes operētājsistēmu. Tiek ziņots, ka rOS pamatā ir iOS — operētājsistēma, kas darbojas iPhone tālrunī. AR austiņām Apple izstrādā 'sistēmas komplektā' mikroshēmu, kas ir līdzīga Apple Watch, lai gan tā būs atkarīga no iPhone, kā minēts iepriekš.

AR austiņu izstrādes gaitā Apple par ievades metodēm ir uzskatījis skārienpaneļus, balss aktivizēšanu un galvas žestus, un tiek izstrādāts prototips virknei lietojumprogrammu, sākot no kartēšanas līdz īsziņu sūtīšanai. Tiek pētītas arī virtuālās sanāksmju telpas un 360 grādu video atskaņošana.

Domāju, ka bija sākotnējās baumas no 2020. gada palaišanas , Blumbergs uzskata AR brilles varētu nākt ir pagājuši gadi līdz izlaišanai, un VR austiņas iznāks 2022. gadā. Ziņojums no DigiTimes ierosināja, ka Apple AR brilles tiks laist klajā 2021. gadā, un Apple analītiķis Ming-Či Kuo sagaida, ka tas tiks laists klajā 2022. gadā. agrākais .

Izpludinātājs Džons Prosers uzskata, ka Apple savas AR brilles prezentēs 2021. gada martā vai jūnijā, taču tas šķiet neprecīzi, ņemot vērā aprēķinus no Blumbergs un Kuo.

Prosers arī saka, ka Apple strādā pie viedo briļļu ierobežota izdevuma “Steve Jobs Heritage” versijas, kas ir izstrādātas tā, lai tās izskatītos kā apaļas bezrāmju brilles, kuras agrāk valkāja Stīvs Džobss, taču Blumbergs Marks Gurmens šīs baumas nosaucis par 'pilnīgu izdomājumu'.

Apple ir strādājot ar TSMC izstrādāt “īpaši progresīvus” mikro OLED displejus, kas tiks izmantoti Apple gaidāmajās paplašinātās realitātes ierīcēs, piemēram, viedajās brillēs. Tiek uzskatīts, ka displeju izmērs ir mazāks par vienu collu.

Mikro OLED displeji ir veidoti tieši uz plāksnēm, nevis uz stikla pamatnes, kā rezultātā displeji ir plānāki, mazāki un energoefektīvāki. Tiek ziņots, ka mikro OLED displeju izstrāde ir izmēģinājuma ražošanas stadijā, un paies vairāki gadi, līdz Apple un TSMC būs gatavi masveida ražošanai, kas padarītu šos displejus piemērotus Apple Glasses brillēm, kuras, kā tiek ziņots, tiks laist klajā aptuveni 2023. gadā.

2021. gada sākumā Apple teikts, ka ir ieiet paplašinātās realitātes briļļu prototipa “izstrādes otrajā fāzē”. Brilles dažu mēnešu laikā ir paredzēts iziet trešajai izstrādes fāzei, un pēc tam, kad prototipa dizains būs pabeigts, valkājamajām brillēm tiks veikta sešu līdz deviņu mēnešu inženiertehniskās verifikācijas periods.

iOS 14 AR noplūdes

Kods un attēli atrasts operētājsistēmā iOS 14 apstipriniet Apple darbu pie AR vai VR austiņām, atklājot fotoattēlu, kurā attēlots vispārīga izskata kontrolieris austiņām, kas pēc dizaina ir līdzīgas HTC Vive Focus austiņām. Apple ir izmantojis HTC Vive aparatūru iekšējās testēšanas nolūkos.

googleglassasaugmentedrealitāte

Apple testē savu AR aprīkojumu ar iOS 14 lietotni Gobi kopā ar QR kodiem, lai pārbaudītu paplašinātās realitātes pieredzi. Viena no šīm paplašinātās realitātes pieredzēm ir boulinga spēle uz gājēju pārejas, kas tiek aktivizēta uz noteiktas gājēju pārejas Saniveilā, Kalifornijā.

AR pakalpojumā Xcode

Kods Xcode 11 apstiprina Apple darbs uz kaut kādām AR austiņām. Ir atsauces uz testa ierīcēm ar koda nosaukumu, kā arī ietvariem un sistēmas apvalku, kas saistīts ar šīm ierīcēm. Atsauces liecina, ka Apple izstrādā atbalstu sejai piestiprinātai AR pieredzei, kas ir līdzīga Google Daydream.

Valve partnerība?

Saskaņā ar Taivānas vietni DigiTimes , Apple sadarbojas ar spēļu izstrādātājs Valve par savām baumām AR austiņām. Valve savas pirmās VR austiņas Valve Index izlaida 2019. gada aprīlī.

Valve iepriekš strādāja ar Apple, lai MacOS High Sierra nodrošinātu vietējo VR austiņu atbalstu, izmantojot eGPU atbalstu ar SteamVR programmatūras Mac versiju.

Citas baumas

2017. gada novembrī Apple iegādājās Vrvana — uzņēmumu, kas izstrādāja jauktas realitātes austiņas ar nosaukumu Totem. Vrvana tehnoloģiju, iespējams, varētu izmantot nākotnes Apple austiņās. Apple pēc Vrvana iegādes iegādājās Akonia Holographics — uzņēmumu, kas ražo AR viedbriļļu lēcas.

Baumas arī liecina, ka Apple varētu iekļaut paplašinātās realitātes izpēti savā notiekošajā automašīnu projektā kā daļu no automašīnas programmatūras sistēmas, kas varētu ietvert brīdinājuma displeju vai citas funkcijas.

Piezīme: Vai redzat kļūdu šajā apkopojumā vai vēlaties sniegt atsauksmes? .

Papildinātā realitāte pret virtuālo realitāti

Papildinātā realitāte (AR) un virtuālā realitāte (VR) ir līdzīgas tehnoloģijas, taču starp tām ir būtiska atšķirība, un to potenciālie pielietojumi ir ļoti atšķirīgi. Virtuālā realitāte attiecas uz pilnīgu ieskaujošu pieredzi virtuālajā pasaulē, savukārt paplašinātā realitāte attiecas uz modificētu skatījumu uz reālo pasauli.

Atšķirību, iespējams, vislabāk var apkopot, salīdzinot divus produktus, vienu AR un vienu VR. Google Glass , Google vairs neeksistējošais viedo briļļu komplekts, ir paplašinātās realitātes piemērs. Acīs nolietotais Google Glass ļāva lietotājiem aplūkot pasauli tādu, kāda tā ir, taču tas piedāvāja uzkrītošu displeju, kas pārklāja attiecīgo datora sniegto informāciju par reālo pasaules skatu, piemēram, vietējiem laikapstākļiem, kartēm un paziņojumiem.

Tas ir līdzīgs tam, pie kā tiek ziņots, ka Apple strādā ar savām baumām izmantotajām viedajām brillēm.

virtuālā realitāteoculusrift

Salīdzinājumam, Facebook Oculus Rift ir virtuālās realitātes austiņas, kas piedāvā iespaidīgu vizuālo pieredzi, kas nepaplašina reālo pasauli ar papildu sensoro informāciju — tās pilnībā aizvieto reālo pasauli ar simulētu pasauli.

Papildinātā realitāte nodrošina datora ģenerētu kontekstu un informāciju par apkārtējo pasauli, vienlaikus ļaujot mums mijiedarboties ar apkārtējo vidi, savukārt virtuālā realitāte ir paredzēta, lai mūs izolētu no apkārtējās vides, lai mēs varētu mijiedarboties ar izdomātām pasaulēm.

ko nozīmē pārsūtīšana tieši no iphone

dougbowman

Abu potenciālie pielietojumi ir ļoti atšķirīgi. Virtuālā realitāte ir īpaši vērsta uz ieskaujošu satura patēriņu, jo tā lietotājam liek justies tā, it kā viņš patiešām piedzīvo simulētajā pasaulē notiekošo, izmantojot vizuālo, taustes un audio atgriezenisko saiti. Virtuālā realitāte šobrīd lielā mērā ir saistīta ar spēlēm, taču tai ir arī iespējas atjaunot reālās pasaules pieredzi izglītības vai apmācības nolūkos.

Papildinātā realitāte nav atkarīga no ieskaujoša satura, un, lai gan tā ir mazāk aizraujoša, jo tā nevis aizstāj to, bet gan papildina realitāti, bet tai ir plašāks iespējamo lietojumu klāsts. Faktiski paplašinātās realitātes lietotnes un spēles ir viegli pieejamas operētājsistēmā iOS 11 paldies ARKit.

Izmantojot ARKit, iOS ierīce spēj identificēt virsmu, piemēram, tabulu, un pēc tam tai var pievienot virtuālos objektus. Pateicoties iPhone un iPad skaitļošanas jaudai, ARKit paplašinātās realitātes iespējas ir iespaidīgas. ARKit jau tiek izmantots, lai izveidotu milzīgu lietotņu un spēļu klāstu, apvienojot digitālos objektus ar reālo pasauli.

spēlēt

Apple var mērķēt uz produktu, kas darbojas gan ar paplašināto, gan virtuālo realitāti, kā liecina nesenās baumas, kas liecina par darbu pie AR/VR austiņām. Šādu produktu varētu izmantot nopietnām virtuālās realitātes lietojumprogrammām, kā arī paplašinātās realitātes pieredzei, un tas būtu līdzīgs Microsoft HoloLens.

Apple VR/AR komanda

Apple darbs pie virtuālās un paplašinātās realitātes aizsākās vairākus gadus, taču baumas pieauga, sākot ar 2015. gada martu, kad parādījās ziņas, ka Apple ir neliela cilvēku komanda, kas strādā pie paplašinātās realitātes. 2015. gadā un 2016. gada sākumā Apple komanda pieauga, jo uzņēmums pieņēma darbā darbiniekus ar zināšanām AR/VR tehnoloģijā un veica vairākas saistītas iegādes.

Apple AR/VR komandā ir vairāki simti inženieru no visas Apple, kuriem visiem ir pieredze virtuālajā un paplašinātajā realitātē. Komanda strādā biroju parkos gan Cupertino, gan Saniveilē, un Apple pēta vairākus aparatūras un programmatūras projektus ar koda nosaukumu “T288”.

Apple paplašinātās realitātes komanda apvieno “savas aparatūras un programmatūras veterānu stiprās puses”, un to vada Maiks Rokvels, kurš nāca no Dolby. Bijušie tādu uzņēmumu kā Oculus, HoloLens, Amazon (no VR komandas), 3D animācijas uzņēmuma Weta Digital un Lucasfilm darbinieki strādā pie AR uzņēmumā Apple.

Bijušais Apple aparatūras inženieru vadītājs Dens Ričo 2021. gada janvārī veica pāreju uz jaunu lomu kur viņš ir pārrauga Apple darbu AR/VR austiņās. Projekts ir saskāries ar attīstības izaicinājumiem, un Apple vadītāji uzskata, ka Riccio fokuss var palīdzēt.

Nomā

Litrokamera

Viens no Apple ievērojamākajiem AR/VR darbiniekiem bija datorzinātņu profesors Dags Boumens, kurš iepriekš vadīja Virdžīnijas tehnoloģiju Cilvēka un datora mijiedarbības centru. Viņš specializējas trīsdimensiju lietotāja interfeisa dizainā un ir uzrakstījis grāmatu par šo tēmu, aptverot 3D saskarnes un ieskaujošās virtuālās vides priekšrocības. Viņam ir pieredze gan virtuālajā, gan paplašinātajā realitātē.

Apple ir arī nolīgusi darbiniekus, kas strādājuši pie virtuālās vai paplašinātās realitātes produktiem Microsoft un Lytro. Tiek uzskatīts, ka daži nesen pieņemtie darbinieki ir no Microsoft HoloLens komandas, savukārt citi strādāja Lytro — uzņēmumā, kas strādā pie kameras, kas spēj apvienot tiešraides darbību un datorgrafiku, lai nodrošinātu tiešraides VR pieredzi. HoloLens komandas darbiniekiem būtu pieredze uzlabotas paplašinātās realitātes austiņu izveidē.

totemvrvana Lytro Immerge 360 ​​grādu kamera

Zeju Li, kurš strādāja par galveno datorredzes inženieri uzņēmumā Magic Leap (startup, kas izstrādā uz galvas piestiprinātu AR/VR displeju), tagad strādā Apple kā 'vecākais datorredzes algoritma inženieris'.

Jurijs Petrovs, bijušais Facebook piederošā Oculus pētnieks, tagad strādā par Apple 'pētnieku'. Saskaņā ar viņa LinkedIn profilu Petrovs pētīja virtuālās realitātes pieredzi, izstrādāja optiku prototipus un izstrādāja datorsimulācijas programmatūru.

Papildinātās realitātes eksperts Džefs Noriss pievienojās Apple 2017. gada aprīlī kā vecākais vadītājs, kas strādā uzņēmuma paplašinātās realitātes komandā. Noriss NASA nodibināja Misijas operāciju inovāciju biroju un JPL Ops Lab. Viņš vadīja vairākus projektus, kas vērsti uz cilvēka un sistēmas mijiedarbību, uzsvaru liekot uz virtuālo un paplašināto realitāti.

2018. gada maijā Apple nolīga Sterlingu Krispinu, kurš izstrādāja gleznošanas lietotni mobilajām VR austiņām. Izmantojot programmu Cyber ​​Paint, VR austiņu lietotāji var izveidot 2D 260 grādu attēlus Oculus Go, Daydream, GearVR un Vive Focus. Krispina LinkedIn lapā teikts, ka viņš strādā par 'prototipēšanas pētnieku', liekot domāt, ka viņš ir pievienojies komandai, kas, pēc baumām, strādā pie VR/AR austiņu tehnoloģijas.

Apple 2018. gada decembrī nolīga bijušo vecāko Tesla un Microsoft HoloLens dizaineru Endrjū Kimu, un, ņemot vērā viņa vēsturi, viņš varētu strādāt pie Apple baumām izplatītā AR brilles projekta vai tā gaidāmās Apple automašīnas, kas tiek uzskatīta par izstrādes stadijā.

Jaunt VR dibinātājs Artūrs van Hofs pievienojās Apple kā vecākais arhitekts 2019. gada aprīlī. Pirms darba Apple, viņa uzņēmums izveidoja VR aparatūru , tostarp 100 000 USD vērta 3D VR kamera ar nosaukumu Jaunt One. Pirms van Hofa aiziešanas no uzņēmuma Jaunts cieta neveiksmi un pievērsās AR pieredzei.

Tā kā Apple komandā ir simtiem darbinieku, ir daudz citu virtuālās realitātes ekspertu, kas ir nonākuši zem radara. Vietnē LinkedIn Apple strādā vairāki programmatūras inženieri ar virtuālās realitātes pieredzi, taču nav skaidrs, vai viņi strādā slepenajā AR/VR komandā.

Apple 2019. gada jūlijā pārcēla Kimu Voratu, vienu no tās programmatūras vadītājiem, paplašinātās realitātes austiņas sadalīšana, lai komandā 'ieviestu kārtību'. Vorrath ir pārraudzījis programmu pārvaldību programmatūras izstrādes komandā 15 gadus, un tiek raksturots kā “spēcīgs spēks”, kas nodrošina, ka darbinieki ievēro termiņus, vienlaikus novēršot kļūdas.

Ieguvumi

Daudzi Apple AR/VR komandas locekļi, iespējams, ir pievienojušies uzņēmumam, iegādājoties. Kopš 2015. gada Apple ir iegādājies vairākus uzņēmumus, kas radījuši ar AR/VR saistītus produktus, un daži no tā AR/VR iegādes gadījumiem ir pat aizsākti vairākus gadus.

Akonijas hologrāfija

Apple 2018. gada augustā iegādājās Akonia Holographics — jaunuzņēmumu, kas ražo paplašinātās realitātes briļļu lēcas. Akonia Holographics reklamē 'pasaulē pirmo komerciāli pieejamo tilpuma hologrāfisko atstarojošo un viļņvada optiku caurspīdīgiem displeja elementiem viedajās brillēs'.

Tiek apgalvots, ka tā ražotajos displejos tiek izmantota uzņēmuma HoloMirror tehnoloģija, lai nodrošinātu 'īpaši skaidru, pilnkrāsu sniegumu', lai nodrošinātu 'visplānākos, vieglākos galvā valkātos displejus pasaulē'.

Vrvana

2017. gada novembrī Apple iegādājās Vrvana — uzņēmumu, kas izstrādāja jauktas realitātes austiņas ar nosaukumu Totem. Totem, kas nekad netika izlaists sabiedrībai, tika izstrādāts, lai apvienotu gan paplašinātās, gan virtuālās realitātes tehnoloģijas vienā austiņā, apvienojot visas VR iespējas ar caurlaides kamerām, lai iespējotu uz ekrāna balstītas paplašinātās realitātes funkcijas.

flybymedia

Totems būtībā izmantoja kameru komplektu, lai projicētu reālās pasaules attēlus savā iebūvētajā 1440p OLED displejā, kas ir nedaudz unikāla pieeja, kas to atšķir no konkurējošiem produktiem, piemēram, Microsoft HoloLens, kas izmanto caurspīdīgu displeju, lai apvienotu virtuālo un paplašināto realitāti. Apple varētu plānot izmantot kādu no Totem tehnoloģijām nākotnes produktā.

PrimeSense

Apple 2013. gadā iegādājās Izraēlā bāzētu 3D ķermeņa sensoru uzņēmumu PrimeSense, izraisot spekulācijas, ka Apple TV tiks ieviestas uz kustību balstītas iespējas. PrimeSense 3D dziļuma tehnoloģija un kustības uztveršanas iespējas tika izmantotas Microsoft sākotnējā Kinect platformā.

spēlēt

PrimeSense izmantoja gandrīz IR gaismu, lai projicētu neredzamu gaismu telpā vai ainā, ko pēc tam nolasa CMOS attēla sensors, lai izveidotu objekta vai personas virtuālu attēlu. Tas nodrošina programmatūras saskarņu vadīklas, kas balstītas uz kustību, bet var arī veikt tādas darbības kā virtuālo objektu mērīšana un relatīvo attālumu vai izmēru nodrošināšana, kas ir noderīgi paplašinātās realitātes lietojumprogrammām, piemēram, interaktīvām spēlēm, iekštelpu kartēšanai un citiem. PrimeSense tehnoloģija var arī izveidot ļoti precīzus 360 grādu cilvēku un objektu skenējumus, kas var būt noderīgi virtuālās realitātes lietojumprogrammām.

Metaio

2015. gada maijā Apple iegādājās paplašinātās realitātes jaunuzņēmumu Metaio. Metaio izveidoja produktu ar nosaukumu Metaio Creator, ko varēja izmantot, lai izveidotu paplašinātās realitātes scenārijus tikai dažu minūšu laikā. Pirms Apple iegādājās Metaio programmatūru, to izmantoja tādi uzņēmumi kā Ferrari, kas izveidoja paplašinātās realitātes izstāžu zāli.

spēlēt

Metaio tehnoloģija tika izmantota arī Berlīnē, lai cilvēki, kas apmeklē Berlīnes mūra vietu, varētu izmantot viedtālruni vai planšetdatoru, lai redzētu, kā šī teritorija izskatījās, kad Berlīnes mūris vēl stāvēja. Metaio tehnoloģija ir tāda, ko varētu izmantot, lai ieviestu paplašinātās realitātes iespējas Apple lietotnēs, piemēram, Maps.

Faceshift

Apple iegādājās Faceshift 2015. gada augustā, atzīmējot savu otro paplašinātās realitātes pirkumu 2015. gadā. Pirms Apple iegādes Faceshift strādāja ar spēļu un animācijas studijām, lai izstrādātu tehnoloģiju, kas izstrādāta, lai ātri un precīzi tvertu sejas izteiksmes, izmantojot 3D sensorus, pārvēršot tās animētās sejās īsts laiks. Faceshift strādāja arī pie uz patērētājiem orientēta produkta, kas ļautu cilvēkiem Skype reāllaikā pārveidot savas sejas multfilmu vai monstru sejās.

spēlēt

Faceshift tehnoloģijai ir plašs iespējamo lietošanas gadījumu klāsts, un šķiet, ka Apple izmanto šo funkciju, lai iPhone X darbinātu Animoji.

emocionāls

Uzņēmums Emotient, kas izstrādāja rīkus sejas izteiksmes analīzei, iegādājās Apple 2016. gada janvārī. Emotient tehnoloģija izmanto mākslīgo intelektu un mašīnmācīšanos, lai lasītu cilvēka emocijas — funkcijas, kuras reklāmdevēji ir izmantojuši reālajā pasaulē, lai noteiktu emocionālās reakcijas uz reklāmas.

spēlēt

Ir desmitiem lietu, ko Apple varētu darīt ar Emotient, sākot no labākas sejas noteikšanas lietotnē Photos līdz klientu jūtu analīzei Apple mazumtirdzniecības veikalos līdz iOS ierīču atbloķēšanai, taču tam ir arī potenciāls AR/VR lietojums. Tāpat kā Faceshift, Emotient tehnoloģiju varētu izmantot, lai analizētu un pārveidotu sejas izteiksmes, lai izveidotu virtuālus iemiesojumus, kas ir noderīgi sociālo mediju mērķiem un spēlēm. Emociju tehnoloģija, iespējams, tika izmantota Animoji.

Flyby Media

Flyby Media, kas tika iegādāts 2016. gada sākumā, ir vēl viens uzņēmums, kas strādāja pie paplašinātās realitātes. Lidot ar izveidoja lietotni kas darbojās ar Google 3D sensoru aprīkoto viedtālruni “Project Tango”, ļaujot pievienot ziņojumus reālās pasaules objektiem un skatīt tos citiem, izmantojot kādu no Google ierīcēm.

nbainvrnextvr Apskatiet lietotni Flyby Messenger, pirms tā tika izņemta no App Store, izmantojot TechCrunch

Piemēram, cilvēks var “skenēt” tādu orientieri kā Sanfrancisko Zelta vārtu tiltu un uzrakstīt tam pievienotu ziņojumu. Persona, kas apmeklēs tiltu vēlāk, varēs skenēt tiltu, izmantojot lietotni Flyby, lai redzētu ziņojumu. Lietotne Flyby, iespējams, pievērsa Apple uzmanību, jo tā spēja atpazīt un izprast dažādus skenētos objektus — tehnoloģiju, ko Apple varēja izmantot vairākos veidos tādās lietotnēs kā fotoattēli un kartes.

RealFace

2017. gada februārī Apple iegādājās RealFace — kiberdrošības un mašīnmācīšanās uzņēmumu, kas specializējas sejas atpazīšanas tehnoloģijā, ko, iespējams, varētu izmantot nākotnes paplašinātās realitātes funkcijās.

RealFace izstrādāja sejas atpazīšanas tehnoloģiju, kas integrē mākslīgo intelektu sejas atpazīšanai bez berzes. Visticamāk, tika izmantota Realface tehnoloģija iPhone X , Apple pirmais viedtālrunis ar sejas atpazīšanas iespējām Face ID veidā.

NākamaisVR

Apple 2020. gada maijā iegādājās NextVR , Kalifornijā bāzēts uzņēmums, kas apvienoja virtuālo realitāti ar sportu, mūziku un izklaidi, piedāvājot VR pieredzi tiešraides notikumu skatīšanai PlayStation, HTC, Oculus, Google, Microsoft un citu ražotāju VR austiņās.

applevrheadset1

Spaces

Apple 2020. gada augustā iegādājās VR startup Spaces , uzņēmums, kas izstrādāja virtuālās realitātes pieredzi, ko cilvēki varētu piedzīvot tirdzniecības centros un citās vietās, piemēram, “Terminator Salvation: Fight for the Future”. Spaces arī radīja virtuālās realitātes pieredzi video saziņas lietotnēm, piemēram, Zoom, ko Apple varētu iekļaut nākotnes AR/VR produktā.

AR/VR Patents

Apple ir iesniegusi vairākus patentus, kas ir tieši saistīti ar virtuālās realitātes austiņām, un visi ir datēti ar vairākiem gadiem. Lai gan tehnoloģijas, iespējams, ir attīstījušās nedaudz tālāk, tās sniedz interesantu ieskatu Apple agrāk pētītajās idejās.

2008. gada patenta pieteikums aptvēra diezgan vienkāršu “personīgo displeju sistēmu”, kas izstrādāta, lai atdarinātu pieredzi, kas ir kinoteātrī, skatoties video.

applevrheadset2

Otrajā patentā tika aprakstīta 'uz galvas piestiprināta displeja sistēma' ar 'lāzera dzinēju', kas projicēja attēlus uz caurspīdīga stikla displeja, kas valkāts virs acīm, līdzīgi kā brillēm. Šajā konfigurācijā austiņas ir savienotas ar rokas video atskaņotāju, piemēram, iPod, lai nodrošinātu apstrādes jaudu.

apple_patent_video_goggle

Trešais patents, kas sākotnēji tika iesniegts 2008. gadā, pēc dizaina bija līdzīgs, aptverot brillēm līdzīgas videoaustiņas, kas paredzētas, lai lietotāji varētu skatīties filmas un citu saturu. Tajā tika izklāstīti divi regulējami optiskie moduļi, kas sakārtoti ar lietotāja aci, kas varētu nodrošināt redzes korekciju un ļautu skatīt 3D saturu. Apple to raksturoja kā personisku multivides skatīšanās pieredzi.

applevrheadset4

UZ ceturtais patents no 2008. gada aptvēra video austiņu rāmi, kas ir līdzīgs Google Glass, kas ļautu lietotājam iebīdīt savu iPhone vai iPod austiņās, lai nodrošinātu video. Austiņas tika aprakstītas kā paplašinātās realitātes produkts, kas ļautu lietotājiem veikt tādas darbības kā, piemēram, skatīties video vai pārbaudīt e-pastu, vienlaikus sekojot līdzi apkārtnei.

3 diosplejs

Papildus patentiem, kas saistīti ar austiņām, Apple ir arī iesniedzis patentus, aprakstot citus veidus, kā virtuālās un paplašinātās realitātes funkcijas varētu ieviest savās ierīcēs. Piemēram, 2009. gada patenta pieteikums aptvēra ar kameru aprīkotus 3D displejus, kas maina perspektīvu, pamatojoties uz lietotāja relatīvo atrašanās vietu.

Šāds displejs noteiktu galvas kustību, ļaujot lietotājam pārvietot galvu, lai skatītos 3D attēlu no dažādiem leņķiem, vienlaikus iekļaujot lietotāja vides elementus.

apple_3d_interface_iphone

2010. un 2012. gada patenti aprakstīja kustību sensoru izmantošanu, lai izveidotu 3D saskarni iOS ierīcēm, izmantojot paplašinātās realitātes metodes. Apple aprakstīja interfeisu kā “virtuālu istabu”, kurā navigācija notiek, manipulējot ar ierīces orientāciju, izmantojot iebūvētos sensorus vai žestus.

paplašinātā realitāte

2011. gadā Apple iesniedza patentu par paplašinātās realitātes funkciju lietotnē Maps, kas saistīta ar attāluma kartēšanu līdz ievērojamiem orientieriem. Izmantojot kameru, lietotājs var aplūkot apkārtni un iegūt reāllaika aprēķinus par attālumu starp diviem punktiem, kā arī atbilstošās informācijas pārklājumus.

AR patents

2014. gadā iesniegtais un 2017. gadā piešķirtais patents attiecas uz mobilo paplašinātās realitātes sistēmu, kas spēj atklāt objektus vidē un pārklāt tos ar virtuālu informāciju, izmantojot kameras, ekrānu un lietotāja interfeisu. Apple apraksta sistēmu kā ideālu uz galvas piestiprinātam displejam, taču tas arī parāda, ka tā tiek izmantota viedtālruņos.

applepatent1

Apple ir strādājis pie virtuālās realitātes tehnoloģijas, kas varētu būt izmanto autonomos transportlīdzekļos . Vairāki Apple patenti apraksta sistēmu, kas ietver automašīnā iebūvētu virtuālās realitātes sistēmu ar VR austiņām, kas tiek lietotas, lai nodrošinātu izklaidi un mazinātu autoslimību no tādiem uzdevumiem kā lasīšana un darbs, kamēr transportlīdzeklis ir kustībā.

Apple touch patentu kartes

UZ 2020. gada jūlija patenta pieteikums aptver iespējamās ievades metodes ar Apple brillēm, aprakstot sistēmu, kurā brilles izmanto infrasarkano staru siltuma sensoru, lai noteiktu, kad kāds pieskaras reālās pasaules objektam, ļaujot brillēm pēc tam projicēt vadīklas uz reālās pasaules virsmas.

austiņu patentu dokumentu programmatūra

Izmantojot šo metodi, Apple brilles AR vadības saskarnē var projicēt uz jebkuru faktisku objektu reālajā pasaulē, lai radītu jauktas realitātes pārklājuma efektu.

Apple 2021. gada februārī iesniedza vairākus patentus saistīts ar tās darbu pie jauktās realitātes austiņām, par kurām runāja baumas, un patenti attiecas uz dizaina elementiem, objektīva regulēšanu, acu izsekošanas tehnoloģiju un programmatūru.

austiņu patentu dokumentu programmatūra 2

Apple ir izstrādājis vairākas metodes, kā padarīt austiņas valkājamas ērtākas, vienlaikus saglabājot tās drošas un bloķējot gaismu, kā arī ir pieejama detalizēta lēcu regulēšanas sistēma, kas izmanto šķidrumu, lai nemanāmi pārvietotu lēcas, lai pielāgotu austiņas katram lietotājam.

ar pirkstu montējamas ierīces patents

Apple arī sīki izklāsta acu izsekošanas sistēmu, kas izmanto infrasarkano gaismu, lai noteiktu atrašanās vietu, un ir arī patents par to, kā dokumentus var rediģēt virtuālā 3D telpā, izmantojot austiņas un žestu noteikšanu.

Apple ir patentētas sistēmas video ierakstīšanai no austiņām, kur iebūvētie skatiena izsekošanas sensori varētu sniegt norādi par to, kur cilvēks pašlaik skatās, kas varētu novirzīt iebūvēto kameru, lai ierakstītu ainu, kurā atrodas lietotāja acis, nevis vienkārši ierakstītu. kas ir lietotāja priekšā.

Vēl viens patenta pieteikums Iesniegts 2021. gada februārī, tika parādīts, ka Apple pēta ar pirkstiem piestiprinātu ierīci ar sensoru klāstu un taustes atgriezenisko saiti, ko izmantot kā vadības ierīci jauktas realitātes austiņām.

Vadības ierīcei ir tāda forma, kas ļauj lietotājiem dabiski sajust objektus savā apkārtnē un var precīzi noteikt veidu, kādā lietotājs kustina pirkstu un mijiedarbojas ar virsmām. Tiek uzskatīts, ka sistēma ir tik precīza, ka tā var noteikt, cik smagi lietotājs nospiež virsmu, un precīzu šī spēka virzienu, sniedzot atbildes reakciju.

Apvienojumā ar AR vai VR austiņām Apple saka, ka šī pirkstā piestiprinātā ierīce var 'sniegt lietotājam sajūtu, ka mijiedarbojas ar fizisku tastatūru, kad lietotājs ar pirkstu pieskaras galda virsmai' vai 'ļaut lietotājam nodrošināt kursorsviru. -tipa ievade' spēlēšanai, izmantojot tikai lietotāja pirkstu galu kustību.

Palaišanas datums

Apple analītiķis Ming-Či Kuo 2021. gada oktobrī sacīja, ka gaidāmajām jauktās realitātes austiņām ir aizkavējās agrākais līdz 2022. gada beigām, un ražošanu paredzēts sākt 2022. gada ceturtajā ceturksnī.

Blumbergs arī uzskata, ka AR/VR austiņas, pie kurām strādā Apple, iznāks 2022. gadā, savukārt izstrādes stadijā esošās AR brilles iznāks vēlāk. Informācija ir ierosinājis, ka AR/VR austiņas tiks izlaistas 2022. gadā, kam sekos viedās brilles 2023. gadā, taču šis ir agrāks laika grafiks, nekā citi avoti ir norādījuši briļļu izstrādājumam.

DigiTimes saka gaidāmās AR/VR austiņas ieiet masveida ražošanā 2022. gada otrajā ceturksnī, ar palaišanu ceturtajā ceturksnī.

Tiek apgalvots, ka Apple kavējas ar viedo briļļu testēšanu, kas tiek gatavotas, un tas varētu izraisīt aizkavēšanos. Apple bija paredzēts briļļu izstrādes otrajā fāzē 2021. gada sākumā, taču otrās fāzes testēšana vēl nav sākusies, tāpēc apjoma ražošana 2022. gada pirmajā ceturksnī tiek samazināta. nav gaidāms .

Morgan Stanley analītiķi nesen teica, ka AR austiņas 'tuvojas pacelšanai', pamatojoties uz patentu skaits Apple ir publicējis. Analītiķi uzskata, ka Apple patentu portfelis AR/VR austiņām ir līdzīgs patentu portfelim, ko tas izveidoja pirms Apple Watch palaišanas.

Nākotnes AR/VR plāni

Apple analītiķis Ming-Chi Kuo uzskata, ka Apple varētu plānot paplašinātās realitātes 'kontaktlēcas', kas varētu palaist kaut kad 2030. gados.

Pēc Kuo teiktā, objektīvi ienesīs elektroniku no 'redzamās skaitļošanas' laikmeta uz 'neredzamo skaitļošanu'. Pašlaik kontaktlēcām nav “redzamības”, un tas nav garantēts produkts, ko Apple izstrādās.