Naujos „Vision Pro“ asmenys yra didelis patobulinimas, tačiau kaip jie bus padidinti iki mažesnių ausinių?
„Apple“ pristato didžiulį vizualinį savo „Persona Avatars“ atnaujinimą „Vision Pro“ „VisionOS 26“. Pamatęs naująją sistemą iš pirmų rankų, sunku būti sužavėtas. Tačiau išlieka svarbus klausimas – kaip „Apple“ įveiks iššūkį pateikti tokio ištikimybės lygį į mažesnes ausines, turinčias dar mažiau vietos kameroms, kurios yra būtinos tokiai technologijoms?
Asmenys „Visionos 26“ pakelia juostą vis dar aukščiau
Esama „VisionOS 2“ „Persona“ sistema jau buvo pati gyvybingiausia realaus laiko virtualios „Avatar“ sistema, prieinama rinkoje. Tačiau „Apple“ kelia savo juostą su „Persona“ naujinimu, kuris ateina į „Visionos 26“. Tiesą sakant, įmonė yra tokia patenkinta rezultatais, kad iš „Persona“ funkcijos pašalins „beta“ žymą „beta“.
Praėjusią savaitę WWDC aš pats turėjau išbandyti naują „Persona Tech“ ir turiu pasakyti, kad tai atrodo taip gerai, kaip jie parodė savo pradiniame atskleidimo filmuotoje medžiagoje.
https://www.youtube.com/watch?v=irgpj4ojphm
Pastaba: Kai burna sulieja, nes aš uždedu ranką priešais ją, užtemdydama vaizdą į ausines žemyn nukreiptomis kameromis. Ir jei jūsų matomas judesys atrodo „nenatūralus“, taip yra todėl, kad taip yra! Aš tikslingai ėmiausi keistų judesių ir pozų, kad pamatyčiau, kaip gerai sistema juos interpretavo.
Nors ji naudoja tą pačią fiksavimo procedūrą, tas pačias fotoaparatas ausinėse ir vis dar apdoroja viską įrenginiu, rezultatai yra aiškiai patobulinti. Oda atrodo daug išsamesnė; Mane ypač sužavėjo tai, kaip tai užfiksavo mano ražieną. Plaukai ant galvos taip pat yra išsamesni.
Bet gal net daugiau, „Apple“ personažo sistema užfiksuoja veido judesį įspūdingomis detalėmis. Galite pamatyti, kaip aš judate veidą nedažnais ir asimetriškais būdais, tačiau rezultatai vis tiek atrodo niuansuoti ir realūs. Iš tikrųjų nėra aišku, ar judesių žemėlapis buvo atnaujintas naudojant šią naują asmenų versiją, ar ji tiesiog atrodo realistiškesnė, nes pagrindinis nuskaitymas dabar yra išsamesnis.
„Apple“ taip pat patvirtino Kelias į VR Tai, kad šie patobulinimai perkeliami į asmens versiją, naudojamą ekrane „Acyght“. Ir nors išorinio ekrano ryškumas ir skiriamoji geba šiuo metu yra ribojantis faktorius, ausinių išorėje rodoma asmenybė turėtų atrodyti šiek tiek išsamiau ir realistiškiau.
Apskritai labai sumažėja asmenų, atrodančių „vaiduokliškai“, pojūtis. Tačiau rankos vis dar atrodo vaiduokliškos (o gal net daugiau nei kitaip, nes dabar yra didesnis kontrastas tarp rankų neryškumo ir veido tvirtumo).
Kaip ši skalė bus mažesnių ausinių?
Tai akivaizdus vaizdinės kokybės šuolis asmenims, tačiau didelis klausimas, kuris dabar man kilo: Kaip „Apple“ ateityje galės išlaikyti šią kokybišką juostą mažesnėse ausinėse?
Taip nėra Tiesiog kad kompaktiškesnės ausinės turės būti efektyvesnės energijai, kad būtų galima atlikti tokį patį skaičiavimo kiekį mažesniame pakuotėje. Taip pat nėra tai, kad mažesnės laisvų rankų įranga reiškia mažiau vietos pritaikyti kameras.
Svarbiausias dalykas, kuris pirmiausia leidžia asmenims, yra tai, kad ausinių kamerose yra žvilgsnio į vartotojo burną, skruostus ir akis. Tai yra neapdorotas „žemės tiesos“ vaizdas, kurį reikia aiškinti siekiant tiksliai išsiaiškinti, kaip nukreipti veido judesį virtualiame avatare.
Tai nėra per sunku, jei turite visišką kažkieno veido vaizdą. Tačiau jis tampa vis sudėtingesnis, nes vaizdo kampas tampa ekstremalesnis. Štai kodėl ankstyvas veido sekimo technika paprastai turėjo fotoaparatą, kuris pakabino būdas priešais vartotoją (taigi jis galėtų turėti aiškų, nenusakytą vaizdą).
Net kai kurie modernūs veido stebėjimo ausinių priedai vis tiek pakabina fotoaparatą gana toli nuo veido, kad būtų aiškesnis vaizdas.
Jei norite pasidaryti mažesnes ausines, fotoaparatai galų gale juda arčiau veido. Tai reiškia, kad iš kamerų gaunami „žemės tiesos“ duomenys yra ypač aštriais kampais. Kuo aštresnis tas kampas, tuo sunkiau susieti judesį su vartotojo veidu.
Tačiau įmonės tapo protingos. Ausose, tokiose kaip „Quest Pro“ ir „Vision Pro“, viena iš galimybių išspręsti šią „aštraus kampo“ žemės tiesos problemą yra išmokyti algoritmą, leidžiant jam pamatyti tiek aiškų vartotojo veido vaizdą, tiek aštrų veido vaizdą tuo pačiu metu. Tai leidžia algoritmui geriau numatyti, kaip aiškus vaizdas žemėlapis žemėlapis iki aštraus kampo rodinio.
Toks požiūris veikia tokiose ausinėse kaip „Quest Pro“ ir „Vision Pro“, kurie vis dar išlieka pakankamai toli, kad žemyn nukreiptos kameros galėtų pamatyti pakankamai, kad galėtų atlikti darbą su papildomais mokymais.
Tačiau ateities ausinių kryptis nukreipta į akinių dydžio ir net stiklinių dydžio įrenginius. Tai jau galime pamatyti PC VR ausinėse, tokiose kaip „Bigscreen Beyond“, kur akivaizdu, kad net fotoaparato montavimas tolimiausiame laisvų rankų įrangos krašte nepadarys ypač aiškaus vaizdo į burną. Ir kai mes einame dar mažesniu, vaizdas taps visiškai uždengtas.
Vienas aukštyn kojomis yra tas, kad vienas akių stebėjimas tikriausiai yra saugus ilgą laiką. Kadangi XR pirmiausia yra tarpininkaujamas per akis, beveik visada bus geras kampas, skirtas akių stebėjimo kameroms, kad būtų galima pamatyti vartotojo akių judesius.
Tačiau gyvybingi avatarai yra tai, ko žmonės nori bendrauti nuotoliniu būdu XR. Norint tai įvykti, reikės visiškai sekti, o ne tik stebėti akis.
