Sisältö
Virtuaalitodellisuuden hype on varmasti kuollut parin viime vuoden aikana kalliiden laitteistojen, niin sanotun suorituskyvyn ja liikuntataudin sekä käyttäjäsisällön puutteen takia. Teollisuus on tällä hetkellä jumissa kana- ja muna-skenaariosta, jossa kuluttajien puute estää investointeja huippuluokan sisältöön. Umpikujaan pääsemiseksi tarvitaan tehokkaampia ja kustannustehokkaampia massojen VR-laitteistoja.
Arm pyrkii voittamaan joitakin näistä teknologisista esteistä ensimmäisellä, erityisesti VR: lle suunnitellulla näyttöprosessorilla (DPU): Mali-D77. Lyhyesti sanottuna, Mali-D77 purkaa tavalliset VR-prosessointitehtävät GPU: lta, vapauttaen resursseja suuremmalle kuvanopeudelle ja auttaen samalla vähentämään liikuntataudia.
Varsi sisällä Mali-D77
Suuri osa Mali-D77: stä perustuu vuoden 2017 malliin Mali-D71 lippulaiva-älypuhelimiin ja muihin huippuluokan sovelluksiin. Siinä on sama pakkausdekooderi, kerroksen skaalaus, HDR-tuki ja värinhallintayksiköt. Uusi malli on kuitenkin optimoitu tukemaan 3K: n resoluutioita nopeudella 120 kuvaa sekunnissa tukemalla 4K: n resoluutioita jopa 90 kuvaa sekunnissa.
Suurimmat muutokset tapahtuvat kahden aivan uuden laitteistokiihdytysyksikön muodossa VR-sovelluksiin. Mali-D77 tukee linssinkorjausta ja asynkronista aikawarpia laitteistossa sen sijaan, että suorittaisi näitä algoritmeja GPU: lla. Arm arvioi, että tämä voi vapauttaa noin 15 prosenttia GPU-resursseista, joita voidaan käyttää kehysnopeuksien lisäämiseen. Tämän kuorman siirtäminen DPU: lle tarjoaa myös 40 prosentin kaistanleveyden säästön ja 180 megawatin virran VR-kerrosta kohti. Kiva.
Objektiivin korjaus vaaditaan VR-kuulokkeissa, jotta korvataan HF: n linssien valon kaarevuus. Barrel Distortion kohdistetaan jokaiseen renderoituun kehykseen linssien pincushion Distortion-vaikutuksen kompensoimiseksi. Ajattele tätä liian kompensoivana tai ”käänteisenä vääristymänä” niin, että linssin vääristymä lopulta näyttää oikean kuvan. Perinteisesti tämä tehdään GPU: lla, ottaen huomioon ylimääräiset jaksot ja aika. Mali-D77 tekee tämän kaiken DPU: lla.
Lisäksi Mali-D77 suorittaa kromaattisen aberraation korjauksen käyttämällä samanlaista käänteisen vääristymisen menetelmää. Kun tätä käytetään, kuvan värit näkyvät oikein koko linssissä, myös kulmissa, joissa voi tapahtua värierottelun vääristymiä.
Mikä on asynkroninen aikawarp?
Objektiivin korjaus on melko itsestään selvä, mutta asynkroninen aikawarp on hieman mukana. Täällä Arm käyttää näyttöprosessoria kiertää, vinouttaa ja vääntää kuvia kompensoidakseen käyttäjän liikkeitä lieventääkseen GPU: n tai muun näyttöputken viivettä.
Nykyisen sukupolven laitteilla X, Y, Z-akselin liikkeen seuranta päivitetään synkronoidusti GPU: n kanssa, koska GPU: n on tehtävä muutos näkymään joka kerta, kun siirrät. Asynkronisella Timewarpilla kahta ei enää päivitetä yhdessä. Voit siirtää päätäsi GPU-kehyspäivitysten välillä, ja Mali-D77 voi vääristää nykyistä kehystä vastaamaan pään liikettä.
Tämä on hienovarainen vaikutus, koska se kestää vain murto-sekunnin renderöityjen kehysten välillä eikä poista tarvetta nopeaan kuvanopeuden renderointiin. Se lisää kuitenkin huomattavasti liikkumisen ja liikkumisen sujuvuutta ja sujuvuutta, koska päivityksiä voi tapahtua jopa useammin kuin GPU-kuvanopeus. Katkaisu kehosi liikkumisen ja visuaalisen päivityksen näkemisen välillä on VR: n suurin syy liikesairauteen, joten Mali-D77 voi auttaa tässä suhteessa paljon.
X-, Y-, Z-akselin liiketiedot syötetään suoraan Mali-D77: lle CPU: lta ohittaen GPU-vaihe kokonaan. Tämä on hyvin erilainen tapa toimia, ja sellaisenaan kehittäjät vaativat uuden kehitystyökalujen ja tekniikoiden hyödyntämistä. Tämä on kiistatta suurin este D77: lle. Onneksi Arm-insinöörit tekevät tiivistä yhteistyötä OpenXR: n kaltaisten aloitteiden kanssa, joten näimme tulevaisuudessa sovellusliittymäilmoituksen yksinkertaistetulle kehittäjätuelle.
Kaiken kaikkiaan Arm Mali-D77 on älykäs ja looginen eteneminen heterogeenisesta laskentaideasta, joka auttaa ratkaisemaan joitain virtuaalitodellisuuden suurimmista laitteisto-ongelmista. VR: n langattomassa viestinnässä, seurannassa ja kustannussegmenteissä on vielä muita esteitä, jotka on jätettävä ratkaisemaan ennen valtavirtaistamista, mutta Mali-D77 auttaa murtamaan joitain suorituskykyongelmia.
