Sisältö
Google Pixel 4 ja Pixel 4 XL ylpeillä yrityksen kaikkien aikojen parhaimmista ohjelmisto-ominaisuuksista ja kameraominaisuuksista, jotka ovat mahdollisia osittain johtuen Pixel Neural Core -sovelluksen sisällyttämisestä siihen. Tämä pieni siru istuu Pixel 4: n pääprosessorin rinnalla, jotta se voi tehokkaasti käyttää Googlen tehokkaita koneoppimiskuormituksia. Ne vaihtelevat kuvankäsittelystä äänentunnistukseen ja transkriptio-ominaisuuksiin.
Neural Core ei kuitenkaan ole Googlen ensimmäinen murtuma älypuhelimien sisäiseen koneoppimisprosessoriin. Pixel 2 ja 3 toimitetaan Pixel Visual Core -sovelluksen mukana, ja ne on suunniteltu kuvantamistoimintojen, kuten HDR +, purkamiseen suorituskyvyn ja energiatehokkuuden parantamiseksi. Pixel 4: n hermoydin perustuu tähän säätiöön parannetuilla ominaisuuksilla ja valikoimalla uusia käyttötapoja.
Älä missaa: Tässä on mitä Pixel 4: n Astro-tila voi tehdä
Kuinka Pixelin hermoydin toimii?
Google ei ole vielä jakanut yksityiskohtia siitä, mitä hermoydinään tapahtuu. Tiedämme kuitenkin, kuinka sen edellisen sukupolven Visual Core toimii ja millaisia tekniikoita tyypillisesti käytetään koneoppimisprosessoreissa (ML).
Toisin kuin perinteinen CPU, joka on rakennettu käsittelemään monenlaisia laskennallisia tehtäviä, koneoppimisprosessorit (NPU), kuten neural Core, on optimoitu muutamaan erityiseen monimutkaiseen matemaattiseen tehtävään. Tämä tekee niistä enemmän kuin digitaaliset signaaliprosessorit (DSP) tai grafiikkaprosessointiyksiköt (GPU), mutta optimoidut koneoppimisalgoritmien käyttämiin erityisiin toimintoihin.
Sulattu kerrota-kerätä on erittäin yleinen kuvantamis- ja ääni-ML-toimenpide, jota et löydä laaja-alaista tukea CPU: lle. Toisin kuin nykyaikaiset 32- ja 64-bittiset CPU: t, nämä toiminnot suoritetaan vain 16, 8 ja jopa 4 bitin datakoolle. Mukautettuja laitteistolohkoja tarvitaan näiden toimintojen tukemiseksi mahdollisimman tehokkaalla tavalla.
Neural Core nopeuttaa kuva- ja äänialgoritmeja, jotka toimivat vähemmän tehokkaasti CPU: lla tai GPU: lla.
Neural Core rakentaa erilliset aritmeettiset logiikkayksiköt laitteistoksi käsittelemään näitä ohjeita nopeasti ja pienellä virrankulutuksella sen sijaan, että se suorittaisi useita CPU-jaksoja. Siru sisältää todennäköisesti satoja näitä ALU: ita useissa ytimissä jaetulla paikallisella muistilla ja mikroprosessorilla, joka valvoo tehtävien ajoitusta.
Google on melkein varmasti optimoinut uusimman laitteistosuunnittelun avustajansa, ääni- ja kuvankäsittelyohjelmiston algoritmien ympärille. Riippuvuus Neural Corein ALU-ominaisuuksista on syy siihen, miksi Pixel 4: n uusimmat valokuvausominaisuudet eivät pääse tiensä vanhempiin matkapuhelimiin.
Mitä hermoydin voi tehdä?
Neuraalinen ydin näyttää olevan avaintekijä monissa uusissa toiminnoissa, jotka on pakattu Google Pixel 4: een ja Pixel 4 XL: ään. Nämä parannukset keskittyvät pääasiassa kuvan ja äänen käsittelyyn.
Valokuvan puolella luettelossa on Dual Exposure Controls, astrofotografitila, live HDR + -esikatselut ja Night Sight. Googlen Pixel 4 suorittaa kaksoisvalotuksen ja HDR + -asetukset reaaliajassa, jotta käyttäjät näkevät kuviensa tulokset ennen laukaisinta. Tämä osoittaa kuvien laskentatehon huomattavan kasvun verrattuna Pixel 3: een.
Lisäksi nämä puhelimet tuovat oppimispohjaisen valkotasapainon kamerajärjestelmäänsä, joka korjaa keltaiset sävyt, jotka usein liittyvät heikkoon kuvaan. Astro Night Sight -tilassa käytetään useita valotuskaappauksia, taivaan havaitsemista ja kuvayhdistelmää, mikä vaatii moitteettoman määrän käsittelyä ja kuvan havaitsemista. Lopuksi, Pixel 4: n Frequent Faces -ominaisuus tunnistaa ja suosittelee parempia kuvia ihmisistä, joita usein valokuvaat.
Pixel 4: ssä on myös päivitetty avustaja, urheilussa parannettuja kielimalleja, jotka voivat nyt toimia alkuperäisesti laitteella kuin pilvessä. Uusia ääniominaisuuksia ovat myös jatkuvat keskustelut, äänen transkriptio Recorder-sovelluksen kautta ja parannettu puheentunnistus. Neuraaliydin on todennäköisesti myös rooli puhelimen 3D-kasvonsuojaustekniikassa.
Tulevaisuuden aalto
Googlen Neural Core on yrityksen tehokkain pala älypuhelinten piitä, mikä mahdollistaa entistä tehokkaamman reaaliaikaisen kuvankäsittelyn. Google on ylpeä alansa johtavista koneoppimistekniikoistaan, ja Pixel 4: n suurimmat myyntipisteet luottavat näiden investointien hedelmiin.
Pixel 4 ei kuitenkaan ole ainoa älypuhelin, joka urheilee tehokkaassa koneoppimisprosessorissa. Kaikissa Snapdragon 855 -käyttöisissä älypuhelimissa on omistettu koneoppimislaitteisto. Vaikka Googlella on selvästi erilaisia tarpeita ja ehkä jopa tehokkaampia vaatimuksia älypuhelimilleen. Samoin Huawein Kirin 990 tarjoaa kaksi sisäistä NPU-moduulia, jotka ovat riittävän tehokkaita reaaliaikaisiin bokeh-videotehosteisiin ja muuhun.
Koneoppimislaitteista on nopeasti tulossa älypuhelinten lippulaiva-, kuva-, ja AI-ominaisuuksien kulmakivi. Google, sen Pixel 4 ja Neural Core, sijoittuvat aivan pakkauksen yläosaan.
Seuraavaksi: Googlen Pixel-kamerat eivät yritä olla kameroita ollenkaan
