Tartalom
A Google Pixel 4 és a Pixel 4 XL büszkélkedhet a társaság eddigi legjobb szoftver funkcióival és fényképezőgép-képességeivel, amelyek részben a Pixel Neural Core beépítésének köszönhetők. Ez a kis chip a Pixel 4 fő processzora mellett ül, hogy hatékonyan futtassa a Google nagy teljesítményű gépi tanulási terhelését. Ezek a képfeldolgozástól a hangfelismerésig és az átírási képességekig terjednek.
Ugyanakkor a Neural Core nem a Google első becsapódása egy okostelefonok házon belüli gépi tanulási processzora felé. A Pixel 2 és 3 a Pixel Visual Core-vel együtt szállítva, a képalkotási feladatok - például a HDR + - letöltésére tervezték a jobb teljesítmény és energiahatékonyság érdekében. A Pixel 4 neurális magja erre az alapra épül, továbbfejlesztett képességekkel és válogatott új felhasználási esetekkel.
Ne hagyja ki: Itt van a Pixel 4 Astro módjának lehetősége
Hogyan működik a Pixel neurális magja?
A Google még nem osztotta meg részleteit arról, hogy mi történik a neurális magjában. Tudjuk azonban, hogy hogyan működik az előző generációs Visual Core, és hogy milyen típusú technikákat használnak általában a gépi tanulás (ML) processzorok.
A hagyományos CPU-val ellentétben a számítási feladatok széles köre számára, a gépi tanulási processzorokat (NPU-k), mint például a Neural Core, néhány speciális összetett matematikai feladathoz optimalizálják. Ez inkább digitális jelfeldolgozókká (DSP) vagy grafikus feldolgozó egységekké (GPU) hasonlít, de optimalizálva vannak a gépi tanulási algoritmusok által használt speciális műveletekhez.
A olvasztott multiplikátum-összegyűjtés egy nagyon gyakori képalkotó és hangos ML művelet, amelyet nem fognak széles körű támogatást találni a CPU-n belül. A modern 32 és 64 bites CPU-kkal ellentétben ezeket a műveleteket mindössze 16, 8 és akár 4 bit adatméreteken hajtják végre. Ezen műveletek maximális hatékonyságának támogatásához egyedi hardverblokkokra van szükség.
A Neural Core gyorsítja a CPU-n vagy a GPU-n kevésbé hatékonyan futó kép- és hangalgoritmusokat.
A Neural Core dedikált aritmetikai logikai egységeket épít fel hardverbe, hogy ezeket az utasításokat gyorsan és minimális energiafogyasztással kezelje, ahelyett, hogy több CPU-ciklust veszne fel. A chip valószínűleg ezeknek az ALU-knak százaiból áll, többmagban, megosztott helyi memóriával és egy mikroprocesszorral, amely felügyeli a feladatok ütemezését.
A Google szinte biztosan optimalizálja a legújabb hardvertervezést az asszisztens, a hang- és képalkotó szoftver algoritmusai alapján. A Neural Core ALU képességeitől való függőség miatt a Pixel 4 legújabb fényképezési funkciói nem kerülnek a régebbi kézibeszélőkhöz.
Mit tehet a neurális mag?
Úgy tűnik, hogy a Neural Core kulcsszerepet játszik számos új funkcióban, amelyeket a Google Pixel 4 és a Pixel 4 XL csomagba csomagolnak. Ezek a fejlesztések elsősorban a kép- és hangfeldolgozás köré összpontosítanak.
A fotózás oldalán a listában található a Dual Exposure Controls, egy asztrofotós mód, az élő HDR + előnézetek és az Night Sight. A Google Pixel 4 valós időben kettős expozíció-beállítást és HDR + -ot végez, így a felhasználók láthatják a képeik eredményeit, mielőtt megnyitnák a redőnyöt. Ez a képek számítási teljesítményének jelentős növekedését jelzi a Pixel 3-hoz képest.
Ezenkívül ezek a telefonok bevezetik a fényképezőgép-rendszerbe a tanulás alapú fehéregyensúlyt, amely rögzíti a gyenge megvilágítású képekhez gyakran kapcsolódó sárga árnyalatot. Az Astro Night Sight módban többféle expozíciós felvételt, égbolt-érzékelést és képkombinációt használnak, izgalmas mennyiségű feldolgozást és képet érzékelő érzékelést igényelnek. Végül, a Pixel 4 „Gyakori arcok” funkciója azonosítja és ajánlja jobb fényképeket azokról az emberekről, akiket gyakran fényképez.
A Pixel 4 büszkélkedhet egy frissített asszisztens, sportos továbbfejlesztett nyelvi modellekkel is, amelyek natív módon a készüléken, és nem a felhőben futhatnak. Az új hangjellemzők magukban foglalják a Folytatott beszélgetések, a Hang átírása a Rögzítő alkalmazáson keresztül, valamint a továbbfejlesztett beszédfelismerést. A Neural Core valószínűleg szerepet játszik a telefon 3D arcfeloldó technológiájában is.
A jövő hulláma
A Google Neural Core a vállalat legerősebb darabja a házon belüli okostelefon-szilikonokról, lehetővé téve a korábbinál hatékonyabb valós idejű képszerkesztést. A Google büszke az iparágban vezető gépi tanulási technológiáira, és a Pixel 4 legnagyobb értékesítési pontjai ezen beruházások gyümölcseire támaszkodnak.
A Pixel 4 azonban nem az egyetlen okostelefon, amely nagy teljesítményű gépi tanulási processzort kínál. Az összes Snapdragon 855 hajtású okostelefon dedikált gépi tanulási hardvert kínál. Noha a Google-nak nyilvánvalóan eltérő igényei vannak, és talán még erősebb követelményei vannak okostelefonjai számára. Hasonlóképpen, a Huawei Kirin 990 kettős házon belüli NPU-val büszkélkedhet, amelyek elég valós idejű bokeh videoeffektusokhoz és még sok máshoz szükségesek.
A gépi tanuláshoz használt hardver gyorsan válik az okostelefonok zászlóshajója kép-, videó- és AI-képességeinek sarokkövévé. A Google a Pixel 4 és a Neural Core-val a csomag teteje közelében helyezkedik el.
Következő lépés: A Google Pixel kamerái egyáltalán nem próbálnak kamerák lenni
