Sisu
Google Pixel 4 ja Pixel 4 XL kiitlevad ettevõtte kõigi aegade parimate tarkvarafunktsioonide ja kaamerate võimalustega, mis on osaliselt võimalik tänu Pixel Neural Core kaasamisele. See väike kiip istub Pixel 4 põhiprotsessori kõrval, et tõhusalt juhtida Google'i võimsaid masinõppe koormusi. Need ulatuvad piltide töötlemisest hääletuvastuse ja transkriptsiooni võimalusteni.
Neuraalne südamik pole Google'i esimene nutitelefonidele mõeldud masinõppe protsessori lahendus. Pixel 2 ja 3, mis on tarnitud koos Pixel Visual Core'iga, on ette nähtud selliste pildindustoimingute laadimiseks nagu HDR +, et parandada jõudlust ja energiatõhusust. Sellele vundamendile tugineb Pixel 4 Neural Core, millel on paremad võimalused ja valik uusi kasutusjuhtumeid.
Ära jäta kahe silma vahele: Pixel 4 Astro-režiim saab seda teha
Kuidas Pixeli närvituum töötab?
Google ei ole veel jaganud üksikasju selle kohta, mis täpselt selle Neural Core sees toimub. Kuid me teame, kuidas selle eelmise põlvkonna Visual Core töötab ja milliseid tehnikaid tavaliselt kasutatakse masinõppe (ML) protsessorites.
Erinevalt traditsioonilisest CPU-st, mis on loodud mitmesuguste arvutusülesannete haldamiseks, on masinõppe protsessorid (NPU), nagu ka Neural Core, optimeeritud mõne konkreetse keeruka matemaatilise ülesande jaoks. See muudab need rohkem digitaalsete signaaliprotsessorite (DSP) või graafikaprotsessoriüksuste (GPU) moodi, kuid on optimeeritud masinõppe algoritmide kasutatavate konkreetsete toimingute jaoks.
Sulatatud korrutamine-kogunemine on väga levinud pildistamise ja häälega ML-toiming, mida te keskseadme sees laialdaselt toetama ei leia. Erinevalt kaasaegsetest 32- ja 64-bitistest CPUdest teostatakse neid toiminguid andmemahtudega vaid 16, 8 ja isegi 4 bitti. Nende toimingute maksimaalse efektiivsuse toetamiseks on vaja kohandatud riistvaraplokke.
Neural Core kiirendab pildi- ja häälealgoritme, mis töötavad CPU või GPU vähem tõhusalt.
Neuraalne südamik ehitab riistvarasse spetsiaalsed aritmeetilised loogikaüksused, et neid juhiseid kiiresti ja minimaalse energiatarbimisega käsitseda, selle asemel et võtta vastu mitu protsessori tsüklit. Kiip koosneb tõenäoliselt sadadest nendest ALUdest mitmetuumalises koos jagatud kohaliku mäluga ja mikroprotsessoriga, mis jälgib toimingute ajastamist.
Google on peaaegu kindlasti optimeerinud oma uusima riistvara kujunduse oma abilise, hääle- ja pilditöötlustarkvara algoritmide ümber. Sõltuvus Neural Core'i ALU võimalustest ei muuda Pixel 4 uusimaid fotograafiafunktsioone vanemate telefonide juurde.
Mida saab närvisüdamik teha?
Neural Core näib olevat võtmeelement paljudes uutes funktsioonides, mis on pakitud Google Pixel 4 ja Pixel 4 XL. Need täiustused keskenduvad peamiselt piltide ja hääle töötlemisele.
Fotograafia poolel on loendis Dual Exposure Controls, astrofotograafia režiim, reaalajas HDR + eelvaated ja Night Sight. Google'i Pixel 4 teostab reaalajas kahekordset säritust ja HDR +, nii et kasutajad näeksid enne katiku löömist oma piltide tulemusi. See osutab piltide arvutusvõimsuse olulisele suurenemisele, võrreldes Pixel 3-ga.
Lisaks tutvustavad need telefonid oma kaamerasüsteemi õppepõhist valge tasakaalu, mis fikseerib hämaras piltidega sageli kaasnevad kollased toonid. Astro Night Sight režiimis kasutatakse mitut säripilti, taevatuvastust ja pildikombinatsiooni, mis nõuab kopsakat töötlemist ja piltide tuvastamist. Lõpuks tuvastab Pixel 4 funktsioon Frequent Faces ja soovitab paremaid pilte inimestest, keda sageli pildistate.
Pixel 4-l on ka värskendatud abiline, sportlikult täiustatud keelemudelid, mis saavad nüüd natiivselt seadmesse, mitte pilve. Uute häälfunktsioonide hulka kuuluvad ka jätkuvad vestlused, heli transkriptsioon rakenduse Salvesti kaudu ja täiustatud kõnetuvastus. Neural Core mängib tõenäoliselt rolli ka telefoni 3D-näo lukustustamises.
Tuleviku laine
Google'i Neural Core on ettevõtte võimsaim sisseehitatud nutitelefoni räni, mis võimaldab senisest tõhusamat reaalajas piltide redigeerimist. Google on uhke oma valdkonnas juhtivate masinõppe tehnoloogiate üle ja Pixel 4 suurimad müügipunktid sõltuvad nende investeeringute viljadest.
Kuid Pixel 4 pole ainus nutitelefon, mis pakub võimsat masinõppeprotsessorit. Kõik Snapdragon 855 toitega nutitelefonid pakuvad spetsiaalset masinõppe riistvara. Ehkki Google'il on nutitelefonidele selgelt erinevad vajadused ja võib-olla veelgi võimsamad nõuded. Samuti on Huawei Kirin 990 kahe sisemise NPU-ga, mis on reaalajas bokeh-videuefektide ja muu jaoks piisavalt võimsad.
Masinõppe riistvara on kiiresti muutumas nutitelefoni lipulaevade pildi, video ja AI võimaluste nurgakiviks. Google asub oma Pixel 4 ja Neural Core abil otse paki ülaosas.
Järgmisena: Google'i Pixeli kaamerad ei ürita üldse kaameraid olla
