Er is een reden waarom Google de datum van zijn Made by Google-evenement heeft vervroegd naar augustus, hoewel het bedrijf nooit een officiële verklaring heeft gegeven. Het is duidelijk dat Google de lancering van de vroege Pixel 9 wil gebruiken om wat aandacht weg te halen bij de aankomende iPhone 16.
Om dat te bereiken, heeft Google een breed scala aan Pixel 9 AI-functies gedemonstreerd, waaronder Add Me voor het toevoegen van iemand aan een foto achteraf, Call Notes voor het opnemen en samenvatten van telefoongesprekken. En de Google Pixel Screenshots-functie kan u helpen details op te graven met behulp van natuurlijke taalvragen.
Dit alles wordt aangedreven door de nieuwe Tensor G4-chip, die speciaal is ontworpen om de meest geavanceerde AI-modellen van Google uit te voeren. Sterker nog, het is de eerste processor die Gemini Nano kan uitvoeren met multimodaliteit, wat betekent dat de Pixel 9, Pixel 9 Pro, Pixel 9 Pro XL en Pixel 9 Pro Fold allemaal tekst, afbeeldingen en audio kunnen begrijpen.
Om een diepere kijk te krijgen op het geheime AI-wapen van Google, sprak ik met Jesse Seed, groepsproductmanager voor Google Silicon, en Zach Gleicher, productmanager voor Google DeepMind, over wat de Tensor G4-chip kan en hoe deze zich onderscheidt.

Kijken Op
Wat maakt de Tensor G4-chip opvallen tussen de zee van smartphones?
(Afbeelding: Google)
Jesse Seed: Ik denk dat de grootste innovatie die we dit jaar hebben gemaakt, is dat we de eerste silicon en de eerste telefoon zijn die Gemini Nano met multimodaliteit kan uitvoeren. En dat ontgrendelt enkele zeer coole gebruiksscenario’s, waarvan er een Pixel Screenshots is. Dat is erg handig als je dingen probeert te onthouden.
Nog een functie die niet gerelateerd is aan het Gemini Nano-model, maar die ik echt geweldig vind, is de Add Me-functie. Degenen onder ons die de fotografen zijn van onze familie of crew zullen zeker waarderen dat ze dynamisch de fotograaf kunnen toevoegen. En dat is iets waar we veel aan hebben gewerkt om meer dan 15 verschillende machine learning-modellen af te stemmen, en ook gebruik te maken van de Google Augmented Reality SDK.
Apple staat op het punt een grote deal te sluiten met zijn Apple Intelligence en iPhone 16. Hoe zeker bent u ervan dat de Tensor G4 één stap voorloopt op de concurrentie?
Seed: Behulpzame on-device intelligentie is niet nieuw voor ons. Vanaf het begin is de kernmissie van Tensor geweest om Google’s machine learning-innovaties naar uw zak te brengen. Dit jaar is geen uitzondering.
Direct toegang tot het laatste nieuws, de heetste reviews, geweldige deals en handige tips.
Onze vierde generatie chip, de nieuwe Tensor G4, is onze snelste en krachtigste SoC gebouwd voor Pixel. Het brengt ons nieuwste en meest capabele model, Gemini Nano met Multimodaliteit, naar de Pixel 9 dankzij de gezamenlijke ontwerpen met Google DeepMind. Gemini Nano met Multimodaliteit helpt uw telefoon tekst, afbeelding, audio en spraak te begrijpen over nieuwe functies zoals Pixel Screenshots en Call Notes, en voortgezette functies zoals Recorder Summarization.
De Tensor- en Google DeepMind-teams ontwerpen samen de hardware en Gemini Nano-modellen om ervoor te zorgen dat ze optimaal samen werken. De vruchten van deze codesign kunnen op verschillende manieren worden gezien, waaronder het vermogen om een 3x meer capabel model efficiënt te schalen om te werken op een telefoon in een zeer kort tijdsbestek, en het vermogen om zowel een ‘volledige’ als ‘efficiënte’ modus van hetzelfde model te draaien – waardoor we een toonaangevende piekuitvoersnelheid van 45 tokens/seconde kunnen bereiken wanneer de volledige versie wordt gebruikt, en energie-efficiëntie met 26% verbeteren anderszins.
Dergelijke optimalisaties in korte ontwerpcycli zijn alleen mogelijk dankzij onze nauwe samenwerking. En als het gekoppeld is aan de extra geheugencapaciteit van Pixel 9, betekent dit dat het model er altijd zal zijn, klaar om u snel bij te staan wanneer dat nodig is. En natuurlijk worden met Google Gemini-modellen en apps gegevens nooit naar een derde partij gestuurd voor verwerking.
Hoe heeft u iets zo geavanceerd als Gemini Nano weten te krimpen om op een telefoon te passen?
(Afbeelding: Google)
Zach Gleicher: Bij DeepMind werken we samen met een heleboel teams binnen Google, en we willen ervoor zorgen dat we Gemini-modellen bouwen die voldoen aan de behoeften van alle Google-producten. Dus terwijl we Gemini ontwikkelden in samenwerking met Android en Pixel, beseften we dat er behoefte was aan on-device modellen. We zagen dit als een uitdaging omdat aan serverzijde iedereen meer capabele modellen wilde die potentieel groter waren. En van onze kant hadden we allerlei interessante beperkingen die eerder niet aanwezig waren, zoals geheugenbeperkingen, stroomverbruiksbeperkingen, enz.
Dus in samenwerking met het Tensor-team en Pixel konden we samenkomen en begrijpen wat de kerngebruiksgevallen waren voor deze on-device modellen, wat de beperkingen waren voor deze on-device modellen, en we hebben eigenlijk samen een model ontwikkeld. Dit was een echt spannende ervaring en heeft het mogelijk gemaakt om iets te bouwen dat zo capabel was en in staat was om deze gebruiksscenario’s te ondersteunen.
Voor iemand die zijn telefoon al 3-4 jaar niet heeft vervangen, wat zal hen opvallen met de G4-chip?
Seed: Dus het verbeteren van wat we ‘fundamenten’ noemen zoals kracht en prestaties is erg belangrijk voor ons. De Tensor G4, die onze vierde generatie chip is, is onze meest efficiënte en meest prestatieve. En we geloven dat gebruikers dat zullen zien in dagelijkse ervaringen zoals webprestaties of webbrowsen, evenals app-start en gewoon de algehele responsiviteit van de gebruikersinterface. Ik denk dat het een heel soepele ervaring is. U zult het zien met dingen als de webprestaties die gemiddeld 20% sneller zijn en de app-start die 17% sneller is.
En wat betreft gameprestaties, aangezien dat tegenwoordig erg belangrijk is voor mensen die een nieuwe telefoon kopen?
Seed: In onze tests hebben we eigenlijk zowel verbeterde piek- als duurzame prestaties gezien bij het gamen en in veelvoorkomende games die op het platform draaien.
Hoe helpt de Tensor G4 met batterijduur?
Seed: We hebben de energie-efficiëntie verbeterd op veel alledaagse gebruiksscenario’s. Dus dingen zoals video vastleggen, foto’s maken, door sociale media scrollen – al deze zaken verbruiken minder stroom dan de vorige generatie,
Dat draagt allemaal bij aan die bijna 20% langere batterijduur die u in de presentatie zag staan. Dus bijna 20% betere batterijduur, daar draagt de Tensor G4 aan bij en haalt dat.
Wat zijn enkele van de AI-functies die Gemini mogelijk maakt op Pixel 9-telefoons waar u het meest enthousiast over bent?
(Afbeelding: Future)
Gleicher: Sommige van de belangrijkste motivaties die we zien voor het Tensor-team en het Pixel-team om naar ons te komen voor on-device gebruiksscenario’s zijn betere betrouwbaarheid. Dus het feit dat u niet afhankelijk bent van een internetverbinding, de ervaring betrouwbaar kan zijn en overal werkt.
Een ander punt waar we aan denken is privacy. Als ontwikkelaars niet willen dat de gegevens het apparaat verlaten en volledig op het apparaat worden verwerkt, is dat mogelijk met een on-device LLM.
Wat betreft AI-functies waar ik enthousiast over ben, Pixel Screenshots is er een hele goede. Ik denk dat dit echt laat zien hoe we deze multimodale functies kunnen krijgen die op het apparaat werken zoals u kunt zien in de demo’s. Het was echt responsief, lage latentie, maar is ook een super capabel model. En al deze informatie en gegevens worden lokaal op uw apparaat opgeslagen en lokaal verwerkt. Dus we zijn echt enthousiast dat Gemini nano ervaringen als deze mogelijk kan maken.
Ik denk dat we traction zien voor gebruiksscenario’s voor samenvatting en slim antwoord.
Hoe is Pixel Screenshots anders dan Windows Recall, dat in de problemen kwam vanwege privacykwesties?
Seed: Een van de manieren waarop we de privacy van gebruikers beschermen is door een capabel on-device model te hebben. Dus de analyse die wordt gedaan op die screenshot, verlaat geen van deze het apparaat. Dat is een manier waarop we dat privacyprobleem kunnen aanpakken.
Ik denk dat het andere aspect is dat gebruikers worden gemachtigd om te beslissen wat ze willen doen, zoals hoe ze iets