Gepubliceerd: 22 mei 2025
AI verandert de manier waarop webontwikkelaars websites en webapplicaties bouwen. Tijdens Google I/O 2025 deelden we waar we het afgelopen jaar aan hebben gewerkt, lieten we zien hoe onze partners AI op het web inzetten en kondigden we nieuwe ingebouwde AI-API's aan .
Heb je het evenement gemist? Goed nieuws, je kunt de presentaties nu on-demand bekijken!
Praktische ingebouwde AI met Gemini Nano in Chrome
Onze kernmissie is om Chrome en het web slimmer te maken voor alle ontwikkelaars en alle gebruikers. In deze presentatie deelt Thomas Steiner updates over de ingebouwde AI , praktische voorbeelden en een blik op onze toekomst.
De ingebouwde AI voert client-side modellen uit in de browser, wat verschillende voordelen biedt:
- Privé : Gevoelige gebruikersgegevens blijven op het apparaat en hoeven nooit de browser te verlaten.
- Offline : Applicaties kunnen gebruikmaken van AI-functionaliteiten, zelfs zonder internetverbinding.
- Performant : Dankzij hardwareversnelling leveren deze API's uitstekende prestaties.
Bekijk codevoorbeelden voor elk van de ingebouwde AI-API's , blijf op de hoogte van hun status en zie welke bedrijven deze technologie implementeren.
Multimodale API's
We werken aan gloednieuwe multimodale API's . Dit betekent dat je Gemini Nano kunt vragen wat het "ziet" in visuele content of "hoort" in audiocontent. Je kunt bijvoorbeeld suggesties krijgen voor alternatieve tekst bij geüploade afbeeldingen op een blogplatform, die gebruikers vervolgens kunnen verfijnen en aanpassen. Of je kunt Gemini Nano vragen om beschrijvingen of transcripties te schrijven voor podcasts.
Hybride AI
Een van de uitdagingen waar ontwikkelaars mee te maken krijgen bij client-side AI is dat niet alle platforms en browsers voldoen aan de hardwarevereisten om een model op een apparaat uit te voeren. Gemini en Firebase hebben de handen ineengeslagen om de Firebase Web SDK te ontwikkelen, zodat je, wanneer client-side implementaties niet beschikbaar zijn, kunt terugvallen op Gemini Nano op een server.
Samenwerken met jou
We zijn ontzettend blij dat we met zoveel ontwikkelaars hebben samengewerkt aan de ingebouwde AI-API's. Zonder jullie zouden onze inspanningen niet mogelijk zijn.
- Early Preview Program : Meer dan 16.000 ontwikkelaars hebben zich aangesloten bij het EPP om nieuwe API's te testen, nieuwe toepassingsmogelijkheden te ontdekken en feedback te geven om betere AI voor het web te ontwikkelen.
- Hackathons : We hebben twee hackathons georganiseerd en jullie hebben een aantal fantastische websites en extensies gebouwd .
Je werk is nog niet klaar. Blijf feedback geven, de nieuwe ingebouwde API's testen, en wij blijven ze verbeteren. Je kunt zelfs helpen deze API's te standaardiseren door lid te worden van de W3C Web Machine Learning Community Group .
De toekomst van Chrome-extensies met Gemini in je browser.
Het aantal AI-gestuurde extensies is de afgelopen twee jaar verdubbeld. Sterker nog, 10% van alle extensies die vanuit de Chrome Web Store worden geïnstalleerd, maakt gebruik van AI. In deze presentatie geeft Sebastian Benz praktische voorbeelden van waarom Chrome-extensies en Gemini zo'n krachtige combinatie vormen.
Voorbeelden variëren van hoe je de browser nuttiger kunt maken door gegevens van websites aan de clientzijde te extraheren en te verwerken met behulp van de onlangs gelanceerde prompt-API van Chrome.
Dit artikel demonstreert het potentieel van de nieuwe multimodale mogelijkheden van de prompting API van Chrome in Chrome-extensies om audio en afbeeldingen toegankelijker te maken voor gebruikers.
We werpen een blik op de toekomst van browsen door uit te leggen hoe Google DeepMind's Project Mariner Chrome-extensies en de nieuwste Gemini Cloud API's gebruikt om een volwaardige browseragent te bouwen.
Ontdek de mogelijkheden van Gemini in de cloud of in de browser via Chrome-extensies om nieuwe browse-ervaringen te creëren en de browser gebruiksvriendelijker te maken.
Toepassingsvoorbeelden en strategieën voor web-AI in de praktijk.
Yuriko Hirota en Swetha Gopalakrishnan belichtten praktijkvoorbeelden van bedrijven die AI op het web gebruiken om hun bedrijfsvoering en gebruikerservaring te verbeteren. Of hun oplossing nu gebruikmaakt van client-side modellen, server-side modellen of een hybride oplossing, het belangrijkste zijn de spannende nieuwe functies en mogelijkheden die je je gebruikers nu biedt.
BILIBILI maakte hun videostreams aantrekkelijker met een nieuwe functie: bullet-screen reacties . Ze bieden realtime gebruikersreacties in de video, die achter de spreker worden weergegeven. Hiervoor gebruiken ze beeldsegmentatie, een bekend concept uit machine learning. Het resultaat was een toename van de sessieduur met 30%! Tokopedia verminderde de frictie in hun verkopersverificatieproces door een gezichtsherkenningsmodel te gebruiken om de kwaliteit van geüploade foto's te beoordelen. Hierdoor daalde het aantal handmatige goedkeuringen met bijna 70%.
Vision Nanny, een webplatform voor kinderen met cerebrale visuele beperking (CVI), biedt AI-gestuurde visuele stimulatieactiviteiten. Het platform maakt gebruik van diverse MediaPipe-bibliotheken, waaronder het handlandmarkdetectiemodel, dat belangrijke punten van de handen lokaliseert in een afbeelding, video of in realtime. Een pilot met 50 kinderen toonde aan dat Vision Nanny 5 keer sneller reageerde dan handmatige visuele stimulatieactiviteiten. Therapeuten gaven aan gemiddeld drie uur per sessie te besparen door de handmatige instellingen te elimineren.
Google Meet beschikt over diverse functies die mogelijk worden gemaakt door AI, van het verbeteren van de belichting tot het verminderen van onscherpte en wazige video's. De grootste uitdaging is dat deze functies in realtime moeten werken. Dat is waar WebAssembly (Wasm) om de hoek komt kijken, om de volledige rekenkracht van een computerprocessor te benutten en realtime videoverwerking mogelijk te maken.
Dit zijn slechts enkele praktijkvoorbeelden van AI op het web. Verschillende andere bedrijven experimenteerden met de ingebouwde AI-API's, waarvan sommige hun werk deelden in casestudy's .
Client-side web-AI-agents voor het creëren van slimmere gebruikerservaringen in de toekomst.
Jason Mayes schetste de toekomst van het internet: web-AI-agenten. Het web heeft een agentische toekomst, waarbij AI-mogelijkheden rechtstreeks naar de browser worden gebracht om nuttig werk voor u uit te voeren, dat verder gaat dan de mogelijkheden van grote taalmodellen (LLM's).
Met een client-side aanpak profiteert u van verbeterde privacy, lagere latentie en potentiële aanzienlijke kostenbesparingen. Agents stellen u in staat uw bestaande website te upgraden en taken autonoom voor een gebruiker uit te voeren, waarbij dynamisch beschikbare tools worden geselecteerd en gebruikt – mogelijk in een lus – waardoor de agent potentieel complexe of meerstaps taken kan voltooien.
Agenten kunnen:
- Plan en verdeel de taken in subtaken en pak complexere problemen aan door middel van een meerstappenplan, waarbij de taak wordt opgedeeld in logische stappen die voltooid moeten worden.
- Selecteer de beste tools , of het nu gaat om functies, API-gebruik of toegang tot de datastore voor de basiskennis van het uitgebreide taalmodel, en voer vervolgens acties uit in de buitenwereld.
- Bewaar contextgebaseerd geheugen , gebaseerd op eerdere outputs van de agent of externe tools. Kortetermijngeheugen werkt als een FIFO-buffer voor contextgeschiedenis tot de grootte van het contextvenster van het model, in tegenstelling tot langetermijngeheugen waar een vectordatabase kan worden gebruikt om informatie op te slaan die naar behoefte kan worden opgeroepen uit eerdere gespreksessies of andere gegevensbronnen.
Web AI-agenten zijn ontworpen om te integreren in bestaande webtechnologieën met behulp van JavaScript. Uiteindelijk is het belangrijk dat we onze hardware blijven versnellen om modellen zo goed mogelijk in de browser uit te voeren. In de toekomst zal technologie zoals WebNN een sleutelrol spelen bij het optimaliseren van de modeluitvoering op CPU's, GPU's en NPU's. Met de trend naar kleinere LLM's en voortdurende vooruitgang zal dit in de toekomst alleen maar krachtiger worden.
Overweeg een hybride aanpak, waarbij je verwerking op het apparaat combineert met strategische cloudoproepen, zodat je nu al intelligente, responsieve en gepersonaliseerde gebruikerservaringen in de browser kunt creëren. Je investering in Web AI zal zich snel terugbetalen naarmate apparaten beter in staat zijn om LLM's uit te voeren.
Mis Google I/O 2025 niet!
We hebben alle presentaties van Google I/O 2025 vrijgegeven, inclusief een afspeellijst speciaal voor webontwikkelaars . Bekijk er nog meer op io.google/2025 .