iPhone 16-serie krijgt Apple’s visuele intelligentie voor geavanceerde visuele zoekmogelijkheden

Apple bracht de nieuwste line-up van hun iPhones uit tijdens de ‘It’s Glowtime’-tijd. De iPhones 16 en 16 Pro-modellen worden door Apple op de markt gebracht als vanaf de grond af gemaakt voor Apple Intelligence. Als je de memo over Apple Intelligence hebt gemist, die de techgigant eerder dit jaar in juni onthulde op hun jaarlijkse WWDC-conferentie, dan is dit hun kijk op kunstmatige intelligentie.

Het bedrijf liet echter tijdens de WWDC handig één functie weg, en terecht, aangezien deze gekoppeld is aan de hardwarewijzigingen die naar de iPhone 16-reeks komen. Visual Intelligence vindt zijn weg naar de iPhone, wat vergelijkbaar is met het onderweg hebben van Google Lens op Android, maar de eerste wordt aangestuurd door kunstmatige intelligentie. Het lijkt enigszins op de multimodale (afbeelding/video) invoermogelijkheden voor Google’s Gemini Live of OpenAI’s ChatGPT-4o Advanced Mode (beide nog niet beschikbaar). Maar het lijkt erop dat Visual Intelligence alleen afbeeldingen als invoer kan gebruiken.

U activeert deze door de nieuwe camerabedieningsknop op de iPhone 16-serie ingedrukt te houden.

U kunt Visual Intelligence om alles vragen. Als u bijvoorbeeld uw camera op een restaurant richt, kan Visual Intelligence snel de openingstijden, beoordelingen en opties van het restaurant opvragen om het menu te bekijken of een reservering te maken.

Visuele intelligentie haalt informatie op over wat er op uw scherm staat. Bron: Apple

Op dezelfde manier kunt u uw camera op een evenementposter richten en deze automatisch aan uw agenda toevoegen. Opvallend is dat Google’s Gemini op dezelfde manier kan helpen op Android-apparaten en zelfs een stap verder kan gaan door u te informeren of u op die datum al verplichtingen hebt.

Dit alles wordt aangestuurd door een combinatie van on-device intelligence en Apple-services die uw afbeeldingen niet opslaan. Bovendien kan Visual Intelligence ook fungeren als uw gateway naar third-party services zoals Google en ChatGPT. De interface toont twee knoppen: Search en Ask.

Met Search kun je Google alles vragen over wat er op je scherm staat, zoals een fiets die je ziet en wilt kopen. Met Ask kun je ChatGPT aanroepen en om hulp vragen met bijvoorbeeld je notities. Informatie wordt alleen gedeeld met tools van derden als je ervoor kiest om ze te gebruiken.

Vraag ChatGPT snel met Visual Intelligence op iPhone 16-serie. Bron: Apple

De functie is niet meteen beschikbaar en komt later dit jaar, zonder concrete informatie over de releasedatum. Het lijkt er ook op dat de functie niet naar oudere iPhones komt die Apple Intelligence ondersteunen, aangezien Craig Federighi specifiek zegt dat het later dit jaar naar “Camera Control” zou komen.