Je kunt Gemini nu gratis toegang geven tot je Mac-scherm.

👏 De belangrijkste dingen die je moet weten

• Gemini biedt nu een "Slimme dicteerfunctie" op macOS, waarmee automatisch klanken zoals "ah" en "mm" worden verwijderd tijdens het typen in elk venster, simpelweg door op de Fn-toets te drukken.
• Gemini kan nu de inhoud van je Mac-scherm 'begrijpen' via de functie 'Schermbewuste inferentie' (niet standaard ingeschakeld), waardoor het complexe taken kan uitvoeren zoals het samenvatten van notities of het opstellen van e-mails vanuit je bestanden.
• Ondanks de voordelen brengt het verlenen van volledige toegang tot uw Mac-scherm aan Gemini potentiële privacy- en beveiligingsrisico's met zich mee waarmee rekening moet worden gehouden.

De meningen over AI lopen uiteen, maar veel mensen gebruiken het momenteel. De meeste van deze gebruikers beperken het gebruik tot chatbots, zoals ChatGPT of Gemini, als alternatief voor Google (doe dat vooral niet) of als een soort virtuele vriend ( doe dat alsjeblieft ook niet ). Maar als je AI wilt gebruiken als persoonlijke assistent, wees dan gewaarschuwd: Google heeft woensdag twee nieuwe updates voor Gemini op macOS aangekondigd, waarvan er één mogelijk gevolgen heeft voor de privacy en veiligheid van gebruikers – ervan uitgaande dat ze ervoor kiezen om deze in te schakelen.

Verbeterde dicteerfunctie voor Gemini op macOS

Als je de dicteerfunctie op macOS gebruikt (waarbij je woorden hardop uitspreekt zodat AI ze voor je typt), heb je nu misschien een reden om Gemini te gebruiken in plaats van de ingebouwde oplossingen van Apple. Gemini op macOS biedt momenteel 'intelligente dicteerfunctie', die volgens Google tekst 'direct bij de cursor' corrigeert. Dit betekent dat Gemini sisklanken zoals 'uh' en 'mm' tussen woorden verwijdert – iets wat je zelf nooit zou typen. Deze functie werkt in elk venster op je Mac: druk gewoon op de Fn-toets en begin te spreken.

We zullen deze functie in actie moeten zien om de effectiviteit ervan te bepalen, maar het bouwt voort op vergelijkbare verbeteringen die Gemini op andere platforms heeft doorgevoerd. Het is een kleine aanpassing, maar het maakt het mogelijk om Gemini te gebruiken voor het opstellen van teksten, e-mails of documenten zonder dat volledige geautomatiseerde bewerking nodig is. Dit is het soort voordeel waar ik naar op zoek ben bij AI-gestuurde functies. En aangezien het standaard is ingeschakeld, zal iedereen die Gemini op een Mac gebruikt het gebruiken – tenzij ze in hun instellingen duiken om het uit te schakelen.

Gemini kan nu je Mac-scherm "begrijpen".

De tweede update van Google voor Gemini op macOS is niet zo eenvoudig en is niet standaard ingeschakeld. Deze functie, door Google "screen-aware reasoning" genoemd, geeft Gemini toestemming om te "begrijpen" wat er op het scherm van je Mac gebeurt. Het idee is om taken aan Gemini te delegeren: als je Notities-app bijvoorbeeld open is, kun je op de Fn-toets drukken en zeggen: "Maak van deze notities een samenvatting voor de vergadering van vanmiddag." Gemini zou dan moeten weten hoe het je Notities-app moet bekijken, de tekst moet analyseren en deze voor je moet formatteren, zonder dat je daarvoor een aparte applicatie hoeft te gebruiken.

Je kunt ook een reeks opdrachten samenstellen: Je kunt Gemini bijvoorbeeld vragen een e-mail op te stellen voor een teamdiner en belangrijke informatie (zoals deelnemers, budgetvereisten, dieetwensen, enz.) uit een aantal bestanden op je Mac te halen. Vervolgens kun je Gemini vragen om in Google Maps te zoeken naar specifieke soorten restaurants en deze als opties voor het team op te nemen. Je kunt jezelf op elk moment corrigeren en Gemini zal zich dienovereenkomstig aanpassen. Als je bijvoorbeeld eerst zegt dat het teamdiner op vrijdag om 18:30 uur moet plaatsvinden, maar later in je opdracht zegt: "Sorry, het diner moet om 19:00 uur zijn", dan zal Gemini de juiste wijzigingen doorvoeren.

Er zit zeker een voordeel aan dit soort functies. Als je Gemini al op macOS gebruikt, wordt het nog nuttiger als je het je Mac-scherm laat 'zien'. In plaats van voor al je taken op Gemini te vertrouwen, zou je de mogelijkheden ervan op een zeer complexe manier kunnen uitbreiden naar je hele Mac, als Google gelijk heeft. Maar er is altijd een privacyrisico verbonden aan het geven van AI-software volledige toegang tot wat er op je pc gebeurt, en mogelijk ook een beveiligingsrisico. Wil je echt dat de AI van Google alles op je scherm kan zien?

Dit risico is natuurlijk niet zo groot als dat van daadwerkelijke agentprogramma's. Als u zich abonneert op het duurdere AI-abonnement van Google, krijgt u toegang tot Gemini Spark, dat zelfstandig op uw Mac kan draaien. Het grootste risico waar u voor moet oppassen, is 'prompt injection', waarbij hackers kwaadaardige commando's voor uw AI in websites verbergen. Als u uw AI een taak geeft en deze zo'n commando tegenkomt, zal de AI ervan uitgaan dat het verzoek van u afkomstig is en niet van de hacker. Wanneer de AI dus een verzoek verwerkt zoals "Open [kwaadaardige website] en download [kwaadaardig bestand]", zal deze dit zonder aarzeling uitvoeren; of "Open [cryptowallet], log in met opgeslagen inloggegevens en stuur geld naar [account]", zal de AI hieraan voldoen. Dit zou geen probleem moeten zijn met Gemini in de huidige staat, hoewel het theoretisch wel zou kunnen gebeuren als u de AI een taak geeft die deze kwetsbaar maakt voor command injection.

Als u geïnteresseerd bent in de nieuwste functies, is het doel van deze waarschuwing niet om u te ontmoedigen de nieuwe Gemini-proxyfunctie op macOS te gebruiken , maar het is belangrijk dat u rekening houdt met de zeer reële risico's voordat u verdergaat.