HuggingSnap AI-app: bekijk de wereld via de camera van je telefoon

Samenvatting:

• Hugging Face heeft HuggingSnap gelanceerd, een iOS-app die kan analyseren en beschrijven wat de camera van je iPhone ziet.
• De app werkt offline en stuurt nooit gegevens naar de cloud.
• HuggingSnap is niet perfect, maar het laat zien wat de mogelijkheden van het apparaat zijn.

Het wordt steeds gebruikelijker om AI de mogelijkheid te geven om te ‘zien’, met de opkomst van tools als ChatGPT, Microsoft Copilot en Google Gemini die de AI-mogelijkheden verbeteren. Hugging Face heeft een eigen iOS-app gelanceerd genaamd HuggingSnap, waarmee je de wereld kunt bekijken via de camera van je iPhone en kunt beschrijven wat je ziet, zonder internetverbinding. De app werkt offline en is daardoor ideaal voor gebruik in gebieden met een slechte internetverbinding.

Stel je voor dat je een persoonlijke gids hebt die weet hoe hij stil moet blijven. HuggingSnap werkt volledig offline en maakt gebruik van het interne visiemodel van Hugging Face, smolVLM2. Hierdoor herkent u direct objecten, beschrijft u scènes, kunt u tekst voorlezen en doet u algemene observaties over uw omgeving zonder dat uw gegevens het internet op worden gestuurd.

Doordat HuggingSnap offline kan werken, is het vooral handig in situaties waarin de verbinding niet altijd even goed is. Als u aan het wandelen bent in de wildernis, op reis bent in het buitenland waar geen betrouwbaar internet is, of u zich in de supermarkt bevindt waar uw mobiele telefoon opeens geen bereik meer heeft, dan is het een echte zegen om deze functie op uw telefoon te hebben. Bovendien beweert de app ultra-efficiënt te zijn, wat betekent dat het uw batterij niet zo snel leegtrekt als cloud-gebaseerde AI-modellen doen.

HuggingSnap kijkt naar mijn wereld

Ik besloot de HuggingSnap-app te proberen. Eerst richtte ik het op het scherm van mijn laptop, terwijl mijn TechRadar-biografie in de browser openstond. In eerste instantie deed de app goed werk door de tekst over te zetten en uit te leggen wat hij zag. Hij was echter verrast toen hij de koppen en andere details over mijn cv zag. HuggingSnap dacht dat de verwijzingen naar nieuwe computerchips in een kop een indicatie waren van wat er op mijn laptop draaide. Bovendien dacht het bedrijf dat sommige namen in de koppen betrekking hadden op andere mensen die mijn laptop gebruikten.

Vervolgens richtte ik de camera op de speeltuin van mijn zoon, die vol lag met speelgoed dat ik nog niet had opgeruimd. Opnieuw heeft de AI uitstekend werk geleverd bij het beschrijven van het speelgebied en de spellen daarin in het algemeen. Hij kon kleuren en zelfs texturen correct onderscheiden bij het onderscheiden van knuffels van blokken. Maar hij had ook enkele details verkeerd. Zo beschreef hij een beer als een hond en leek hij te denken dat een stapelring een bal was. Over het algemeen vind ik HuggingSnap goed genoeg om een ​​scène aan een vriend te beschrijven, maar niet goed genoeg voor een politieaangifte.

Kijk naar de toekomst

De aanpak van HuggingSnap op het apparaat zelf is wat het onderscheidt van de ingebouwde mogelijkheden van de iPhone. Terwijl het apparaat plantensoorten kan identificeren, tekst van foto's kan kopiëren en je kan vertellen of de spin op je muur het type is waarvoor je weg moet gaan, stuurt het ook voortdurend informatie naar de cloud.

HuggingSnap is uniek in een wereld waarin de meeste apps bijna alles over jou proberen bij te houden. Apple investeert echter fors in AI-technologieën in toekomstige iPhones. Maar als u op zoek bent naar privacy en zichtbaarheid met AI, is HuggingSnap misschien de perfecte oplossing voor u.