HuggingSnap KI-App: Sehen Sie die Welt durch die Kamera Ihres Telefons

Zusammenfassung:

• Hugging Face hat HuggingSnap herausgebracht, eine iOS-App, die analysieren und beschreiben kann, was Ihre iPhone-Kamera sieht.
• Die App funktioniert offline und sendet niemals Daten in die Cloud.
• HuggingSnap ist nicht perfekt, aber es zeigt, was auf dem Gerät möglich ist.

Mit dem Aufkommen von Tools wie ChatGPT, Microsoft Copilot und Google Gemini, die die KI-Fähigkeiten verbessern, wird es immer üblicher, KI die Fähigkeit zum „Sehen“ zu verleihen. Hugging Face hat seine eigene iOS-App namens HuggingSnap herausgebracht, mit der Sie die Welt durch die Kamera Ihres iPhones sehen und beschreiben können, was Sie sehen, ohne dass eine Internetverbindung besteht. Die App funktioniert offline und ist daher ideal für den Einsatz in Gebieten mit schlechter Internetverbindung.

Stellen Sie sich vor, Sie hätten einen persönlichen Reiseführer, der weiß, wie man schweigt. HuggingSnap funktioniert vollständig offline und verwendet das interne Sichtmodell smolVLM2 von Hugging Face, um eine sofortige Objekterkennung, Szenenbeschreibungen, Textlesen und allgemeine Beobachtungen Ihrer Umgebung zu ermöglichen, ohne Ihre Daten in die Leere des Internets zu senden.

Diese Möglichkeit, offline zu arbeiten, macht HuggingSnap besonders nützlich in Situationen, in denen die Verbindung unterbrochen ist. Wenn Sie in der Wildnis wandern, im Ausland ohne zuverlässiges Internet unterwegs sind oder sich einfach in einer Lebensmittelabteilung befinden, wo der Mobilfunkempfang auf mysteriöse Weise ausfällt, ist diese Funktion auf Ihrem Telefon ein wahrer Segen. Darüber hinaus behauptet die App, ultraeffizient zu sein, was bedeutet, dass sie Ihren Akku nicht so stark belastet wie cloudbasierte KI-Modelle.

HuggingSnap betrachtet meine Welt

Ich habe beschlossen, die HuggingSnap-App auszuprobieren. Zuerst habe ich es auf meinen Laptop-Bildschirm gerichtet, während im Browser meine TechRadar-Biografie geöffnet war. Zunächst gelang es der App gut, den Text zu transkribieren und zu erklären, was sie sah. Er war jedoch überrascht, als er die Schlagzeilen und andere Einzelheiten meines Lebenslaufs sah. HuggingSnap war der Ansicht, dass die Verweise auf neue Computerchips in einer Schlagzeile einen Hinweis darauf darstellten, was auf meinem Laptop lief, und schien zu glauben, dass sich einige der Namen in den Schlagzeilen auf andere Personen bezogen, die meinen Laptop benutzten.

Dann richtete ich die Kamera auf den Spielplatz meines Sohnes, der voller Spielsachen war, die ich noch nicht aufgeräumt hatte. Auch hier hat die KI hervorragende Arbeit bei der Beschreibung des Spielbereichs und der darin enthaltenen Spiele im Allgemeinen geleistet. Er konnte Farben und sogar Texturen richtig erkennen, wenn er Stofftiere von Bauklötzen unterscheiden konnte. Aber auch er hat einige Details falsch wiedergegeben. So bezeichnete er beispielsweise einen Bären als Hund und schien einen Stapelring für eine Kugel zu halten. Insgesamt halte ich HuggingSnap für gut geeignet, um einem Freund eine Szene zu beschreiben, aber nicht für gut genug für einen Polizeibericht.

Blick in die Zukunft

Der On-Device-Ansatz von HuggingSnap unterscheidet es von den integrierten Funktionen des iPhone. Das Gerät kann zwar Pflanzenarten identifizieren, Text aus Fotos kopieren und Ihnen sagen, ob die Spinne an Ihrer Wand zu der Art gehört, die Sie zum Herumlaufen bewegen sollte, es sendet jedoch immer einige Informationen an die Cloud.

HuggingSnap ist einzigartig in einer Welt, in der die meisten Apps versuchen, fast alles über Sie zu verfolgen. Apple investiert jedoch massiv in geräteinterne KI-Technologien für zukünftige iPhones. Wenn Sie jedoch vorerst Privatsphäre mit KI-Sichtbarkeit wünschen, ist HuggingSnap möglicherweise genau das Richtige für Sie.