Iryss eine App, die maschinelles Lernen verwendet, um Objekte zu identifizieren

In iOS 11 gibt es unzählige neue Funktionen, von denen sich viele in Form von APIs im Verborgenen befinden und für deren volle Wirkung App Store-Apps erforderlich sind.

Iryss ist eine neue App von Florian Hebrard, besser bekannt in der Jailbreak-Community als Ziph0n, Mit der brandneuen CoreML-API (Machine Learning) von Apple können Sie Objekte in Echtzeit erkennen.

Mit Iryss können Sie ganz einfach Ihre Kamera auf etwas richten. Innerhalb von Millisekunden errät die App anhand von Text auf dem Bildschirm, was das Objekt im Rahmen ist. Alternativ können Sie die App so konfigurieren, dass Objekterkennungen laut angekündigt werden.

Iryss kann sowohl lebhafte als auch leblose Objekte erkennen. Bei Tieren ist die App intelligent genug, um zwischen gängigen Rassen oder Arten zu unterscheiden.

Es gibt einige Einstellungen, die Sie in der Iryss-App konfigurieren können, damit es so funktioniert, wie Sie es möchten:

Hier können Sie die App zwingen, laut zu sagen, was sie erkennt, anstatt es nur als Text anzuzeigen, und Sie können auch das haptische Feedback aktivieren, um die erfolgreiche Objektidentifikation anzuzeigen. Da die App werbefinanziert ist, finden Sie in diesem Einstellungsbereich auch einen In-App-Kauf, um die Anzeigen zu kaufen.

Wie gut funktioniert die App? Es ist okay, aber nicht perfekt. Vielleicht identifiziert die App ein Objekt öfter als Sie möchten, fälschlicherweise als etwas, das es nicht ist. Als Paradebeispiel wird dieser Kaugummiautomat als „Tablettenfläschchen“ erkannt, wahrscheinlich aufgrund der farbigen Punkte im Inneren:

Eine Sache, die ich als signifikantes Hindernis für die Funktionalität der App empfand, sind schlechte fotografische Bedingungen. Um sicherzustellen, dass Sie die genauesten Messwerte erhalten, empfehle ich, dass Sie die bestmöglichen Lichtverhältnisse haben und weit genug von einem Objekt entfernt sind, dass sich das Ganze im Rahmen befindet.

Der Entwickler sagt mir, dass die Objekterkennung zwar nicht immer richtig sein kann, aber immer verbessert werden kann. Dank der einfachen Maschinellen Lernfunktion, mit der Entwickler Apps dieser Art erstellen können, sollten regelmäßige Updates von Iryss die Genauigkeit im Laufe der Zeit verbessern können.

Iryss scheint für die meisten Benutzer auf den ersten Blick eine Spielerei zu sein, aber auf den ersten Blick kann ich mir mindestens zwei Anwendungen in der realen Welt vorstellen, bei denen die App hilfreich sein könnte, wie zum Beispiel:

  1. Wenn jemand schlecht sieht und das iPhone benötigt, um das Sehen für ihn zu übernehmen, kann Iryss sprachgesteuerte Ansagen machen, um ihm mitzuteilen, was um ihn herum ist.
  2. Wenn Eltern ihrem Kind in jungen Jahren das Lernen von Objekten und Namen erleichtern möchten, kann das Kind mit Iryss spielen, um mehr über die Objekte in seiner Umgebung und über deren Namen zu erfahren.

Für andere Benutzer ist Iryss eigentlich nur eine Proof-of-Concept-App, mit der Sie zum Spaß herumspielen können.

Wenn Sie Iryss ausprobieren möchten, können Sie es kostenlos im App Store herunterladen. Auf diese Weise können Sie sehen, wozu Machine Learning in iOS 11 fähig ist, und Sie können davon ausgehen, dass diese API in Zukunft viele andere unglaubliche Apps ermöglichen wird.

Gefällt dir das Konzept hinter Iryss? Teilen Sie Ihre Gedanken in den Kommentaren unten.