Seeing AI: Microsoft-App liest Umgebung für Blinde vor

Mit Microsofts App Seeing AI sollen es Blinde im Alltag einfacher haben: Die App erkennt unter anderem Text, Objekte und sogar Szenen und liest das Gesehene vor. Dafür muss der Nutzer lediglich ein Foto schießen.

Artikel veröffentlicht am ,
Seeing AI erkennt unter anderem Personen.
Seeing AI erkennt unter anderem Personen. (Bild: Microsoft)

Eine neue, experimentelle App von Microsoft soll es Blinden ermöglichen, ihre Umgebung besser wahrzunehmen. Seeing AI erkennt auf einem Foto, das der Nutzer von seiner Umgebung macht, Objekte, Personen, Text oder auch Bargeld.

Der auf künstlicher Intelligenz beruhende Algorithmus erkennt den Inhalt des Bildes und beschreibt ihn in einem Satz, der vorgelesen wird. Der Nutzer muss allerdings vorher den Modus wählen, der zu dem zu erkennenden Objekt passt - eine automatische Objekterkennung gibt es nicht.

  • Seeing AI beim Lesen eines Textes (Bild: Microsoft)
  • Der Algorithmus von Seeing AI kann Personen erkennen. (Bild: Microsoft)
Seeing AI beim Lesen eines Textes (Bild: Microsoft)

Will der Nutzer beispielsweise ein Schriftstück einscannen und sich vorlesen lassen, muss der Dokumentmodus gewählt werden. Soll eine Person erkannt werden, muss der entsprechende Personenmodus aktiviert sein. Außerdem können Produkte anhand des Barcodes sowie Bargeld erkannt werden. Die Menüführung ist sprachgesteuert.

Verschiedene Objekte und Szenen sollen von der App erkannt werden

Kurze Textabschnitte können zudem auch vorgelesen werden, sobald sie vor der Kamera auftauchen - der Nutzer muss also nicht erst ein Foto machen. Noch in der experimentellen Phase ist die Szenenerkennung: Seeing AI kann ein Foto einer Szene analysieren und sich an einer Interpretation versuchen.

Nutzer können beispielsweise einen Bereich auf der Straße fotografieren und auf diese Weise Informationen über Hindernisse erfahren. Microsoft selbst wertet diese Funktion allerdings noch als so experimentell, dass sie in den Einstellungen der App explizit aktiviert werden muss. Allerdings soll Seeing AI im Laufe der Zeit dazulernen und so immer besser werden.

Seeing AI ist momentan nur für iOS und auf Englisch erhältlich und kann kostenlos heruntergeladen werden.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Quellcode auf Github
MS-DOS 4.00 ist jetzt Open Source

Nachdem der ehemalige CTO eine alte MS-DOS-Floppy entdeckt hat, veröffentlicht Microsoft ein Stück Betriebssystem-Geschichte.

Quellcode auf Github: MS-DOS 4.00 ist jetzt Open Source
Artikel
  1. Startrampe Set: Lego bietet Milchstraße und Nasa-Rakete Artemis als Bausatz
    Startrampe Set
    Lego bietet Milchstraße und Nasa-Rakete Artemis als Bausatz

    Lego hat zwei neue Sets vorgestellt, die für Weltraumenthusiasten gedacht sind: das Nasa-Artemis-Startrampen-Set und das Milchstraßen-Galaxie-Set.

  2. Fallout 4: Next-Gen-Update sorgt für postnukleare Ernüchterung
    Fallout 4
    Next-Gen-Update sorgt für postnukleare Ernüchterung

    Nach großer Vorfreude folgt die triste Wahrheit: Viele Fans von Fallout 4 sind enttäuscht vom Next-Gen-Update.

  3. The Beekeeper: Ein Mann gegen die Ransomware-Industrie
    The Beekeeper
    Ein Mann gegen die Ransomware-Industrie

    Normalerweise gibt es kaum einen Grund, sich eines Actionfilms mit Jason Statham anzunehmen. The Beekeeper ist aber eine Ausnahme.
    Eine Rezension von Peter Osteried

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • Asus OLED-Monitor zum Tiefstpreis • Gigabyte GeForce RTX 4070 Ti im Sale • MediaMarkt: Asus Gaming-Laptop 999€ statt 1.599€ • Gamesplanet Spring Sale [Werbung]
    •  /