App unterstützt Menschen mit Sehbehinderung

 
Informatik
App

Studiengang

Informatik (B.Sc.)

Projektbeschreibung

Fußgängerampeln besitzen heute entsprechend der Richtlinien für Signalanlagen akustische und/oder taktile Signalgeber, die es Sehbehinderten erlauben Rot- und Grünphasen zu erkennen. Leider gibt es aber auch immer noch Fußgängerampeln, die diese zusätzlichen Signalgeber nicht besitzen oder bei denen wegen Umgebungslärm die Signale nur schwierig zu erfassen sind.

Dieser Problematik hat sich die Arbeitsgruppe von Prof. Zrenner am Forschungsinstitut für Augenheilkunde in Tübingen (Direktor: Prof. M. Ueffing) in Kooperation mit der Fakultät für Informatik an der Hochschule für Angewandte Wissenschaften in Augsburg gewidmet.

Unter der Leitung von Dr. Torsten Straßer, wissenschaftlicher Mitarbeiter am Forschungsinstitut und Lehrbeauftragter an der Hochschule Augsburg wurde im Rahmen einer Projektarbeit eine neuartige App zur Erkennung von Rot- und Grünphasen mit Hilfe eines Smartphones von Informatikstudenten und -studentinnen des 4. und 6. Semesters entwickelt.

Immer mehr Menschen mit einer Sehbehinderung nutzen heute auch ein Smartphone in ihrem täglichen Leben. Da Smartphones inzwischen leistungsfähig genug sind um komplexe Bildverarbeitung durchzuführen, wurde die Idee geboren, eine App zu entwickeln, die mit Kamera und weiteren Sensoren (z. B. GPS, Lagesensor, Kompass) die Rot- und Grünphasen einer Fußgängerampel erkennt und entsprechende akustische und taktile Signale ausgibt. Damit soll es Menschen mit einer Sehbehinderung möglich sein, unabhängig von den örtlichen Gegebenheiten sicher eine Straße an einer Fußgängerampel zu überqueren.

Für die Erkennung der Ampeln wurde die App mittels maschinellem Lernen anhand von Fotos von Ampeln trainiert, die mit einer weiteren App „LightsCatcher“ von Freiwilligen gesammelt wurden. Innerhalb der Projektlaufzeit wurden so über 3000 Fotos von Fußgängerampeln vor allem in Süddeutschland aber auch in einigen Städten Europas gesammelt und klassifiziert (Link: http://goo.gl/tcvCYf). Die gesammelten Bilder wurden überprüft und klassifiziert und ca. 1000 für das Training ausgewählt.

Die Entwicklung wird ihm Rahmen von weiteren Projekt- und Abschlussarbeiten weitergeführt werden. Die App und die gesammelten und klassifizierten Bilder werden als Open Source
für andere Projekte zur Verfügung gestellt. Die LightsCatcher App kann weiterhin genutzt werden und ist kostenlos in den jeweiligen App-Stores erhältlich. Die App „Ampel-Pilot“ ist im Google Play Store kostenlos erhältlich.

Link für Android-Geräte: https://play.google.com/store/apps/details?id=com.hs_augsburg_example.lightscatcher
Links für iOS-Geräte: https://itunes.apple.com/de/app/lightscatcher/id1227218052?mt=8
Link für die Android-App "Ampel-Pilot": https://play.google.com/store/apps/details?id=de.hsaugsburg.ampelpilot&ah=vTprjvmqNd-UuJalV_sSzTnrsuw&hl=de

Link zu Video: https://goo.gl/pukxZy

Link zur BR-Mediathek: Augsburger Ampel-App soll Blinden über die Straße helfen

Beteiligte Personen

Studierende:  Quirin Büchner, Johannes Huber, Maximilian Kahn, Florian Laxy, Mathias Ludyga, Georgia Oustria, Patrick Valenta

Betreuer: Dr. Torsten Straßer