MONITOR - Multimodale Präsentation und Erkundung von zeitabhängigen Echtzeitdaten durch blinde Menschen
In der bisherigen Forschung zu Fragen der Informationsvisualisierung, einschließlich mobiler HCI, fehlt es an Konzepten und Ideen zur Überwachung und Analyse zeitabhängiger Echtzeitdatenströme, die für Blinde zugänglich sind. Echtzeitdaten treten in verschiedenen Berufs- und Freizeitkontexten auf, wie z. B. in der Produktion, in der Logistik, im Sport, im betreuten Wohnen, in der Krankenpflege, im Transportwesen und in der Navigation mit einer Frequenz von Sekunden, Minuten oder Stunden. Ohne die Fähigkeit, rechtzeitig zu reagieren, sind viele blinde Menschen von zentralen Aktivitäten in diesen Kontexten ausgeschlossen, da auditive Darstellungsmethoden die Informationen serialisieren und taktile Darstellungsmethoden eine zeitaufwändige Erkundung der Informationen mit der Hand oder anderen Extremitäten erfordern.
Wir schlagen die Kombination verschiedener Ausgabe- und Eingabemodalitäten vor, sowohl akustischer als auch haptischer Art, um die nicht-visuelle Wahrnehmung dynamischer Daten zu unterstützen, mit Eingaben über Gesten und Sprache sowie Ausgaben über Sprache, Ton und Vibration. Wir führen Studien durch, die die Verständlichkeit verschiedener Aus- und Eingabemodalitäten für die Analyse zeitabhängiger Echtzeitdatenströme mit mobilen Geräten und Wearables untersuchen. Besonderes Augenmerk liegt dabei auf dem Wahrnehmungsversatz (die Zeit zwischen dem Auftreten der Datenänderung und der Wahrnehmung der Änderung), verschiedenen Ausgaberhythmen und -mustern sowie den für jede Modalität geeigneten Datenaktualisierungsraten. Außerdem werden Kombinationen dieser Modalitäten untersucht und im Hinblick auf Wahrnehmung und Verständlichkeit geprüft.
Ziele des Projekts
Das primäre Ziel dieser Arbeit ist es, ein multimodales, nicht-visuelles Konzept zur Erkundung von Echtzeitdatenströmen mit mobilen Geräten und Wearables zu entwerfen und zu entwickeln, um blinden Menschen eine unabhängige Analyse zu ermöglichen. Dabei gibt es die folgenden Teilziele:
- Untersuchung der Wahrnehmung und Interpretation multimodaler, nicht-visueller Datenpräsentation mittels Sonifikation und Haptikfikation unter zeitlichen Einschränkungen durch blinde Menschen
- Untersuchung, wie blinde Menschen die Präsentzation zeitabhängiger Echtzeit-Datenströmen interaktiv, effektiv und effizient durch Kombinationen von Spracheingabe und Gesten erkunden können
- Untersuchung, inwieweit eine multimodale Darstellung von zeitabhängigen Echtzeitdatenströmen die Benutzbarkeit von Benutzungsschnittstellen durch sehende Menschen beeinflusst und wie sehende Menschen von einer zugänglichen multimodalen Darstellung (visuell und nicht-visuell) zeitabhängiger Echtzeitdatenströme profitieren können.
Informationen über das Projekt
Projektlaufzeit: 01.03.2024 bis 28.02.2026
Förderung: Gefördert durch die Deutsche Forschungsgemeinschaft (DFG) - 514258978
Mitarbeiter und Mitarbeiterinnen
Wissenschaftliche Mitarbeiterin
NameFrau Emma Franziska Etzold M.Sc.
Eine verschlüsselte E-Mail über das SecureMail-Portal versenden (nur für TUD-externe Personen).
Besuchsadresse:
Andreas-Pfitzmann-Bau, Raum 1059 Nöthnitzer Str. 46
01187 Dresden