Was war das Ziel des Projekts zwischen WDR und Appmatics?

Das Ziel war die Einführung barrierefreier, KI-generierter Live-Untertitel für das TV-Format WDR Lokalzeit. Appmatics übernahm das Accessibility Testing und User Research mit hörgeschädigten Personen.

Wie wurde die Barrierefreiheit der Untertitel getestet?

Appmatics führte UX-Tests mit hörgeschädigten Proband:innen durch – inklusive Videoanalyse, Interviews und funktionalem Software QA auf Smart TVs, Apps und Browsern.

Welche Herausforderungen gab es beim Subtitle QA Testing?

Die größte Herausforderung war die Synchronisation und Lesbarkeit der Untertitel in Echtzeit – besonders bei 11 parallelen Regionalausgaben der Lokalzeit.

Warum sind Accessibility-Tests mit echten Nutzer:innen wichtig?

Nur durch Testing mit der Zielgruppe (z. B. Menschen mit Gehörlosigkeit) lassen sich tatsächliche Barrieren und UX-Probleme erkennen – etwa bei Lesegeschwindigkeit, Sprecheridentifikation oder Textqualität.

Was plant der WDR als nächstes?

Geplant ist die Verbesserung der KI-Modelle, Einführung von Farbcodierung zur Sprecherkennung und der Rollout auf HbbTV, mobile Apps und Mediathek-Plattformen.

Barrierefreiheit testen für Medien: UX & QA Case Study mit dem WDR

Die tägliche Lokalzeit-Sendung des WDR stellt mit 11 gleichzeitigen Regionalausgaben eine besondere Herausforderung für barrierefreies Livestreaming dar. Ziel war es, automatisierte Live-Untertitel mithilfe von Künstlicher Intelligenz bereitzustellen – in Echtzeit, mit hoher Präzision und auf verschiedenen Endgeräten (Browser, Mediathek, HbbTV, App).

Gleichzeitig galt es, gesetzliche Vorgaben zur digitalen Barrierefreiheit (z. B. EU Accessibility Act, AVMSD-Richtlinie) zu erfüllen und die Lösung für Menschen mit Hörbeeinträchtigung zugänglich zu gestalten.

Die Herausforderung für Appmatics bestand darin, die KI-basierte Untertitellösung durch qualitativ hochwertige QA-Prozesse und zielgruppenspezifisches User Testing zu bewerten:

Wie präzise, lesbar und synchron sind die automatisierten Untertitel?

Wird die Zugänglichkeit für Nutzer*innen mit Gehörlosigkeit oder Hörhilfen gewährleistet?

Erfüllt die Lösung technische und UX-Standards für barrierefreie Medienangebote?

Für die Qualitätssicherung der automatisierten Untertitel-Lösung führte Appmatics ein umfassendes Accessibility-Testverfahren im UX-Labor durch. Ziel war es, die Usability, Lesbarkeit und Barrierefreiheit der KI-generierten Live-Untertitel unter realen Bedingungen zu prüfen.

Das Vorgehen kombinierte User Testing mit hörgeschädigten Teilnehmer*innen, funktionales Testing und qualitative Videoanalysen.

Testdesign & Durchführung:

Durchführung einer Lab Study mit 6 Personen mit unterschiedlichen Hörbeeinträchtigungen

darunter Nutzer*innen mit Gehörlosigkeit, Cochlea-Implantaten, Hörhilfen

Nutzung typischer Inhalte aus WDR Lokalzeit (z. B. Interviews, Reportagen)

Semi-strukturierte Interviews & Beobachtung des Userverhaltens

Aufzeichnung, Analyse und Kategorisierung der Nutzer*innenreaktionen

Technische Testkomponenten:

Prüfung auf Subtitle-Synchronisation, Leseverständlichkeit & Sprecherzuordnung

Bewertung der Subtitle-Funktion unter Live-Streaming-Bedingungen (Speech-to-Text Delay, visuelle Einblendung etc.)

Besonderheiten:

Die Tests wurden mit echten Betroffenen durchgeführt – ein essenzieller Schritt im UX Testing für barrierefreie Medienlösungen

Die Testreihe mit Personen mit Hörbeeinträchtigung hat gezeigt:
Barrierefreiheit lässt sich nicht vollständig automatisieren. Nur durch gezielte UX Tests mit echten Nutzer*innen, qualitativen Interviews und strukturierter QA lassen sich subtile Probleme in Timing, Verständlichkeit und Nutzerfreundlichkeit identifizieren.