Automatisierte vs. Manuelle Barrierefreiheitstests

Barrierefreiheit ist Pflicht – sowohl technisch als auch nutzerorientiert. Doch wie stellt man sicher, dass mobile Websites wirklich zugänglich sind? Hier kommt die Kombination aus automatisierten und manuellen Tests ins Spiel.

Kernpunkte:

• Automatisierte Tests: Schnell, effizient, prüfen technische Fehler (z. B. fehlende Alt-Texte, Farbkontraste).
• Manuelle Tests: Nutzerzentriert, prüfen Bedienbarkeit und Kontext (z. B. Screenreader-Tests, Tastaturnavigation).
• Kombination: Beide Ansätze ergänzen sich ideal, um technische Präzision mit menschlicher Perspektive zu verbinden.

Schneller Vergleich

KriteriumAutomatisierte TestsManuelle TestsSchnelligkeitSehr hochZeitaufwendigNutzererfahrungBegrenztSehr gutTechnische FehlerSehr gutEingeschränktKostenGünstig bei WiederholungTeurer bei Einzelprüfungen

Fazit: Automatisierte Tests decken technische Aspekte ab, manuelle Tests bewerten die Nutzerfreundlichkeit. Zusammen bieten sie eine umfassende Lösung für barrierefreie Websites.

Manuelle Prüfverfahren für Webseiten nach BITV 2.0

Automatisierte Testing-Tools

Nachdem wir die grundlegenden Testmethoden besprochen haben, widmen wir uns jetzt den automatisierten Ansätzen.

Wie funktionieren automatisierte Tools?

Automatisierte Barrierefreiheitstests analysieren systematisch HTML, CSS und JavaScript einer Website anhand festgelegter Kriterien. Diese Tools prüfen die Website-Struktur und untersuchen dabei unter anderem:

• Technische Grundelemente
• Semantische Struktur
• Farbkontraste
• Eigenschaften von Medien

Vorteile automatisierter Tests

Automatisierte Tests bringen Entwicklerteams viele Vorteile:

VorteilBeschreibungWirkungZeitsparendSchnelle AnalyseKürzere TestzyklenEinheitlichkeitStandardisierte BewertungskriterienKonsistente ErgebnisseSkalierbarParallele Prüfungen möglichEffiziente AnalysenKostengünstigWeniger manueller AufwandGeringere Testkosten

Grenzen automatisierter Tests

Trotz ihrer Stärken haben automatisierte Tools auch Schwächen:

• Fehlendes Kontextverständnis: Alt-Texte können nicht auf Sinnhaftigkeit geprüft werden.
• Eingeschränkte Nutzerperspektive: Die reale Bedienbarkeit durch Nutzer wird nicht bewertet.
• Probleme mit komplexen Interaktionen: Dynamische Inhalte oder vielschichtige Nutzerinteraktionen können unzureichend geprüft werden.
• False Positives: Manche gemeldeten Probleme sind keine tatsächlichen Barrieren.

Beliebte automatisierte Testing-Tools

• Google Lighthouse: Ein kostenloses Tool, das in Chrome integriert ist und detaillierte Berichte zur Barrierefreiheit liefert.
• axe DevTools: Eine Lösung von Deque Systems, die sich nahtlos in CI/CD-Pipelines integrieren lässt und tiefgehende Analysen bietet.
• WAVE (Web Accessibility Evaluation Tool): Ein browserbasiertes Tool von WebAIM, das Testergebnisse visuell darstellt und leicht verständlich ist.
• SiteImprove Accessibility Checker: Ein Premium-Tool mit umfassenden Analysefunktionen und klaren Handlungsempfehlungen, ideal für große Websites.

Automatisierte Tools sind eine wichtige Grundlage für Barrierefreiheitstests. Sie sollten jedoch durch manuelle Tests ergänzt werden, um ein vollständiges Bild zu erhalten. Mehr dazu im nächsten Abschnitt.

Manuelle Testing-Methoden

Manuelle Tests sind eine wichtige Ergänzung zu automatisierten Ansätzen, da sie die Nutzererfahrung direkt bewerten können.

Grundlagen manueller Tests

Manuelle Barrierefreiheitstests setzen auf einen strukturierten Ansatz, der von geschulten Testern durchgeführt wird. Zu den wichtigsten Methoden gehören:

• Tastaturnavigation: Sicherstellen, dass alle Funktionen ohne Maus bedienbar sind.
• Screenreader-Tests: Einsatz von Tools wie NVDA oder JAWS für Windows oder VoiceOver für macOS, um die Zugänglichkeit zu prüfen.
• Zoom-Tests: Überprüfung, ob Inhalte bei 200 % Vergrößerung noch lesbar und nutzbar sind.
• Farbkontraste: Direkte Beurteilung der Farbkontraste in wichtigen Interface-Bereichen.

Vorteile manueller Tests

Manuelle Tests bieten durch die menschliche Perspektive klare Vorteile:

VorteilBeschreibungWirkungKontextverständnisTests berücksichtigen den NutzungskontextBessere Einschätzung der BedienlogikNutzerperspektiveRealistische Szenarien, die Tools oft übersehenPraxisnahe ProblemerkennungFlexibilitätAnpassung an spezifische Anforderungen möglichIndividuelle TeststrategienQualitative AnalyseTiefgehende Bewertung der BenutzerfreundlichkeitKonkrete Verbesserungsvorschläge

Herausforderungen manueller Tests

Trotz ihrer Stärken bringen manuelle Tests einige Herausforderungen mit sich:

• Zeitaufwand: Eine gründliche Prüfung einer mittelgroßen Website kann 15–20 Stunden in Anspruch nehmen.
• Kosten: Qualifizierte Tester verursachen höhere Personalkosten.
• Subjektivität: Tester können unterschiedliche Einschätzungen abgeben.
• Dokumentationsaufwand: Die Ergebnisse müssen detailliert dokumentiert werden, was zeitintensiv ist.

Erforderliche Testkompetenzen

Für erfolgreiche manuelle Tests sind bestimmte Fähigkeiten unverzichtbar:

1. Technisches Verständnis

Kenntnisse der WCAG 2.1 sowie der HTML-Semantik sind grundlegend.

2. Erfahrung mit assistiven Technologien

Sicherer Umgang mit mindestens einem Screenreader und anderen Hilfsmitteln.

3. Analytische Fähigkeiten

Systematische Problemerkennung und präzise Dokumentation der Ergebnisse.

4. Kommunikationsfähigkeit

Testberichte und Verbesserungsvorschläge müssen klar und verständlich formuliert sein, damit Entwickler und Projektverantwortliche sie umsetzen können.

Manuelle Tests ergänzen automatisierte Verfahren und schaffen so eine umfassendere Teststrategie.

Direkter Vergleich der Testmethoden

Hier schauen wir uns die Stärken und Schwächen der beiden Testmethoden direkt nebeneinander an.

Genauigkeit der Problemerkennung

Automatisierte Tests sind hervorragend darin, technische Fehler zu finden, während manuelle Tests besser dazu geeignet sind, kontextbezogene Probleme aufzudecken. Sie erlauben es, Nutzerfreundlichkeit und semantische Zusammenhänge zu bewerten. Diese Unterschiede haben auch Auswirkungen auf die Ressourceneffizienz, die wir später betrachten.

Zeit- und Kostenaufwand

Automatisierte und manuelle Tests unterscheiden sich deutlich in Bezug auf Zeit und Kosten. Automatisierte Tests erfordern zwar eine größere Anfangsinvestition, bieten dafür aber schnelle Durchführung und Wiederholbarkeit. Manuelle Tests hingegen kosten weniger in der Einrichtung, benötigen jedoch mehr Zeit pro Testdurchlauf.

AspektAutomatisierte TestsManuelle TestsAnfangsinvestitionHoch, vor allem durch spezialisierte SoftwareNiedrig, auf einzelne Zyklen bezogenZeitaufwandGering – schnelle automatische AusführungHoch – zeitintensive manuelle ArbeitWiederholbarkeitSehr hoch – Tests sind leicht wiederholbarErfordert jedes Mal neuen AufwandWartungsaufwandRegelmäßig, aber effizient im BetriebVariabel, je nach Testumfang

Integration in den Entwicklungsworkflow

Automatisierte Tests lassen sich leicht in CI/CD-Prozesse einbinden, was sie ideal für kontinuierliche Entwicklungszyklen macht. Manuelle Tests hingegen sind besser geeignet, um bei wichtigen Meilensteinen zusätzliche Einblicke zu liefern. Beide Methoden spielen eine wichtige Rolle, je nach Bedarf und Zielsetzung.

Methodenvergleichstabelle

KriteriumAutomatisierte TestsManuelle TestsErkennung technischer FehlerSehr gutEingeschränktBewertung der NutzererfahrungBegrenzte AussagekraftSehr gutSkalierbarkeitHochGeringKosteneffizienzVorteilhaft bei häufigen TestsGünstig bei einmaligen TestsPräzisionHoch bei technischen KriterienAbhängig von der TesterfahrungKontextverständnisBegrenztSehr gutFlexibilitätEingeschränktSehr hochDokumentationsqualitätStandardisierte ErgebnissePraxisnahe, detaillierte Berichte

Kombinierter Einsatz beider Testmethoden

Die Kombination automatisierter und manueller Tests bietet eine umfassendere Bewertung der Barrierefreiheit, indem sie technische Präzision mit der menschlichen Perspektive verbindet.

Vorteile der kombinierten Tests

Durch den kombinierten Ansatz werden technische und nutzerzentrierte Aspekte der Barrierefreiheit abgedeckt. Automatisierte Tests übernehmen die technische Prüfung, während manuelle Tests die Nutzerfreundlichkeit bewerten. Gemeinsam ermöglichen sie:

• Regelmäßige technische Überprüfungen durch automatisierte Tests
• Kontextbezogene Analysen durch manuelle Tests
• Effiziente Ressourcennutzung durch optimierte Methoden

Dieser Ansatz schafft eine solide Grundlage für einen strukturierten und effektiven Testprozess.

Richtlinien für kombinierte Tests

Ein gut abgestimmter Workflow bündelt die Stärken beider Testmethoden und sorgt für eine systematische Prüfung:

PhaseAutomatisierte TestsManuelle TestsEntwicklungIntegration in den Build-ProzessÜberprüfung neuer FunktionenPre-ReleaseVollständige technische AnalyseDetaillierte Usability-PrüfungWartungRegelmäßige automatische ChecksManuelle Überprüfung alle drei MonateUpdatesRegressionstestsFokussierte Analyse der Änderungen