Methodik: so scannen und so bewerten wir

Vier Grundsätze

1. Automatisierte Tests erkennen nur einen Teil der Barrieren. Veröffentlichte Studien setzen den Anteil, den sie erkennen, je nach Werkzeug und Zählweise auf 14 % bis 57 %: zwischen 14 % und 38 % der Barrieren im akademischen Vergleich von Vigo et al. (2013); rund 40 % mit dem besten Werkzeug im Test des UK Government Digital Service (2017); und 57 % der Probleme nach Volumen in der Studie von Deque (2021), einem Hersteller automatisierter Werkzeuge. Sie können nur beweisen, dass etwas scheitert, nie dass es besteht.
2. Manuelle Prüfung ist unverzichtbar. Sie ergänzt, was kein automatisierter Test entscheiden kann. Ihr Fortschritt wird getrennt angezeigt; wenn sie in die Punktzahl einfließt, macht sie 40 % aus, und ohne sie zeigen wir keine Endbewertung.
3. Die Punktzahl ist keine rechtliche Konformität. Der Konformitätsstatus kommt aus der Konformitätsmatrix, Kriterium für Kriterium, mit menschlicher Prüfung.
4. Alles ist versioniert. Jeder Scan speichert die Version der Engine, des Regelkatalogs und der Bewertungsformel.

So scannen wir jede Seite

• Mit einem echten Browser. Wir laden jede Seite in Chromium mit Stylesheets, Bildern und Skripten, so wie sie eine Person sieht.
• Auf Desktop und Mobilgerät. Ein Fenster mit 1366 × 768 Pixeln und ein Touch-Telefon mit 390 × 844. Jeder Fund wird nur einmal gespeichert, mit den Geräten, auf denen er vorkommt.
• Mit bekannten Regeln. Automatisierte Tests auf Basis von WCAG 2.2, Stufen A und AA: die axe-core-Regeln, mit aktivierter Zielgrößenregel, plus eigene Prüfungen: Reflow bei 320 Pixeln, Textabstand, Tastaturbedienung, Autoplay, automatische Weiterleitungen und Sprache. Wir führen auch die axe-core-Best-Practice-Regeln aus: sie erscheinen als Empfehlungen, zählen aber nicht zur Punktzahl.
• Rücksichtsvoll gegenüber Ihrem Server. Der SiteNorma-Crawler liest Ihre robots.txt und scannt nur wenige Seiten gleichzeitig.
• Ohne eine Blockade für ein Ergebnis zu halten. Wenn eine Firewall uns eine Challenge-Seite zeigt oder die Website unsere Anfragen begrenzt und wir die ganze Seite nicht laden können, markieren wir sie als nicht analysiert und bewerten sie nicht. Eine Ablehnung durch unsere eigene Anfragerate ist kein Mangel Ihrer Website.

Was automatisierte Tests können und nicht können

Manuelle Prüfung

Die manuelle Prüfung ist der Teil, den kein Werkzeug für Sie erledigen kann: eine Person macht sie, Kriterium für Kriterium, nach einem Leitfaden. Auf der Plattform funktioniert das so:

• Ein Leitfaden pro Kriterium. Jeder Leitfaden sagt, was Sie prüfen, wie Sie es tun, was geschehen sollte und wie Sie das Ergebnis festhalten. Manche kann jeder folgen („geführte Prüfung“); andere weisen darauf hin, dass spezialisierte Hilfe nötig sein kann. Fehlt ein Leitfaden für einen Aspekt, sagen wir das, und er bleibt prüfungsausstehend.
• Wann Sie wollen. Sie müssen nicht warten, bis die vom automatischen Analyse gefundenen Probleme behoben sind, und eine automatische Analyse ohne Funde schließt nie eine ausstehende Prüfung.
• Vier Antworten. „Ich habe keine Probleme gefunden“, „Ich habe ein Problem gefunden“, „Ich konnte es nicht prüfen“ und „Nicht anwendbar“. Ohne Antwort bleibt das Kriterium „Prüfung ausstehend“. Ein Problem muss beschrieben, „Nicht anwendbar“ begründet werden; „Ich konnte es nicht prüfen“ ist keine günstige Antwort.
• Was gespeichert wird. Seite, Element, Gerät, Bedingungen (z. B. nur Tastatur oder mit Screenreader), wer es gemacht hat, wann und die Belege, zusammen mit der Version der befolgten Anweisungen. Ein Entwurf kann gespeichert und fortgesetzt werden; eine erfasste Prüfung wird nie bearbeitet oder gelöscht, und eine neue kommt zu den früheren hinzu.
• Erfasst heißt nicht bestanden. „Manuelle Prüfung erfasst“ bestätigt nur die Speicherung. Eine günstige Antwort gilt für das Geprüfte (eine Seite, ein Element, bestimmte Bedingungen), nicht für den Rest der Website.
• Probleme werden wie andere behandelt. Ein in einer Prüfung gefundenes Problem wird als Vorkommnis mit Ursprung „In manueller Prüfung erkannt“ angelegt, mit seinem Leitfaden verknüpft und mit derselben Priorität wie die der automatischen Analyse. Eine spätere Prüfung, die es nicht findet, schließt es – nicht eine automatische Analyse.
• Wenn die Seite sich ändert. Erkennt eine neue Analyse, dass Struktur oder Text seit der Prüfung geändert wurden, wird das Kriterium „Braucht eine neue Prüfung“, und die frühere Bewertung bleibt, bis die Prüfung wiederholt wird.
• Nach einer Korrektur. Kann die automatische Analyse nicht entscheiden, ob ein Element behoben wurde, kann der spezifische Leitfaden wiederholt und die neue Prüfung erfasst werden. Eine günstige manuelle Prüfung ist einer der Belege, die das Archivieren der Arbeit erlauben (siehe unten).

Der Fortschritt der manuellen Prüfung wird getrennt von der automatischen Analyse und der Arbeitsnachverfolgung gezeigt und ist kein Konformitätsergebnis. Die manuelle Prüfung erfasst Ergebnisse und Belege pro Kriterium. Betrachten Sie automatisches Ergebnis und Prüfungsfortschritt getrennt: erfasste Prüfungen ändern die Punktzahl vorerst nicht.

Die Barrierefreiheits-Punktzahl

Heute spiegelt die angezeigte Punktzahl nur die automatisierten Tests wider. Die geplante Formel kombiniert zwei Teile: automatisierte Tests (A) und manuelle Prüfung (M). Wenn der manuelle Teil an die Punktzahl angebunden ist, liegt das Maximum ohne manuelle Prüfung bei 60.

P ist die geplante Barrierefreiheits-Punktzahl: 60 % aus automatisierten Tests und 40 % aus manueller Prüfung.

Der automatisierte Teil (A)

A ist die Zahl e hoch minus D geteilt durch 25. D ist die Summe über jede Regel mit bestätigten Fehlern aus dem Gewicht der Regel multipliziert mit dem Anteil der Seiten, auf denen sie scheitert:

• Regelgewicht (w): 10 bei kritischem, 7 bei schwerem, 3 bei mittlerem und 1 bei geringem Schweregrad.
• Seitenanteil (p): der Anteil gescannter Seiten mit diesem Fehler auf einem beliebigen Gerät. Prioritätsseiten und Seiten der Prüfungsstichprobe zählen doppelt.
• Nur WCAG-Regeln der Stufen A und AA mit bestätigten Fehlern zählen, einschließlich „Prüfung nötig“-Fälle, die Ihr Team als „Erkennung bestätigt“ markiert hat.
• Bestehende Regeln verwässern die Punktzahl nicht, und die Zahl betroffener Elemente zählt nicht: ein einziger Stil kann 200 identische Fehler erzeugen.
• Eine Korrektur aufzuschieben, als angewandt zu markieren oder ihre Arbeit zu archivieren hebt die Punktzahl nicht. Nur eine Analyse, die das Problem nicht mehr erkennt, tut das – oder das Verwerfen einer Erkennung mit Begründung (siehe unten).

Wenn D null ist, ist A gleich 1. Je schwerer und verbreiteter die Fehler, desto näher kommt A an null, ohne negativ zu werden.

Der manuelle Teil (M)

M ist der Anteil der Erfolgskriterien, die nach manueller Prüfung bestehen:

• C ist die Menge der Erfolgskriterien der gewählten Norm (55 mit EN 301 549 v4.1.1, 50 mit v3.2.1), abzüglich der mit Begründung als „Nicht anwendbar“ markierten. Sie können ein Kriterium nicht als „Nicht anwendbar“ markieren, wenn die Engine erkennt, dass es gilt: zum Beispiel macht ein Video die Kriterien unter 1.2 anwendbar.
• Ein Kriterium zählt 1, wenn es als „Bestanden“ markiert ist, seine Prüfung weniger als 12 Monate alt ist und keine offenen bestätigten Fehler hat. Sonst zählt es 0.

Wann wir eine Bewertung zeigen

Bis Sie mindestens 80 % der Kriterien geprüft haben, sehen Sie „Manuelle Prüfung ausstehend (x/55)“ statt einer Bewertung. Danach gehört zur Punktzahl eine dieser Bänder:

Bänder der Barrierefreiheits-Punktzahl

Punktzahl	Bewertung
90 bis 100	Ausgezeichnet
75 bis 89	Gut
50 bis 74	Verbesserungsbedarf
Unter 50	Schwach

Ein Beispiel

Ein Online-Shop hat drei Regeln mit bestätigten Fehlern:

Beispielrechnung von D

Regel	Schweregrad und Gewicht	Seiten mit dem Fehler	Beitrag zu D
Schaltflächen ohne zugänglichen Namen	Kritisch, 10	50 %	5,0
Feld mit mehr als einer Beschriftung	Mittel, 3	100 %	3,0
Barrierefreiheitslabel mit veraltetem Typ	Gering, 1	20 %	0,2

• D = 8,2, also A = e^−8,2/25 ≈ 0,72 und der automatisierte Teil trägt 43,2 Punkte bei.
• Heute, mit noch nicht angebundener M, ist die angezeigte Zahl 43 (nur automatisierter Teil).
• Wenn die Prüfung in die Punktzahl einfließt: ohne manuelle Prüfung wird „Manuelle Prüfung ausstehend (0/55)“ gezeigt; nach Prüfung von 50 der 55 Kriterien, davon 45 bestanden, ist M = 45/55 ≈ 0,82 und der manuelle Teil trägt 32,7 Punkte bei.
• Die Punktzahl steigt dann auf 76. Da mehr als 80 % der Kriterien geprüft wurden, wird die Bewertung „Gut“ gezeigt.

Wie diese Zahlen in einem Bericht erscheinen, sehen Sie im Beispielbericht mit einem anderen illustrativen Fall.

SEO und Qualität

S ist die SEO- oder Qualitäts-Punktzahl, jeweils getrennt berechnet. Wie bei der Barrierefreiheit summiert D das Gewicht jedes Problems multipliziert mit dem Anteil betroffener Seiten, mit eigenen Gewichten 10, 7, 3 und 1. Die Gewichtstabelle finden Sie auf der Seite SEO und Qualität.

Leistung

Wenn das Leistungsmodul kommt, beträgt seine Punktzahl 0,6 mal den Median auf Mobilgeräten plus 0,4 mal den Median auf Desktop, gerundet. Echtnutzerdaten werden getrennt gezeigt. Demnächst

Teamentscheidungen und Korrekturprüfungen

Was Ihr Team zu jedem Element (Bild, Schaltfläche, Feld) festhält, bleibt in drei Teilen, die sich nicht gegenseitig ersetzen, stets pro Element: eines zu ändern ändert die anderen nicht.

• Arbeitsnachverfolgung: Korrektur ausstehend, in Arbeit, Korrektur angewandt und Prüfung ausstehend oder Korrektur aufgeschoben. Das ändert weder Zahlen noch Punktzahl: ein aufgeschobenes Problem bleibt in den Ergebnissen.
• Validierung der Erkennung: Validierung ausstehend, Erkennung bestätigt oder Erkennung mit Begründung verworfen. Eine Erkennung zu bestätigen heißt nicht, dass sie behoben ist.
• Ergebnis der letzten Prüfung: weiterhin erkannt, in der letzten Prüfung nicht erkannt, konnte nicht geprüft werden oder braucht manuelle Prüfung.

Wie ein Verwerfen Zahlen und Punktzahl beeinflusst

• Eine Erkennung zu verwerfen erfordert Begründung, Belege und die Rolle Eigentümer oder Administrator. Wer es wann entschieden hat, wird erfasst.
• Ein verworfenes Element verlässt Zähler und Punktzahl. Ein Problem zählt auf einer Seite nur dann nicht mehr, wenn alle seine Elemente dort verworfen sind; findet die Engine mehr Elemente, als sie auflistet, zählt die Seite weiter.
• Die ursprüngliche Erkennung und ihre Historie werden nicht gelöscht. Verwerfungen werden getrennt gezählt, mit Begründung aufgeführt und können aufgehoben werden. Die Punktzahl der Engine ohne Verwerfungen wird neben der gezeigt, die sie anwendet.
• Ein prüfungsbedürftiger Eintrag zählt in der Punktzahl erst, wenn eine Person ein Element bestätigt.

Wann eine Prüfung eine Korrektur als geprüft zählt

Einen Status in SiteNorma zu ändern ändert Ihre Website nicht und startet keine Analyse. Um eine Korrektur zu prüfen, öffnen Sie die Zusammenfassung vor der Analyse, die sagt, welche Seiten geprüft werden und wie viele sie verbraucht, und erst „Analyse starten“ führt sie aus. Eine Analyse kann nur sagen, dass ein Element nicht mehr erkannt wird, wenn:

• sie die Seite auf jedem Gerät analysiert hat, auf dem das Element erkannt wurde;
• sie dieselbe Engine und dieselben Regeln wie die Erkennungsanalyse verwendet hat;
• der Test auf der Seite Elemente dieser Art zum Beurteilen gefunden hat und kein anderes Element mit demselben Problem erscheint, das dasselbe unter einer anderen Adresse im Code sein könnte.

In jedem anderen Fall ist das Ergebnis „Konnte nicht geprüft werden“ oder „Braucht manuelle Prüfung“ (z. B. ein Element in einem Pop-up), und die Korrektur bleibt prüfungsausstehend. Wird das Element gefunden, ist es weiterhin erkannt. Die Arbeit darf erst nach einer vergleichbaren Prüfung, die es nicht erkennt, oder einer späteren günstigen manuellen Prüfung archiviert werden; wird das Problem erneut erkannt, öffnet sich die Arbeit wieder als ausstehend. Archivieren bescheinigt nicht, dass die Website eine Vorschrift erfüllt.

Kalibrierung und Versionen

• Die Konstanten (25 und 30) und die Gewichte sind an einem Korpus realer spanischer Online-Shops kalibriert. Sie können sich mit der Zeit anpassen.
• Jeder Scan speichert die Version der Engine, des Regelkatalogs und der Formel. So können Sie Scans vergleichen und wissen, womit sie gelaufen sind.
• Lässt ein Engine-Update ein Problem erscheinen oder verschwinden, markieren wir es als „Engine-Änderung“, nicht als Regression oder als Ihre Korrektur.

Was die Punktzahl nicht ist

Die Punktzahl sagt nicht, ob Ihre Website dem Gesetz entspricht. Eine Website kann eine hohe Punktzahl haben und dennoch an einem wichtigen Erfolgskriterium scheitern, das kein automatisierter Test erkennt. Konformität wird Kriterium für Kriterium in der Konformitätsmatrix mit menschlicher Prüfung und Belegen entschieden.

Methodikversion: Entwurf 0.1, 25. September 2026. Bewertungsformelversion: 1.2.0 (einschließlich Behandlung von Verwerfungen).