Nonresponse: Rücklauf und Verzerrung trennen

1. Ausgefallene Einheiten von fehlenden Einzelantworten trennen

Bei einer Befragung fehlen Antworten auf unterschiedliche Weise. Manche ausgewählten Personen liefern keinen verwertbaren Fragebogen; andere nehmen teil, überspringen aber eine einzelne Frage. Diese Situationen betreffen verschiedene Nenner und erfordern verschiedene Beschreibungen. Lege zunächst die Untersuchungseinheit und die Auswertungsgrundlage fest. Eine Sitzungszahl aus einer Webseite ist noch keine Zahl eindeutig eingeladener Personen. Ein offener, weiterleitbarer Link hat häufig keinen bekannten Auswahlrahmen. Dann darfst du einen unbekannten Nenner nicht durch Aufrufe oder vermutete Reichweite ersetzen.

AAPOR unterscheidet Rücklauf-, Kooperations- und Abschlussraten und warnt davor, sie austauschbar zu behandeln. Eine dokumentierte Quote braucht eine nachvollziehbare Definition. Für deine Arbeit ist daher eine kleine Begriffsliste hilfreich: Was zählt als vollständig, was als teilweise beantwortet, was als nicht erreicht und was als nicht teilnahmeberechtigt? Formuliere Regeln passend zum Erhebungsdesign vor dem endgültigen Zählen. Die Standards sind eine methodische Hilfe; welche Kennzahl du tatsächlich berichten kannst, entscheidet deine überprüfbare Datengrundlage und nicht der Wunsch nach einer hohen Prozentzahl.

Weiterführend: AAPOR: Response Rates, Definitionen und Grenzen als Qualitätsmaß

2. Die Fallzustände mit einem belegbaren Nenner verbinden

Lege eine datensparsame Übersicht der Fallzustände an. Trenne bekannte Berechtigung, bekannte Nichtberechtigung und unbekannte Berechtigung. AAPORs Standard Definitions zeigen, dass unterschiedliche Rücklaufdefinitionen unter anderem teilweise Interviews und ungeklärte Berechtigung verschieden berücksichtigen. Der U.S. Census beschreibt ebenfalls solche getrennten Statusgruppen für seine eigenen Erhebungen. Übernimm deren spezielle Berechnung nicht ungeprüft in deine Abschlussarbeit. Nutze die Unterscheidungen, um deine Zählregeln zu klären und jede zusammengefasste Zahl zu einer nachvollziehbaren Liste zurückführen zu können.

Im eigenen vollständig fiktiven Lernfall wurden genau hundert bekannte berechtigte Einheiten eingeladen. Sechzig geben einen vollständigen Fragebogen ab, vierzig liefern keine Antwort. Es gibt hier keine unbekannte Berechtigung, Teilantworten, Gewichte oder Mehrfachteilnahmen. Der einfache Anteil vollständiger Antworten beträgt sechzig von hundert, also sechzig Prozent. Diese vereinfachten Voraussetzungen gehören ausdrücklich neben die Zahl. In einer realen Erhebung mit weiteren Zuständen braucht es die passende vollständige Definition. Ein unpassender Fall darf nicht bloß aus dem Nenner verschwinden, damit die Quote günstiger aussieht.

Weiterführend: AAPOR: Standard Definitions, zehnte Ausgabe, Fallzustände und Rücklaufdefinitionen

Weiterführend: U.S. Census Bureau: Appendix D3-A, Berechtigung und Ausfallarten

3. Einen Ergebnisanteil durch einen eigenen Grenzfall prüfen

Von den sechzig Antwortenden im Lernfall bejahen fünfundvierzig eine bestimmte Aussage. Unter den Antwortenden sind das fünfundsiebzig Prozent. Über die vierzig ausgefallenen Einheiten ist die Antwort unbekannt. Wenn dort niemand die Aussage bejahen würde, läge der Anteil unter allen hundert Eingeladenen bei fünfundvierzig Prozent. Wenn alle vierzig zustimmen würden, wären es fünfundachtzig Prozent. Beide Rechnungen benutzen dieselbe beobachtete Rücklaufquote. Sie zeigen unterschiedliche denkbare unbeobachtete Antworten, keine zwei tatsächlich gemessenen Studienergebnisse.

Die Spanne von fünfundvierzig bis fünfundachtzig Prozent ist hier eine rein logische Grenzbetrachtung für die hundert eingeladenen Einheiten. Sie ist kein Konfidenzintervall, keine Schätzung einer Zielpopulation und kein Beleg für die wahrscheinlichste Antwort der Ausgefallenen. Schreibe deshalb eine eigene Prüfnotiz: Welche Zusatzinformation würde den unbekannten Anteil wirklich eingrenzen? Geeignete Vergleichsmerkmale oder eine methodisch geplante Nachbefragung könnten weiterhelfen; bloß dieselbe Quote anders zu runden würde nichts klären. Jede zusätzliche Annahme muss getrennt von beobachteten Angaben kenntlich bleiben.

4. Diagnose und Folgerungen an der konkreten Frage ausrichten

Ein Vergleich verfügbarer Merkmale zwischen Antwortenden und der eingeladenen Gruppe kann Hinweise auf selektive Teilnahme geben. Ähnliche Verteilungen einiger bekannter Merkmale beweisen jedoch nicht, dass auch die interessierende, bei Ausfällen unbekannte Antwort unverzerrt ist. Frühe und späte Antworten sind ebenfalls kein automatischer Ersatz für die nicht antwortenden Personen. Halte für jede Diagnose fest, welche Information beobachtet wurde, was sie über deine Fragestellung aussagen kann und welche Lücke bleibt. Ausfälle allein belegen weder eine bestimmte Verzerrungsrichtung noch automatisch die Unbrauchbarkeit aller erhobenen Antworten.

Der Methodenfinder kann bei der Einordnung deiner Forschungsfrage, des tatsächlichen Zugangs und der Grenzen der verfügbaren Daten unterstützen. Bereite allgemeine Angaben zu eingeladenen Einheiten, Antworten und offenen Zuständen vor. Prüfe Vorschläge gegen dein Fallprotokoll und die passende Methodenliteratur. Das Tool misst keinen Nonresponse-Bias, rekonstruiert keine fehlenden Antworten und bestätigt keine Repräsentativität. Dein Ergebnis dieses Arbeitsschritts ist eine begründete Ausfallbeschreibung samt transparenter Quote und begrenzter Schlussfolgerung. Für Gewichtung oder weitergehende Korrekturen brauchst du eine fachlich passende Planung und gegebenenfalls statistische Betreuung.