Stichprobengewichte verstehen: Was eine gewichtete Auswertung voraussetzt

1. Die Bedeutung der Gewichtsvariable nachlesen

Öffne vor der ersten gewichteten Tabelle die Dokumentation des verwendeten Datensatzes. Welche Zielpopulation, Erhebungswelle und Auswertungseinheit beschreibt das Gewicht? Statistics Canada erklärt das Designgewicht als Kehrwert der Einschlusswahrscheinlichkeit; daraus können unter anderem durch Anpassungen für Nichtantwort und zusätzliche Informationen endgültige Schätzgewichte entstehen. Eine beliebige Spalte mit dem Namen weight ist deshalb keine ausreichende Anleitung. Übernimm weder die Variable einer anderen Welle noch ein Haushaltsgewicht für Personen, ohne die dokumentierte Eignung zu prüfen.

Lege eine eigene Gewichtskarte an: Variablenname, zulässige Auswertungen, Bezugspopulation, dokumentierte Anpassungen und offene Fragen. Unser erfundenes Lernbeispiel verwendet eine Auswahlwahrscheinlichkeit von einem Fünftel. Das zugehörige reine Designgewicht wäre fünf. Diese Zahl bedeutet nicht, dass fünf Antworten beobachtet wurden. Sie erklärt nur einen Schritt des beschriebenen Schätzprinzips. Bei einem echten Datensatz darfst du daraus keine fehlenden Antworten ergänzen und keine spätere Anpassung selbst erraten. Halte tatsächliche Beobachtungen und rechnerische Repräsentation in der Dokumentation getrennt.

Weiterführend: Statistics Canada: 3.5.1 Weighting

2. Gewichte und echte Fallzahlen auseinanderhalten

Berichte nachvollziehbar, wie viele gültige Beobachtungen tatsächlich in deine Auswertung eingehen. Ein gewichteter Bevölkerungswert ist keine vergrößerte Zahl unabhängig befragter Personen. Notiere neben jeder wichtigen Tabelle deshalb den ungewichteten Analyseumfang, die verwendete Gewichtsvariable und den Zweck der gewichteten Kennzahl. Prüfe zusätzlich Filter und fehlende Werte. Wenn Personen wegen einer fehlenden Zielvariable ausgeschlossen werden, genügt es nicht, die Fallzahl aus der ursprünglichen Datensatzbeschreibung unverändert unter die fertige Tabelle zu setzen.

Für das eigene Arbeitsblatt kannst du eine Zeile pro Auswertung verwenden: Ausgangsbestand, sachlicher Filter, gültige Zielvariable, gültiges Gewicht und endgültige Fallzahl. Markiere fehlende oder ungewöhnliche Gewichte und prüfe sie anhand der Dokumentation. Eine auffällige Zahl ist zunächst ein Anlass zur Kontrolle, nicht zur stillen Löschung. Bewahre die ursprünglichen Daten unverändert auf und halte die vorgenommenen Auswahlschritte im Auswertungsskript fest. Dieser Ablauf liefert eine prüfbare Grundlage, bevor eine gewichtete Kennzahl überhaupt in die Ergebnisdarstellung übernommen wird. Ein eigenes reines Rechenbeispiel zeigt den Unterschied: Zwei fiktive Antworten null und eins ergeben ungewichtet einen Anteil von einer Hälfte. Mit den ausdrücklich erfundenen Gewichten eins und drei beträgt der gewichtete Anteil drei Viertel. Beobachtet wurden trotzdem nur zwei Antworten; daraus entsteht keine reale Bevölkerungsstudie.

3. Das Erhebungsdesign bei der Unsicherheit berücksichtigen

Eine gewichtete Punktschätzung und ihre Unsicherheit sind zwei zusammengehörige Aufgaben. Die Qualitätsrichtlinien von Statistics Canada betonen, dass Auswahlgewichte, Schichtung und Clusterung bei passenden Schätz- und Varianzverfahren berücksichtigt werden sollen. Welche Angaben du konkret brauchst, bestimmt die Datensatzdokumentation. Manche Erhebungen stellen zusätzliche Replikationsgewichte bereit. Verwende dafür eine geeignete, geprüfte Survey-Funktion deiner Statistiksoftware und die zugehörige Anleitung. Ein bloßes Vervielfachen von Datenzeilen oder die Behandlung der Gewichtssumme als Stichprobengröße ersetzt diese Designbeschreibung nicht.

Schreibe einen Auswertungssteckbrief mit Gewicht, Schichtinformation, Clustereinheit, gegebenenfalls Replikationsverfahren und dem gewünschten Schätzwert. Gehe die Felder mit Betreuung oder Methodenberatung durch. Sind notwendige Angaben nicht verfügbar, halte fest, welche Analysen damit nicht verantwortbar umgesetzt werden können. Eine eingeschränkte deskriptive Fragestellung kann eine begründete Alternative sein. Sie muss als solche ausgewiesen werden. Erfinde keine Designvariablen und übertrage nicht ohne Prüfung Einstellungen aus einem anderen Datensatz. Die richtige Softwareoption hängt vom konkreten Erhebungsdesign ab.

Weiterführend: Statistics Canada: Data Quality Guidelines, Estimation

4. Gewichtung nicht als Reparaturversprechen verwenden

Prüfe, welche Probleme die dokumentierte Gewichtung adressiert und welche offenbleiben. Eine Anpassung an bekannte Merkmale beweist nicht, dass jede relevante Auswahlverzerrung verschwindet. Gerade bei freiwilligen offenen Befragungen darfst du keine bekannten Auswahlwahrscheinlichkeiten unterstellen. Vergleiche deine geplanten Aussagen mit Zielpopulation, Rekrutierung und dokumentierten Annahmen. Schreibe die Grenze ausdrücklich in den Methodenteil und berücksichtige sie bei der Interpretation. Der fertige Stand ist eine begründete Analyseentscheidung, nicht das pauschale Versprechen, die Befragung sei durch einen Korrekturfaktor repräsentativ geworden.

Der Statistik-Testfinder kann deine Forschungsfrage, Variablen und Messstruktur bei der Verfahrensplanung einordnen. Beschreibe vorhandene Gewichte und das Erhebungsdesign in den dafür geeigneten zusätzlichen Angaben, soweit dies möglich ist. Prüfe Empfehlungen gegen den Auswertungssteckbrief und die offizielle Datensatzanleitung. Das Tool berechnet keine Rohdaten, keine Surveygewichte und keine designgerechten Standardfehler. Führe die Berechnung anschließend in geeigneter Statistiksoftware durch und dokumentiere deren Einstellungen. So bleibt der Toolhinweis eine Unterstützung der Planung statt eines unzutreffenden Nachweises einer bereits geprüften Auswertung.