Hintergrund So werden Meinungs- und Wahlumfragen gemacht

Repräsentative Umfragen in Deutschland werden vor allem über Telefonbefragungen mit 1.000 bis etwa 3.000 zufallsgenerierten Teilnehmenden gemacht. Im Schnitt nimmt nur etwa jede fünfte angefragte Person teil. Die Befragung ist anonymisiert. Oft werden Telefonumfragen durch Online-Befragungen ergänzt. Ziel ist ein möglichst repräsentativer Querschnitt der Gesamtbevölkerung.

Bis in die 2000er-Jahre wurden die Umfragen meist per Festnetztelefon durchgeführt, inzwischen auch über Mobilfunkanschlüsse und zunehmend online sowie in sozialen Netzwerken. Daneben gibt es auch weiter persönliche Befragungen/Interviews (face-to-face), die aber aufwendiger und teurer sind. Grundsätzlich gilt: Die Repräsentativität von Umfragen hängt maßgeblich vom Auswahlverfahren ab und erst in zweiter Linie von der Anzahl an Befragten.

So stehen reine Online-Umfragen mit fragwürdiger Methodik in der Kritik und führten wie im Fall des Institus Civey schon zu Gerichtsverfahren.

Ein Problem bei Umfragen sind Antwortverweigerer. Das hat verschiedene Gründe, wie etwa die allgemeine Ablehnung von Umfragen oder auch eine höhere Sensibilität beim Schutz persönlicher Daten. Dadurch können Gruppen mit bestimmten Einstellungen zu kurz kommen. Als unterrepräsentiert in Telefonumfragen gelten vor allem ältere und formal niedrig gebildete Personen sowie Stadtbewohner. Um das auszugleichen, werden Teilnehmer aus diesen Bereichen höher gewichtet.

Weitere Fehlerquelle ist die Richtigkeit der Antworten. So kann Befragten aus unterschiedlichen Gründen ihre Antwort unangenehm sein oder sie wollen einen anderen Eindruck erwecken.

Dennoch herrscht Konsens, dass bei Einhaltung von Qualitätsstandards repräsentative Ergebnisse erzielt werden – jedoch stets mit einer gewissen Fehlertoleranz. Zur Beurteilung der Repräsentativität ist Transparenz bei der Datenmethodik nötig. Zumeist stellen die Institute diese Informationen bereit, oft fehlen sie aber in der Presseberichterstattung.

Es gibt Dutzende Markt- und Sozialforschungsinstitute in Deutschland. Sie sind größtenteils privatwirtschaftlich aufgestellt und bieten ihre Dienste Unternehmen, Parteien, Stiftungen, Institutionen und Verbänden an. Trendforschung ist ein Milliardenmarkt, vor allem die Marktforschung. Selten gibt es andere Organisationsformen – bei der Forschungsgruppe Wahlen (FGW) etwa handelt es sich um einen gemeinnützigen Verein, der im Kern auf Meinungs- und Wahlforschung spezialisiert ist und exklusiv für das ZDF arbeitet.

Wahlumfragen sind keine Voraussagen für das Wahlergebnis, sondern bilden die aktuelle politische Stimmung ab – abhängig vom Umfragezeitraum, von jüngsten Ereignissen und methodischen Details. Dabei gibt es immer Differenzen zur Entscheidung am tatsächlichen Wahltag. Die statistische Fehlertoleranz liegt unterschiedlichen Quellen zufolge bei +/- drei Prozentpunkten. Der Politikwissenschaftler Karl-Rudolf Korte geht von zwei bis vier aus. Auch das Parteiergebnis spielt eine Rolle: Bei einer Fünf-Prozent-Partei ist der relative Fehlerbereich größer als bei einer 30-Prozent-Partei. Ein Ranking der Voraussagen für die Bundestagswahl 2021 finden sie hier: Spitzenreiter war Allensbach, Infratest Dimap gehörte zur Spitzengruppe, Schlusslichter waren YouGov und Emnid.

Die Forschungsgruppe Wahlen erläutert auf ihrer Seite die Reihenfolge bei Wahlabfragen und den Umgang mit kleinen oder neuen Parteien für das ZDF-Politbarometer. Demnach werden bei der Sonntagsfrage für den Bundestag die Parteien in der Reihenfolge ihres Zweitstimmenergebnisses bei der letzten Wahl abgefragt. Bei den kleinen "sonstigen Parteien" wird noch einmal nachgefragt, um welche Partei es sich handelt. Ab einem Anteil von drei Prozent wird diese Partei dann einzeln aufgeführt – wie etwa das neu gegründete Bündnis Sahra Wagenknecht. Das hat methodische Gründe. Unter drei Prozent ist der statistische Fehlerbereich sehr hoch, seriöse Aussagen sind dann kaum möglich. Andere Institute gehen auch bis auf zwei Prozent runter.

Einige Internetportale sammeln Ergebnisse von Wahlumfragen und führen sie zusammen. DAWUM errechnet daraus einen Mittelwert unter Ausweisung der Fehlertoleranz. Ähnlich macht es der Politpro-Wahltrend.

Der Arbeitskreis Deutscher Markt- und Sozialforschungsinstitute e.V. (ADM) vertritt nach eigenen Angaben die wichtigsten Marktforschungsunternehmen in Deutschland mit etwa 12.000 Beschäftigen und einem Gesamtumsatz 2023 von gut 2 Milliarden Euro. Der ADM ist auch für Qualitätssicherung zuständig und trägt gemeinsam mit drei weiteren Branchenverbänden den Rat der Deutschen Markt- und Sozialforschung. Der Rat spricht auch Rügen aus.

Nach ADM-Einschätzung haben sich Demoskopie und Marktforschung mit der Digitalisierung deutlich verändert und entwickeln sich stetig weiter. Markt- und Sozialforschung seien eine Entscheidungsgrundlage für Wirtschaft und Politik. Daher sei die Qualität der Daten wichtig.

Der ADM sieht Risiken durch die Online-Datenerfassung und den Trend zu Social-Media-Befragungen. Das führe zu Repräsentativitätsproblemen für die Gesamtbevölkerung. Dazu gebe es Verzerrungen durch Bots und Fakenews in der Online-Community. Social-Media-Daten seien relevant, aber als alleinige Datenquelle ungenügend. 2023 haben der ADM sowie weitere Branchenverbände ihre Qualitätsstandards angepasst und Anforderungen für Markt- und Sozialforschungsprojekte definiert.

MDR AKTUELL (ans)