Wie politische Umfragen funktionieren

Der Nachrichtenzyklus ist vollgepackt mit Umfragen. Schalten Sie die nächtlichen Sendungen ein oder stöbern Sie in Online-Nachrichtenartikeln und Sie werden mit den neuesten „Statistiken“ über den Prozentsatz der Amerikaner, die an Gott glauben, bombardiert; die Aufschlüsselung von Hundeliebhabern versus Katzenliebhabern; und wie viele Menschen zwischen 65 und 85 Jahren eine Nintendo Switch besitzen. Im Wahljahr sind die Umfragewerte selbst Schlagzeilen: „Clinton führt Trump unter den Wählern mit Hochschulabschluss an;“ "Republikaner wählen eher als Demokraten" und sogar das gelegentliche "Dewey besiegt Truman!"

Sicher, Umfragen machen großartige Schlagzeilen, aber wie genau sind sie? Wie viel Vertrauen sollten wir in Umfragen setzen, insbesondere in politische Umfragen, die versuchen, das Ergebnis einer Wahl vorherzusagen? Wer führt diese Umfragen durch und wie entscheiden sie, wen sie fragen? Ist es möglich, eine repräsentative Stichprobe von Wählern zu erreichen, indem man zufällig Nummern aus dem Telefonbuch zieht?

Politische Meinungsumfragen sind eine Form der Meinungsumfrage. Wenn es richtig gemacht wird, ist die Meinungsumfrage eine genaue Sozialwissenschaft mit strengen Regeln in Bezug auf Stichprobengröße, zufällige Auswahl der Teilnehmer und Fehlermargen. Allerdings ist selbst die beste Meinungsumfrage nur eine Momentaufnahme der öffentlichen Meinung zu einem bestimmten Zeitpunkt, keine ewige Wahrheit [Quelle: Zukin ]. Wenn Sie direkt nach einer Nuklearkatastrophe die öffentliche Meinung zur Kernenergie befragen , wird sie viel niedriger sein als am Tag vor der Katastrophe. Dasselbe gilt für politische Umfragen. Die Meinung der Wähler ändert sich dramatisch von Woche zu Woche, sogar von Tag zu Tag, während die Kandidaten auf dem Wahlkampffeld gegeneinander antreten.

Politische Umfragen waren nicht immer so wissenschaftlich. Im späten 19. und frühen 20. Jahrhundert führten Journalisten informelle Strohumfragen unter Durchschnittsbürgern durch, um die öffentliche Meinung zu Politikern und bevorstehenden Wahlen einzuschätzen [Quelle: Crossen ]. Ein Zeitungsmann , der in einem Zug unterwegs ist, könnte allen, die in seinem Auto sitzen, dieselbe Frage stellen, die Ergebnisse zusammenzählen und sie als Fakten in der Zeitung des nächsten Tages veröffentlichen.

In den 1930er Jahren führte das populäre Magazin „Literary Digest“ per Post und Telefon Meinungsumfragen unter seiner großen Abonnentenzahl durch, in der Annahme, dass eine große Stichprobengröße automatisch unfehlbare Ergebnisse liefern würde. Das Magazin bemerkte nicht, dass seine Leserschaft wohlhabender und eher republikanisch war als der durchschnittliche US-Wähler, was dazu führte, dass das Magazin fälschlicherweise einen Erdrutschsieg für Alf Landon über Franklin D. Roosevelt im Jahr 1936 vorhersagte [Quelle: Crossen ].

Heute verwenden die führenden politischen Meinungsforschungsinstitute mathematische Methoden und Computeranalysen, um Antworten von der repräsentativsten Stichprobe der amerikanischen Wählerschaft zu sammeln. Aber es gibt immer noch viel „Kunst“ in der Wissenschaft der politischen Meinungsforschung. Sogar zufällige Antworten müssen angepasst und gesichtet werden, um subtile Trends in der Wählermeinung zu identifizieren, die helfen können, den endgültigen Gewinner am Wahltag vorherzusagen.

Beginnen wir unsere Untersuchung der politischen Umfragen mit dem wichtigsten Indikator für Genauigkeit: einer repräsentativen Stichprobe.

1. Erhalten einer repräsentativen Probe
2. Fehlergrenzen
3. Umfrage Fragen und Antworten
4. Gewichtung der Umfrageergebnisse
5. Anmerkung des Verfassers

Die Aufgabe politischer Umfragen besteht darin, die politische Meinung der gesamten Nation zu ermitteln, indem nur eine kleine Stichprobe wahrscheinlicher Wähler befragt wird. Damit dies funktioniert, müssen Meinungsforscher sicherstellen, dass die Stichprobengruppe die größere Bevölkerung genau repräsentiert . Wenn 50 Prozent der Wähler weiblich sind, müssen 50 Prozent der Stichprobengruppe weiblich sein. Gleiches gilt für Merkmale wie Alter, Rasse und geografische Lage.

Um die genaueste repräsentative Stichprobe zu erhalten, nehmen politische Meinungsforscher eine Seite aus der Wahrscheinlichkeitstheorie [Quelle: Zukin ]. Das Ziel der Wahrscheinlichkeitstheorie ist es, aus scheinbar zufälligen Daten einen mathematischen Sinn zu machen. Durch die Erstellung eines mathematischen Modells für die Daten können Forscher die Wahrscheinlichkeit zukünftiger Ergebnisse genau vorhersagen. Politische Meinungsforscher versuchen, Modelle zu entwickeln, die den Ausgang von Wahlen genau vorhersagen. Dazu müssen sie mit einer absolut zufälligen Stichprobe beginnen und die Stichprobe dann so anpassen, dass sie den Merkmalen der gesamten Population möglichst nahe kommt.

Die beliebteste Methode, um eine Zufallsstichprobe zu erzielen, ist das Random Digit Dialing (RDD) . Meinungsforscher beginnen mit einer ständig aktualisierten Datenbank aller aufgelisteten Telefonnummern im Land. Für Festnetz – sowohl Festnetz- als auch Mobiltelefone . Wenn sie nur die Nummern in der Datenbank anrufen würden, würden sie alle nicht gelisteten Nummern ausschließen, was keine echte Zufallsstichprobe wäre. Unter Verwendung von Computern analysieren Meinungsforscher die Datenbank der aufgelisteten Nummern, um alle aktiven Nummernblöcke zu identifizieren , bei denen es sich um Vorwahlen und Vermittlungsstellen (die zweiten drei Ziffern) handelt, die aktiv verwendet werden. Die Computer werden dann so programmiert, dass sie jede mögliche Zahlenkombination in jedem aktiven Block zufällig wählen [Quelle: Langer] . Beachten Sie, dass Festnetz und Handys sindunterschiedlichen Börsenblöcken oder den letzten vier Ziffern zugeordnet. So umgehen Meinungsforscher die Tatsache, dass es keine Verzeichnisse mit Handynummern wie bei Festnetznummern gibt und ermitteln, welche sie erreichen.

Für eine echte Zufallsstichprobe müssen Meinungsforscher nicht nur Zufallszahlen wählen, sondern zufällige Befragte innerhalb des Haushalts auswählen. Statistiken zeigen, dass Frauen und ältere Menschen viel eher ans Telefon gehen als andere Amerikaner [Quelle: Zukin ]. Um die Stichprobe zu randomisieren, bitten politische Meinungsforscher oft darum, mit dem Mitglied des Hauses mit dem letzten Geburtstag zu sprechen. Diese Methode wird nur beim Wählen von Festnetztelefonen verwendet.

Sobald ein politisches Meinungsforschungsinstitut Antworten aus einer ausreichend zufälligen Stichprobe gesammelt hat, muss es diese Stichprobe anpassen oder gewichten, damit sie mit den neuesten Volkszählungsdaten über Geschlecht, Alter, Rasse und geografische Aufteilung der amerikanischen Öffentlichkeit übereinstimmt. Wir werden in einem späteren Abschnitt mehr über die Gewichtung sprechen, aber lassen Sie uns zuerst einige der Geheimnisse hinter den Fehlermargen klären.

Handys und Umfragen

Die Verbreitung von Mobiltelefonen und das Verschwinden von Festnetzanschlüssen hat Wahlorganisationen vor neue Herausforderungen gestellt. ABC News zum Beispiel hat erst 2008 damit begonnen, Handynummern aufzunehmen. Jetzt stellt es sicher, dass der Prozentsatz von Handy- gegenüber Festnetznummern in seinen Umfragen mit der nationalen Aufschlüsselung übereinstimmt. Im März 2020 aktualisierte die Nachrichtenorganisation ihre Umfragequote auf 75 Prozent Mobiltelefone und 25 Prozent Festnetz [Quelle: Langer] . Das Bundesgesetz verbietet Meinungsforschern, automatische Wählsysteme zu verwenden, um Mobiltelefone anzurufen, was bedeutet, dass diese Nummern manuell gewählt werden müssen. Dies macht die Durchführung von Umfragen teurer (aber genauer), wenn Mobiltelefonnummern enthalten sind.

Was bedeutet es wirklich, wenn der Nachrichtensprecher sagt: "Die neuesten Umfragen zeigen Johnson mit 51 Prozent der Stimmen und Smith mit 49 Prozent, mit einer Fehlerquote von 3 Prozent"? Wenn es eine Fehlerspanne von 3 Prozent gibt und Johnson nur mit 2 Prozentpunkten vor Smith liegt, ist die Umfrage dann nicht nutzlos? Ist es nicht ebenso möglich, dass Smith mit einem Punkt Vorsprung gewinnt?

Die Fehlerspanne ist einer der am wenigsten verstandenen Aspekte der politischen Meinungsumfrage. Die Verwirrung beginnt mit dem Namen selbst. Die offizielle Bezeichnung für die Fehlermarge lautet Margin of Sampling Error (MOSE) . Die Stichprobenfehlerspanne ist eine statistisch nachgewiesene Zahl, die auf der Größe der Stichprobengruppe basiert [Quelle: AAPOR ]. Es hat nichts mit der Genauigkeit der Umfrage selbst zu tun. Die wahre Fehlerspanne einer politischen Umfrage ist unmöglich zu messen, weil es so viele verschiedene Dinge gibt, die die Genauigkeit einer Umfrage verändern können: voreingenommene Fragen, schlechte Analyse, einfache Rechenfehler usw.

Stattdessen ist die MOSE eine einfache Gleichung, die ausschließlich auf der Größe der Stichprobengruppe basiert (unter der Annahme, dass die Gesamtbevölkerung 10.000 oder mehr beträgt). Je größer die Stichprobengruppe ist, desto kleiner ist in der Regel die Fehlerquote. Beispielsweise hat eine Stichprobengröße von 100 Befragten einen MOSE von +/- 10 Prozentpunkten, was ziemlich hoch ist. Eine Stichprobe von 1.000 Befragten hat jedoch einen MOSE von +/- 3 Prozentpunkten. Um einen MOSE von +/- 1 Prozentpunkt zu erreichen, benötigen Sie eine Stichprobe von mindestens 5.000 Befragten [Quelle: AAPOR ]. Die meisten politischen Umfragen zielen auf 1.000 Befragte ab, weil sie mit den wenigsten Aufrufen die genauesten Ergebnisse liefern.

Kommen wir zurück zu unserem engen politischen Rennen zwischen Johnson und Smith. Bedeutet ein Vorsprung von 2 Prozent etwas in einer Umfrage mit einer Stichprobenfehlermarge von 3 Prozent? Nicht wirklich. Tatsächlich ist es schlimmer als du denkst. Die Fehlerspanne gilt für jeden Kandidaten unabhängig [Quelle: Zukin ]. Wenn die Umfrage sagt, dass Johnson 51 Prozent der Stimmen hat, bedeutet das wirklich, dass er irgendwo zwischen 48 und 54 Prozent der Stimmen hat. Ebenso bedeutet Smiths 49 Prozent wirklich, dass er zwischen 46 und 52 Prozent der Stimmen hat. Die Umfrage könnte also genauso gut dazu führen, dass Smith 52 zu 48 gewinnt.

Als nächstes schauen wir uns einen der wichtigsten Faktoren an, der die Genauigkeit einer politischen Umfrage bestimmt: die Formulierung der Fragen und Antworten.

Fragen und Antworten sind der Grund, warum wir politische Umfragen haben. "Welchen Kandidaten werden Sie bei der Wahl wählen?" "Stimmen Sie mit der Leistung des Präsidenten überein?" "Wie wahrscheinlich ist es, dass Sie bei den Zwischenwahlen zum Kongress wählen?" Aber die Reihenfolge dieser Fragen und die Antworten, aus denen die Befragten wählen können, können die Genauigkeit der Umfrage stark beeinflussen.

Es ist bekannt, dass die Reihenfolge der Fragen eine bedeutende Rolle bei der Beeinflussung der Antworten auf politische Umfragen spielt. Nehmen wir das Beispiel der „Pferderennen“-Frage, bei der die Befragten gefragt werden, wen sie in einem Kopf-an-Kopf-Rennen wählen würden: Kandidat A oder Kandidat B. Um ein möglichst genaues Ergebnis zu gewährleisten, fragen politische Meinungsforscher dieses Pferd -Race-Frage zuerst. Wieso den? Denn die Formulierung vorangegangener Fragen könnte die Antwort des Befragten beeinflussen.

Umfragen sind, wie bereits erwähnt, eine Momentaufnahme der Meinung des Befragten in dem Moment, in dem die Frage gestellt wird. Obwohl viele Wähler eine feste und lange Meinung zu Politik und politischen Kandidaten haben, entwickeln sich die Ansichten anderer Wähler ständig weiter – manchmal von Moment zu Moment. Ein Befragter einer politischen Umfrage könnte die Umfrage mit einer leichten Neigung zu Kandidat A beginnen. Aber nach einer Reihe von Fragen zu den Ansichten von Kandidat A zu Wirtschaft, Außenpolitik und sozialen Themen stellt der Befragte möglicherweise fest, dass er eigentlich eher mit Kandidat B übereinstimmt .

Insbesondere bei Umfragen vor den Wahlen ist es entscheidend, zuerst die Rennpferdefrage zu stellen, da die Wähler die Wahlkabine „kalt“ betreten, ohne zuerst auf eine Liste von „Aufwärm“-Fragen zu antworten [Quelle: Zukin ].

Die meisten politischen Umfragen werden telefonisch durchgeführt, und unabhängig davon, ob der Meinungsforscher ein Live-Interviewer oder ein automatisiertes System ist, gibt es normalerweise festgelegte Antworten, aus denen ausgewählt werden kann. Politologen haben herausgefunden, dass die Formulierung dieser Antworten einen besseren Einblick in politische Meinungen bieten kann.

Das Meinungsforschungsinstitut Rasmussen Reports beispielsweise verfolgt täglich die Zustimmungswerte des Präsidenten . Anstatt einfach zu fragen, ob die Befragten seine Leistung gutheißen oder missbilligen, bittet Rasmussen sie, aus den folgenden Optionen auszuwählen: „starke Zustimmung“, „etwas Zustimmung“, „etwas Ablehnung“ oder „starke Ablehnung“. Das Unternehmen hat herausgefunden, dass die „Etwas“-Optionen wichtig sind, um „Minderheiten“-Meinungen zu erfassen [Quelle: Rasmussen ].

Wenn zum Beispiel eine registrierte Republikanerin von der Leistung von Präsident Trump nicht begeistert ist, könnte sie immer noch „genehmigen“ statt „ablehnen“ wählen, wenn dies die einzigen Optionen wären. Aber die Option „etwas ablehnen“ ermöglicht es ihr, ehrlicher zu sein, ohne ihre Unterstützung für den Präsidenten zu untergraben. In ähnlicher Weise könnte ein registrierter Demokrat einen republikanischen Präsidenten "etwas gutheißen", ohne das Gefühl zu haben, seine Partei betrogen zu haben.

Push-Umfragen

Push-Umfragen sind negative politische Werbung, die als legitime politische Umfragen getarnt ist [Quelle: AAPOR ]. Anstatt einem Befragten eine Reihe von Fragen zu mehreren politischen Kandidaten und Themen zu stellen, konzentrieren sich die Fragen ausschließlich auf negative Eindrücke des Zielkandidaten. Beispiele könnten sein: „Würden Sie eher Kandidat A wählen, wenn Sie wüssten, dass er eine Affäre mit seiner Sekretärin hatte, während seine Frau im Krankenhaus war?“ oder "Wenn Sie den Präsidenten wegen grober Inkompetenz und mangelnden Patriotismus anklagen könnten, würden Sie es tun?" Push-Umfragen sind in einigen Staaten illegal und werden als Verstöße gegen das Wahlrecht behandelt. Die American Association for Public Opinion Research prangert Push-Umfragen an, weil sie das Vertrauen der Öffentlichkeit in politische Meinungsumfragen untergraben.

Wie wir bereits besprochen haben, ist die Zufälligkeit wichtig, um eine repräsentative Stichprobe der Bevölkerung zu erhalten . Durch die Verwendung von Zufallswahlsoftware versuchen politische Meinungsforschungsinstitute, eine perfekt randomisierte Stichprobe von Befragten zu erreichen. Aber es gibt Grenzen für die Effektivität von Random Dialing. Zum Beispiel neigen Frauen und ältere Amerikaner dazu, häufiger ans Telefon zu gehen, was die Geschlechter- und Altersverhältnisse der Stichprobe verfälscht. Anstatt sich ausschließlich auf das Wählen von Zufallszahlen zu verlassen, unternehmen politische Meinungsforscher den zusätzlichen Schritt, die Ergebnisse anzupassen oder zu gewichten, um sie dem demografischen Profil wahrscheinlicher Wähler anzupassen.

Beachten Sie, dass wir von „wahrscheinlichen Wählern“ gesprochen haben, nicht von der gesamten Bevölkerung im wahlberechtigten Alter der Vereinigten Staaten. Das ist eine wichtige Unterscheidung. Wenn Meinungsforscher ihre Ergebnisse so gewichten wollten, dass sie der gesamten Bevölkerung im Wahlalter entsprechen, würden sie die Ergebnisse an die neuesten Volkszählungsdaten anpassen. Zuerst würden sie die Ergebnisse geografisch verteilen und mehr Antworten aus bevölkerungsreicheren Bundesstaaten und Städten behalten. Dann würden sie die Ergebnisse an die demografische Verteilung von Geschlecht, Alter und Rasse in Amerika anpassen.

Wenn Sie jedoch die genauesten politischen Umfrageergebnisse erzielen möchten, müssen Sie die Stichprobe noch weiter filtern, um alle Befragten auszusortieren, die wahrscheinlich nicht wählen gehen. Hier kommt die „Kunst“ der politischen Meinungsforschung ins Spiel. Die besten Meinungsforscher sind die Organisationen, die Umfragefragen und Analysemodelle entwickeln können, die die Spreu vom Weizen trennen und nur die Antworten der wahrscheinlichsten Wähler isolieren [Quelle: Zukin ]. Denn in der Politik zählt Ihre Meinung nur, wenn Sie tatsächlich wählen.

Jedes Meinungsforschungsinstitut hat sein eigenes System zur Identifizierung und Gewichtung wahrscheinlicher Wähler, aber häufige Fragen könnten sein:

Nicht alle politischen Umfragen werden verwendet, um den Ausgang von Wahlen vorherzusagen. Manchmal wollen Meinungsforscher die öffentliche Meinung zu verschiedenen politischen Themen einschätzen, oft in dem Versuch, die Meinungen verschiedener demografischer Gruppen zu vergleichen: alt vs. jung, Demokrat vs. Republikaner, schwarz vs. weiß. In diesem Fall streben Meinungsforscher keine absolut repräsentative Stichprobe an. Stattdessen verwenden sie ein Oversampling , um eine Stichprobe zu erstellen, die eine gleiche Anzahl von Befragten aus jeder demografischen Gruppe umfasst. Wenn Sie beispielsweise die Einstellungen von weißen und schwarzen Wählern zu einem politischen Thema befragen möchten, müssten Sie schwarze Haushalte überabtasten, da eine zufällige Stichprobe nur 10 bis 15 Prozent schwarze Befragte umfassen würde.

Umfragen verlassen

Haben Sie sich jemals gefragt, wie Nachrichtenorganisationen den Gewinner einer Wahl vorhersagen können, bevor die Wahllokale geschlossen sind? Das liegt daran, dass politische Meinungsforschungsinstitute eine Armee von Feldforschern aussenden, um die Wähler zu fragen, wen sie gewählt haben und warum. Die Ergebnisse dieser Ausgangsumfragen werden in Echtzeit gesammelt und mit dem National Election Pool, einem Konsortium der großen Fernsehnachrichtenagenturen, geteilt [Quelle: Edison Research ].

Ich wurde noch nie von einer öffentlichen Meinungsumfrage kontaktiert, und ehrlich gesagt bin ich ein wenig verletzt. Zählt meine gebildete und (offensichtlich) faszinierende Meinung nichts? Bei der Recherche zu diesem Artikel stieß ich auf die folgende Schätzung der Anzahl der jedes Jahr durchgeführten Umfragen und der Anzahl der kontaktierten Personen. Wenn jedes Jahr ungefähr 2.500 nationale Umfragen durchgeführt werden und jede Umfrage 1.000 Teilnehmer kontaktiert, dann können nur 2.500.000 der 200 Millionen Erwachsenen des Landes jedes Jahr teilnehmen. Das gibt mir eine Chance von 1 zu 100, einen Anruf von Gallup zu erhalten. Bis dahin bleibe ich bei meiner Antwort, jedes Mal, wenn ich die neusten Umfrageergebnisse sehe, die behaupten, die Meinung aller Amerikaner zu repräsentieren: "Nun, niemand hat mich gefragt."

Zum Thema passende Artikel

Quellen

Ursprünglich veröffentlicht: 24. April 2012