
Sie würden jetzt denken, dass wir eindeutig sagen könnten, was was verursacht. Aber die Frage nach der Ursache, die Wissenschaft und Philosophie seit ihren Anfängen verfolgt, verfolgt uns aus zahlreichen Gründen immer noch auf den Fersen. Menschen sind evolutionär dazu veranlagt, Muster zu sehen, und psychologisch geneigt, Informationen zu sammeln, die bereits bestehende Ansichten stützen, eine Eigenschaft, die als Bestätigungsverzerrung bekannt ist . Wir verwechseln Zufall mit Korrelation und Korrelation mit Kausalität.
Damit A B verursacht, neigen wir dazu zu sagen, dass A mindestens vor B liegen muss, die beiden kovariieren (zusammen variieren) und keine konkurrierende Erklärung die Kovarianz von A und B besser erklären kann. Für sich genommen jedoch diese drei Anforderungen können keine Ursache beweisen; Sie sind, wie die Philosophen sagen, notwendig, aber nicht ausreichend. Jedenfalls sind nicht alle damit einverstanden.
Apropos Philosophen, David Hume argumentierte, dass Kausalität in keinem beweisbaren Sinne existiert. Karl Popper und die Falsifikationisten behaupteten, dass wir eine Beziehung nicht beweisen, sondern nur widerlegen können, was erklärt, warum statistische Analysen nicht versuchen, eine Korrelation zu beweisen; Stattdessen ziehen sie eine doppelte Verneinung und widerlegen, dass die Daten nicht korreliert sind, ein Prozess, der als Ablehnung der Nullhypothese bekannt ist .
Angesichts solcher Überlegungen müssen Wissenschaftler ihre Experimente sorgfältig planen und kontrollieren , um Vorurteile, Zirkelschlüsse, sich selbst erfüllende Prophezeiungen und verborgene Variablen auszumerzen. Sie müssen die Anforderungen und Grenzen der verwendeten Methoden respektieren, möglichst aus repräsentativen Proben schöpfen und ihre Ergebnisse nicht überbewerten.
Bereit, über 10 Fälle zu lesen, in denen das nicht so einfach war?
- Der Ärger mit Henry (und Hawthorne)
- Setzen Sie immer auf Schwarz?
- Die heiße Hand und die Affenpfote
- Hormonelles Ungleichgewicht
- Super Bowl-Börsen-Shuffle
- Big Data, wenig Klarheit
- Mindestlohn gleich maximaler Arbeitslosigkeit
- Frühstück schlägt Fettleibigkeit, Abendessen verweigert Drogen
- Der selbstmörderische Sex
- Impfung Ärger
10: Der Ärger mit Henry (und Hawthorne)

Menschen sind ein Schmerz für die Forschung. Sie reagieren nicht nur auf den untersuchten Stimulus, sondern auch auf das Experiment selbst. Forscher versuchen heute, Experimente zu entwerfen, um solche Faktoren zu kontrollieren, aber das war nicht immer der Fall.
Nehmen Sie die Hawthorne-Werke in Cicero, Illinois. In einer Reihe von Experimenten von 1924 bis 1932 untersuchten Forscher die Auswirkungen auf die Produktivität der Arbeiter, die mit der Veränderung der Umgebung der Fabrik in Illinois verbunden waren, darunter die Änderung der Lichtverhältnisse , das Aufräumen des Ortes und das Verschieben von Arbeitsplätzen. Gerade als sie dachten, etwas auf der Spur zu sein, bemerkten sie ein Problem: Die beobachteten Produktivitätssteigerungen ließen fast sofort nach, als die Forscher das Werk verließen, was darauf hindeutet, dass das Wissen der Arbeiter über das Experiment, nicht die Änderungen der Forscher, das Experiment angeheizt hatte Schub. Forscher nennen dieses Phänomen immer noch den Hawthorne-Effekt .
Ein verwandtes Konzept, der John-Henry-Effekt , tritt auf, wenn Mitglieder einer Kontrollgruppe versuchen, die Versuchsgruppe zu schlagen, indem sie ihre Bemühungen auf Hochtouren treiben. Sie müssen nichts von dem Experiment wissen; Sie müssen nur sehen, wie eine Gruppe neue Werkzeuge oder zusätzliche Anweisungen erhält. Wie der legendäre Stahlfahrer wollen sie ihr Können unter Beweis stellen und sich Respekt verdienen [Quellen: Saretsky ; Vogt ].
9: Setzen Sie immer auf Schwarz?

Die Titelfiguren von Tom Stoppards Film „Rosencrantz and Guildenstern Are Dead“ beginnen den Film verblüfft, verwirrt und schließlich verängstigt, als jeder von 157 aufeinanderfolgenden Münzwürfen Kopf zeigt. Guildensterns Erklärungen für dieses Phänomen reichen von Zeitschleifen bis zu „einer spektakulären Bestätigung des Prinzips, dass jede einzelne Münze, einzeln gedreht, ebenso wahrscheinlich Kopf wie Zahl fallen lässt … “
Die Evolution hat den Menschen dazu gebracht, Muster zu sehen, und unsere Fähigkeit, diesen Drang richtig zu verarbeiten, scheint kurzzuschließen, je länger wir mit dem Spielen verbringen . Wir können rational akzeptieren, dass unabhängige Ereignisse wie Münzwürfe die gleichen Chancen haben, egal wie oft Sie sie ausführen. Aber wir betrachten diese Ereignisse auch, weniger rational, als Streaks, die falsche mentale Korrelationen zwischen randomisierten Ereignissen herstellen. Wenn wir die Vergangenheit als Vorspiel betrachten, denken wir immer wieder, dass der nächste Schlag Zahl sein sollte.
Statistiker nennen dies den Irrtum des Spielers , auch bekannt als Monte-Carlo-Irrtum , nach einem besonders anschaulichen Beispiel, das in diesem berühmten Ferienort Monaco vorkommt. Im Sommer 1913 beobachteten die Wettenden mit wachsendem Erstaunen, wie das Rouletterad eines Casinos 26 Mal hintereinander auf Schwarz landete. Entflammt von der Gewissheit, dass Rot "fällig" war, ließen die Spieler ihre Chips fallen. Das Casino machte eine Münze [Quellen: Lehrer ; Oppenheimer und Monin ; Vogt ].
8: Die heiße Hand und die Affenpfote

Keine Diskussion über Streaks, magisches Denken oder falsche Ursachen wäre vollständig, ohne die Sportseiten durchzublättern. Herausragende Sportsaisons entstehen aus einem so mysteriösen Zusammenspiel von Faktoren – natürliches Können, Training, Selbstvertrauen, der gelegentliche X-Faktor – dass wir uns Muster in der Leistung vorstellen, obwohl Studien Streak-Schießen und „erfolgreichen“ Aberglauben wiederholt als alles andere als imaginär ablehnen .
Der Glaube an Streaks oder Einbrüche impliziert, dass Erfolg Erfolg „verursacht“ und Misserfolg Misserfolg „verursacht“ oder, vielleicht vernünftiger, dass Schwankungen in einem gemeinsamen Faktor, wie z. B. Vertrauen, beides verursachen. Aber eine Studie nach der anderen bestätigt dies nicht [Quellen: Gilovich et al. ; Tversky und Gilovich ]. Dasselbe gilt für Aberglauben , obwohl das Kevin Rhomberg von den Cleveland Indians nicht davon abhielt, sich zu weigern, auf dem Spielfeld nach rechts abzubiegen, oder Bruce Gardiner, Zentrum der Senatoren von Ottawa, seinen Hockeyschläger in die Toilette tauchte, um den gelegentlichen Einbruch zu brechen [ Quelle: Trex ].
Auch der Sophomore-Einbruch entsteht typischerweise aus einem zu guten ersten Jahr. Leistungsschwankungen tendieren dazu, sich langfristig auszugleichen, ein Phänomen, das Statistiker Regression zum Mittelwert nennen . Im Sport wird diese Mittelwertbildung durch den Gegner unterstützt, der sich anpasst, um den erfolgreichen Fähigkeiten des neuen Spielers entgegenzuwirken.
7: Hormonelles Ungleichgewicht

Randomisierte kontrollierte Studien sind der Goldstandard in der Statistik, aber manchmal – zum Beispiel in der Epidemiologie – zwingen ethische und praktische Überlegungen Forscher dazu, verfügbare Fälle zu analysieren. Leider riskieren solche Beobachtungsstudien Verzerrungen, versteckte Variablen und, am schlimmsten, eine Studiengruppe, die möglicherweise nicht die Bevölkerung als Ganzes widerspiegelt. Die Untersuchung einer repräsentativen Stichprobe ist von entscheidender Bedeutung; Es ermöglicht den Forschern, die Ergebnisse auf Personen außerhalb der Studie anzuwenden, wie den Rest von uns.
Ein typisches Beispiel: Hormonersatztherapie (HRT). Abgesehen von der Behandlung von Symptomen im Zusammenhang mit der Menopause wurde es dank einer vielbeachteten Beobachtungsstudie aus dem Jahr 1991 einst dafür gelobt, dass es das Risiko einer koronaren Herzkrankheit (KHK) potenziell senkt [Quelle: Stampfer und Colditz ]. Spätere randomisierte kontrollierte Studien, einschließlich der groß angelegten Women's Health Initiative, zeigten jedoch entweder eine negative oder eine statistisch nicht signifikante Beziehung zwischen HET und KHK [Quellen: Lawlor et al. ; New York Times ].
Warum der Unterschied? Zum einen kommen Frauen, die HRT anwenden, tendenziell aus höheren sozioökonomischen Schichten und erhalten eine bessere Ernährung und Bewegung – ein versteckter erklärender Zusammenhang, der in der Beobachtungsstudie nicht vollständig berücksichtigt wurde [Quelle: Lawlor et al. ].
6: Super Bowl Stock Market Shuffle

1978 machte sich der Sportreporter und Kolumnist Leonard Koppett über die Verwirrung zwischen Kausalität und Korrelation lustig, indem er ironisch behauptete, dass die Ergebnisse des Super Bowl den Aktienmarkt vorhersagen könnten . Es ging nach hinten los: Die Leute glaubten ihm nicht nur, sondern es funktionierte – mit erschreckender Häufigkeit.
Der Vorschlag lautete wie folgt: Wenn eines der 16 ursprünglichen Teams der National Football League – die es vor der Fusion der NFL mit der American Football League im Jahr 1966 gab – den Super Bowl gewinnen würde, würde die Börse im folgenden Jahr höher schließen als zuvor der vorhergehende 31. Dezember. Wenn ein ehemaliges AFL-Team gewinnen würde, würde es untergehen [Quellen: Koppett ; Koppett ; Koppett ; Koppett ; Zweig ].
Von 1967 bis 1978 ging Koppetts System 12 für 12; Bis 1997 hatte es eine Erfolgsquote von 95 Prozent. Es stolperte 1998 und 1999, als AFL-Absolventen die Denver Broncos gewannen und der Markt stieg [Quellen: Koppett ; Koppett ; Koppett ; Kopett ].
Einige haben argumentiert, dass das Muster existiert, angetrieben vom Glauben; es funktioniert, sagen sie, weil Investoren glauben, dass es funktioniert, oder weil sie glauben, dass andere Investoren es glauben. Diese Vorstellung, obwohl sie auf regressive Weise klug ist, erklärt kaum die 12 Jahre erfolgreicher Korrelationen vor Kopetts Artikel. Andere argumentieren, dass ein relevanteres Muster im groß angelegten Aufwärtstrend des Aktienmarktes liegt, abgesehen von einigen kurzfristigen größeren und kleineren Schwankungen, und der Tatsache, dass ein ursprüngliches NFL-Team jeden Super Bowl von 1984 bis 1998 gewann [Quelle: Norris ].
5: Big Data, wenig Klarheit

Big Data – der Prozess der Suche nach Mustern in Datensätzen, die so groß sind, dass sie traditionellen Analysemethoden widerstehen – erregt heutzutage großes Aufsehen in den Vorstandsetagen [Quelle: Arthur ]. Aber ist größer immer besser?
Es ist eine Regel, die den meisten Forschern in ihrem ersten Statistikkurs eingetrichtert wurde: Wenn Sie auf ein Meer von Daten stoßen, widerstehen Sie dem Drang, auf eine Angelexpedition zu gehen . Bei genügend Daten, Geduld und methodischem Spielraum sind Korrelationen fast unvermeidlich, wenn auch unethisch und weitgehend nutzlos.
Schließlich impliziert die bloße Korrelation zwischen zwei Variablen keine Kausalität; es deutet in vielen Fällen auch nicht auf eine große Beziehung hin. Zum einen können Forscher statistische Korrelationsmaße nicht einfach so verwenden; jede enthält bestimmte Annahmen und Einschränkungen, die Fischereiexpeditionen zu oft ignorieren, ganz zu schweigen von den versteckten Variablen, Stichprobenproblemen und Interpretationsfehlern, die eine schlecht konzipierte Studie verderben können.
Zugegeben, Big Data hat seinen Nutzen. Die Bestandskontrolle lebt von der Entdeckung von Einkaufsmustern, wie mysteriös ihre zugrunde liegenden Ursachen auch sein mögen. Um ein etwas gruseliges Beispiel zu nennen: Target hat Kaufmuster verwendet, um schwangere Kunden zu identifizieren und ihnen dann gezielte Coupons zu schicken [Quellen: Duhigg ; Hügel ; Taylor ]. Genießen Sie also diese Prämienkarte – und 10 Prozent Rabatt auf Ihre vorgeburtlichen Vitamine – aber erwarten Sie nicht zu viel von Big Data in der Kausalitätsabteilung.
4: Mindestlohn gleich maximaler Arbeitslosigkeit

Jedes Thema, das mit Geld zu tun hat, ist zwangsläufig zutiefst spaltend und hochgradig politisiert, und Mindestlohnerhöhungen sind keine Ausnahme. Die Argumente sind vielfältig und komplex, aber im Wesentlichen behauptet eine Seite, dass ein höherer Mindestlohn Unternehmen schadet, was die Verfügbarkeit von Arbeitsplätzen verringert, was den Armen schadet. Die andere Seite antwortet, dass es wenig Beweise für diese Behauptung gibt und dass die 3,6 Millionen Amerikaner, die zum oder unter dem Mindestlohn arbeiten, von dem einige argumentieren, dass er kein existenzsichernder Lohn sei, würden von einer solchen Erhöhung profitieren. Sie argumentieren, dass der bundesstaatliche Mindestlohn ($7,25 pro Stunde im Dezember 2013) inflationsbereinigt in den letzten 40 Jahren bergab gerutscht ist [Quellen: Bureau of Labor Statistics ; Irwin ].
Wie George Bernard Shaw Berichten zufolge witzelte: „Wenn alle Ökonomen aneinandergereiht wären, würden sie nie zu einem Ergebnis kommen“, und die Mindestlohndebatte scheint dies zu bestätigen [Quelle: Ridgers . Für jeden Analysten, der sagt, dass Mindestlohnerhöhungen Arbeitsplätze vertreiben, gibt es einen anderen, der gegen eine solche Korrelation argumentiert [Quellen: Baskaya und Rubinstein ; Karte und Krüger ].
Am Ende teilen beide Seiten ein grundlegendes Problem, nämlich die Fülle anekdotischer Beweise, auf die sich viele ihrer Redner zur Unterstützung verlassen. Geschichten aus zweiter Hand und ausgesuchte Daten sorgen auf jeder Party für schwachen Tee, selbst wenn sie in hübschen Balkendiagrammen präsentiert werden.
3: Frühstück schlägt Fettleibigkeit, Abendessen verweigert Drogen

Between books, drugs and surgeries, weight loss in the United States is a $20-billion-per-year industry, with 108 million Americans bellying up to the weight-loss bar each year [source: ABC News]. Not surprisingly, weight loss studies -- good, bad or ugly -- get a lot of press in the U.S.
Take the popular idea that eating breakfast beats obesity, a sugar-frosted nugget derived from two main studies: One, a 1992 Vanderbilt University randomized controlled study, showed that reversing normal breakfast habits, whether by eating or not eating, correlated with weight loss; the other, a 2002 observational study by the National Weight Control Registry, correlated breakfast-eating with successful weight-losers -- which is not the same as correlating it with weight loss [sources: Brown et al.; O'Connor; Schlundt et al.; Wyatt et al.].
Leider gelang es der NWCR-Studie nicht, andere Faktoren zu kontrollieren – oder tatsächlich einen kausalen Zusammenhang aus ihrer Korrelation herzustellen. Zum Beispiel könnte eine Person, die abnehmen möchte , mehr trainieren, frühstücken oder auf Vollwertprotein setzen, aber ohne ein experimentelles Design, das in der Lage ist, kausale Zusammenhänge einzuwählen, sind solche Verhaltensweisen nichts anderes als häufig auftretende Merkmale [Quellen: Brown et al. ; O’Connor ].
Ein ähnliches Problem plagt die zahlreichen Studien, die Familienessen mit einem verringerten Risiko für Drogenabhängigkeit bei Teenagern in Verbindung bringen. Obwohl diese Studien für ihre einfache, ansprechende Strategie attraktiv sind, können sie häufig keine verwandten Faktoren wie starke familiäre Bindungen oder eine tiefe elterliche Beteiligung am Leben eines Kindes kontrollieren [Quelle: Bialik ].
2: Der selbstmörderische Sex

Wir hören oft, dass Männer, insbesondere junge Männer, eher Selbstmord begehen als Frauen. In Wahrheit nehmen solche Aussagen an empirischer Verallgemeinerung teil – dem Akt, eine breite Aussage über ein gemeinsames Muster zu machen, ohne zu versuchen, es zu erklären – und maskieren eine Reihe bekannter und potenzieller Störfaktoren.
Nehmen Sie zum Beispiel die Tatsache, dass Frauen dreimal so viele Suizidversuche unternehmen wie Männer. Wie kann dann eine höhere Korrelation zwischen dem anderen Geschlecht und Selbstmord bestehen? Die Antwort liegt in der Erfolgsrate, die durch Unterschiede in der Methodik beeinflusst wird: Frauen greifen zu Pillen, während Männer eher Waffen bevorzugen [Quelle: O'Connell ].
Selbst wenn wir solche Störfaktoren beseitigen könnten, würde die Tatsache bestehen bleiben, dass Männlichkeit per se keine Ursache ist. Um den Trend zu erklären, müssen wir stattdessen Faktoren identifizieren, die Männern gemeinsam sind oder zumindest suizidgefährdet sind. Das Gleiche gilt für die vergleichsweise hohen Suizidraten bei geschiedenen Männern. Scheidung führt nicht dazu, dass Männer Selbstmord begehen; wenn überhaupt, versteckt sich die kausale Variable zwischen verwandten Faktoren wie Isolation, Depression, einem Gefühl der Ohnmacht, finanziellem Stress oder Sorgerechtsverlust [Quellen: Kposowa ; Kposowa ; Reuters ].
1: Impfverärgerung

Keine Korrelations-/Ursachenliste wäre vollständig, ohne die elterlichen Bedenken hinsichtlich der Impfsicherheit zu diskutieren , die in der von Prominenten wie Jenny McCarthy populären Idee verwurzelt sind, dass Impfungen gegen Masern, Mumps und Röteln (MMR) ursächlich mit Störungen des Autismus-Spektrums verbunden sind. Obwohl die medizinische Gemeinschaft das Andrew Wakefield-Papier von 1998 entlarvte, das die Idee inspirierte, und trotz nachfolgender Studien, die selbst bei mehreren Impfungen keinen kausalen Zusammenhang zeigten, haben einige Eltern weiterhin Angst vor einer Verbindung mit Autismus oder anderen impfbedingten Gefahren [Quellen: The Lancet ; Parken ; Sifferlin ; Szabo ].
Es stimmt zwar, dass kein Impfstoff zu 100 Prozent harmlos ist, aber der Glaube an diesen kausalen Zusammenhang entspringt hauptsächlich der natürlichen Besorgnis der Eltern, belastet durch Verwirrung, angeheizt durch anekdotische Beweise und beeinflusst von Bestätigungsverzerrungen oder „wenn ich es nicht geglaubt hätte, würde ich es tun“. Ich habe es nicht gesehen.“ Die Verwirrung wird durch die Tatsache weiter angeheizt, dass Eltern und Ärzte dazu neigen, Autismus-Symptome spät zu erkennen, etwa in dem Alter, in dem Kinder viele Impfungen erhalten. Tatsächlich ist der Ausbruch von Autismus ziemlich komplex und folgt mehr als einem Muster. Tatsächlich zeigen Studien jetzt, dass der Beginn bereits im Alter von 6-12 Monaten beginnen kann [Quellen: CDC ; Johnson und Schulz ; Mandell et al. ; NIH ; Ozonoff et al. ].
Es ist kein harmloses Missverständnis. Im Jahr 2011 berichtete das Time Magazine, dass 13 Prozent der Eltern die Impfungen ihrer Kinder ausgelassen, verzögert oder aufgeteilt haben; in einigen ländlichen Gebieten schoss diese Zahl auf 20 bis 50 Prozent hoch. Inzwischen, 15 Jahre nach Beginn dieser Panik, berichteten medizinische Zentren über Ausbrüche von Keuchhusten und Masern. Ob diese Korrespondenz zufällig, korrelativ oder kausal ist, ist eine Überlegung wert [Quellen: O'Connor ; Parken ; parken ].
Ursprünglich veröffentlicht: 23. Dezember 2013
Häufig gestellte Fragen zu Korrelation und Kausalität
Was ist ein Beispiel für Korrelation, aber nicht für Kausalität?
Was ist der Unterschied zwischen Korrelation und Kausalität?
Was bedeutet Korrelation ist nicht Kausalität?
Was ist der Hauptunterschied zwischen Korrelation und Kausalität?
Viele weitere Informationen
Anmerkung des Autors: 10 Korrelationen, die keine Kausalitäten sind
So sehr ich schlechtes experimentelles Design, blindes Vertrauen in Statistiken und sensationslüsterne Wissenschaftsberichterstattung verabscheue, ist es erwähnenswert, dass starke Korrelationen, obwohl sie allein nicht ausreichen, um die Ursache zu beweisen, oft auf Bereiche hinweisen, die es wert sind, untersucht zu werden. Natürlich meine ich mit „Korrelationen“ nicht Autokorrelationen, verwirrende Variablen oder andere Artefakte von schlechtem Design oder schlecht verstandenen methodischen Anforderungen und Einschränkungen; dennoch kann das Internet den Slogan „Korrelation bedeutet nicht Kausalität“ vielleicht für eine Weile aufgeben oder zumindest etwas selektiver in seiner Anwendung werden.
Zum Thema passende Artikel
- Sind dumme Menschen glücklicher?
- Gibt es in Ländern mit strengeren Waffengesetzen wirklich weniger Kriminalität oder weniger Tötungsdelikte?
- Gibt es einen Zusammenhang zwischen Benzinpreisen und Fettleibigkeit?
- Gibt es einen Zusammenhang zwischen Glück und CO2-Emissionen?
Quellen
- ABC News. "100 Million Dieters, $20 Billion: The Weight-Loss Industry by the Numbers." May 8, 2012. (Dec. 18, 2013) http://abcnews.go.com/Health/100-million-dieters-20-billion-weight-loss-industry/story?id=16297197
- Arthur, Lisa. "What is Big Data?" Forbes. Aug. 15, 2013. (Dec. 18, 2013) http://www.forbes.com/sites/lisaarthur/2013/08/15/what-is-big-data/
- Baskaya, Yusuf Soner, and Yona Rubinstein. "Using Federal Minimum Wages to Identify the Impact of Minimum Wages on Employment and Earnings Across the US States." London School of Economics and Political Science. 2011. (Dec. 18, 2013) http://businessinnovation.berkeley.edu/williamsonseminar/rubinstein110311.pdf
- Bialik, Carl. "What Family Dinners Can and Can't Do for Teens." The Wall Street Journal. Nov. 29, 2013. (Dec. 18, 2013) http://blogs.wsj.com/numbersguy/what-family-dinners-can-and-cant-do-for-teens-1302/
- Brown Andrew W., Michelle M, Bohan Brown and David B. Allison. "Belief Beyond the Evidence: Using the Proposed Effect of Breakfast on Obesity to Show 2 Practices that Distort Scientific Evidence." American Journal of Clinical Nutrition. Vol. 98, no. 5. Page 1298. (Dec. 18, 2013) http://ajcn.nutrition.org/content/early/2013/09/04/ajcn.113.064410
- Bureau of Labor Statistics. "Minimum Wage Workers Account for 4.7 Percent of Hourly Paid Workers in 2012." U. S. Department of Labor. March 25, 2013. (Dec. 18, 2013) http://www.bls.gov/opub/ted/2013/ted_20130325.htm
- Card, David and Alan B. Krueger. "Myth and Measurement: The New Economics of the Minimum Wage." Princeton University Press. 1997. (Dec. 18, 2013) http://press.princeton.edu/titles/5632.html
- Centers for Disease Control and Prevention. "Recommended Immunization Schedule for Persons Age 0 through 18 Years: United States, 2013." (Dec. 18, 2013) http://www.cdc.gov/vaccines/schedules/hcp/imz/child-adolescent.html
- Duhigg, Charles. "How Companies Learn Your Secrets." The New York Times. Feb. 16, 2012. (Dec. 18, 2013) http://www.nytimes.com/2012/02/19/magazine/shopping-habits.html?pagewanted=1&_r=2&hp&
- ESPN. "Michael Jordan Stats." (Dec. 18, 2013) http://espn.go.com/nba/player/stats/_/id/1035/michael-jordan
- Gilovich, Thomas, Robert Vallone und Amos Tversky. "Die heiße Hand im Basketball: Über die falsche Wahrnehmung zufälliger Sequenzen." Kognitive Psychologie. Vol. 17. Seite 295. (18. Dezember 2013) http://psych.cornell.edu/sites/default/files/Gilo.Vallone.Tversky.pdf
- Hügel, Kaschmir. "Wie Target herausfand, dass ein junges Mädchen schwanger war, bevor ihr Vater es tat." Forbes. 16. Feb. 2012. (18. Dez. 2013) http://www.forbes.com/sites/kashmirhill/2012/02/16/how-target-figured-out-a-teen-girl-was-pregnant -bevor-ihr-vater-tat/
- Reifendaten. "Liga-Durchschnittsstatistik." (18. Dezember 2013) http://hoopdata.com/regstats.aspx
- Irwin, Neil. "Die typische amerikanische Familie verdient weniger als 1989." Washington Post. 17. Sept. 2013. (18. Dez. 2013) http://www.washingtonpost.com/blogs/wonkblog/wp/2013/09/17/the-typical-american-family-makes-less-than-it -tat-1989/
- Johnson, Eric O. und Lonni Schultz. "Forward Telescoping Bias im gemeldeten Erkrankungsalter: Ein Beispiel aus dem Zigarettenrauchen." Internationale Zeitschrift für Methoden in der psychiatrischen Forschung. Vol. 14, Nr. 3. Seite 119. (18. Dezember 2013) http://www.ncbi.nlm.nih.gov/pubmed/16389888
- Kopett, Leonard. "Statistiken auf die Spitze treiben." Sportliche Nachrichten. 11. Februar 1978. (18. Dezember 2013) http://www.dartmouth.edu/~chance/chance_news/for_chance_news/ChanceNews13.04/SportingNews.pdf
- Kopett, Leonard. "Wenn die Bullen und die Bären Sie gebüffelt haben, probieren Sie unsere Foxy-Formeln." Sport illustriert. 23. April 1979. (18. Dezember 2013) http://sportsillustrated.cnn.com/vault/article/magazine/MAG1094842/index.htm
- Kopett, Leonard. "Die Super-Bowl-Aktientheorie macht ein Comeback?" (18. Dezember 2013) http://www.dartmouth.edu/~chance/chance_news/for_chance_news/ChanceNews13.04/2002stocks.pdf
- Kopett, Leonard. "Super Bowl-Aktien." (18. Dezember 2013) http://online.wsj.com/public/resources/documents/koppett.pdf
- Kposowa, Augustine J. "Scheidung und Selbstmordrisiko." Journal of Epidemiology & Community Health. Vol. 57. Seite 993. (18. Dez. 2013) http://jech.bmj.com/content/57/12/993.full
- Kposowa, Augustine J. "Familienstand und Selbstmord in der National Longitudinal Mortality Study." Journal of Epidemiology & Community Health. Vol. 54. Seite 254. (18. Dez. 2013) http://jech.bmj.com/content/54/4/254.full
- Die Lanzette. "Retraktion - Ileal-lymphoid-knotige Hyperplasie, unspezifische Kolitis und tiefgreifende Entwicklungsstörung bei Kindern." 2. Februar 2010. (18. Dezember 2013) http://download.thelancet.com/flatcontentassets/pdfs/S0140673610601754.pdf
- Lawlor, Debbie A., George Davey Smith und Shah Ebrahim. "Kommentar: Das Rätsel um Hormonersatz und koronare Herzkrankheit: Ist dies der Tod der beobachtenden Epidemiologie?" Internationale Zeitschrift für Epidemiologie. Vol. 33, Nr. 3. Seite 464. (18. Dezember 2013) http://ije.oxfordjournals.org/content/33/3/464.full#ref-4
- Lehrer, Jona. "Wie wir entscheiden." Houghton Mifflin Harcourt. 2009.
- Mandell, David S., Maytali M. Novak und Cynthia D. Zubritsky. "Faktoren im Zusammenhang mit dem Alter der Diagnose bei Kindern mit Autismus-Spektrum-Störungen." Pädiatrie. Vol. 116, Nr. 6. Seite 1480. (18. Dezember 2013) http://pediatrics.aappublications.org/content/116/6/1480.abstract
- Manson, JoAnn, et al. "Hormontherapie in den Wechseljahren und Gesundheitsergebnisse während der Intervention und verlängerten Poststopp-Phasen der randomisierten Studien der Women's Health Initiative." Zeitschrift der American Medical Association. Vol. 310, Nr. 13. Seite 1353. (18. Dezember 2013) http://jama.jamanetwork.com/article.aspx?articleid=1745676
- Nationales Gesundheitsinstitut. "Was ist eine Autismus-Spektrum-Störung?" (18. Dezember 2013) http://www.nimh.nih.gov/health/topics/autism-spectrum-disorders-pervasive-developmental-disorders/index.shtml
- Die New York Times. "Hormonersatztherapie." (18. Dezember 2013) http://www.nytimes.com/health/guides/specialtopic/hormone-replacement-therapy
- Norris, Floyd. "Der Super Bowl sagt den Markt voraus und umgekehrt." Die New York Times. 24. Januar 1997. (18. Dezember 2013) http://www.nytimes.com/1997/01/24/business/the-super-bowl-predicts-the-market-and-vice-versa.html
- O’Connell, Jeff. „Männersuizide sind in schwierigen Zeiten ein wachsendes Problem.“ Männergesundheit/NBC-Nachrichten. 4. Dez. 2008. (18. Dez. 2013) http://www.nbcnews.com/health/male-suicide-throating-concern-tough-times-1C9456424
- O'Connor, Anahad. „Immer mehr Eltern lassen Kinderimpfungen aus.“ Die New York Times. 29. Nov. 2011. (18. Dez. 2013) http://well.blogs.nytimes.com/2011/11/29/more-parents-skip-childhood-vaccines/?_r=0
- O'Connor, Anahad. "Mythen umgeben Frühstück und Gewicht." New York Times. 10. Sept. 2013. (18. Dez. 2013) http://well.blogs.nytimes.com/2013/09/10/myths-surround-breakfast-and-weight/
- Oppenheimer, Daniel und Benoît Monin. "Der Fehlschluss des rückblickenden Spielers: Unwahrscheinliche Ereignisse, Konstruktion der Vergangenheit und mehrere Universen." Urteil und Entscheidungsfindung. Vol. 4, nr. 5. Seite 326. (18. Dezember 2013) http://web.princeton.edu/sites/opplab/papers/oppenheimermonin09.pdf
- Ozonoff, Sally, Kelly Heung, Robert Byrd, Robin Hansen und Irva Hertz-Picciotto. Der Ausbruch von Autismus: Muster der Symptomentstehung in den ersten Lebensjahren. Autismusforschung. Vol. 1, nr. 6. Seite 320.
- http://www.ncbi.nlm.nih.gov/pmc/articles/PMC2857525/
- Park, Alice. "1 von 10 Eltern lässt Impfungen aus oder verzögert sie." Zeit Magazin. 3. Okt. 2011. (18. Dez. 2013) http://healthland.time.com/2011/10/03/more-than-1-in-10-parents-skip-or-delay-vaccines/
- Park, Alice. „Die Studie, die Impfstoffe mit Autismus in Verbindung bringt, ist ‚betrügerisch‘.“ Time magazine. 6. Januar 2011. (18. Dezember 2013) http://healthland.time.com/2011/01/06/study-linking-vaccines-to-autism-is-fraudulent/
- Park, Madson. "Wo Impfzweifel bestehen." CNN. 20. Okt. 2010. (18. Dez. 2013) http://www.cnn.com/2010/HEALTH/10/20/why.not.vaccinate/
- Ridgers, Bill. "Das Economist Book of Business Quotierungen." John Wiley & Söhne. 2012.
- Saretsky, Gary. "Das OEO-PC-Experiment und der John-Henry-Effekt." Das Phi-Delta Kappan. Vol. 53, Nr. 9. Seite 579. (18. Dezember 2013) http://www.jstor.org/stable/20373317
- Schlundt, David G., James O. Hill, Tracy Sbrocco, Jamie Pope-Cordle und Teresa Sharp. "Die Rolle des Frühstücks bei der Behandlung von Fettleibigkeit: Eine randomisierte klinische Studie." Amerikanisches Journal für klinische Ernährung. Vol. 55, Nr. 3. Seite 645. (18. Dezember 2013) http://ajcn.nutrition.org/content/55/3/645.abstract?sid=2ef145a4-5324-40d0-bead-e669e51756d1
- Shut, Nancy. "Das letzte Wort zur Hormontherapie von der Women's Health Initiative." NPR. 4. Okt. 2013. (18. Dez. 2013) http://www.npr.org/blogs/health/2013/10/04/229171477/the-last-word-on-hormone-therapy-from-the -Frauengesundheitsinitiative
- Sifferlin, Alexandra. "Mehrere Impfungen am selben Tag erhöhen das Autismus-Risiko nicht." Zeit Magazin. 29. März 2013. (18. Dez. 2013) http://healthland.time.com/2013/03/29/multiple-vaccinations-on-same-day-does-not-raise-autism-risk/
- Sport Referenz. "NBA & ABA Jahr für Jahr Spitzenreiter und Rekorde für Punkte pro Spiel." (18. Dezember 2013) http://www.basketball-reference.com/leaders/pts_per_g_yearly.html
- Stampfer Meir J. und Graham A. Colditz. "Östrogenersatztherapie und koronare Herzkrankheit: Eine quantitative Bewertung der epidemiologischen Beweise." Präventive Medizin. Vol. 20, nein. 1. Seite 47. (18. Dezember 2013) http://www.sciencedirect.com/science/article/pii/009174359190006P
- Szabo, Liz. "Vollständiger Impfplan sicher für Kinder, kein Zusammenhang mit Autismus." USA heute. 29. März 2013. (18. Dezember 2013) http://www.usatoday.com/story/news/nation/2013/03/29/vaccine-schedule-autism/2026617/
- Taylor, Chris. "Das schlüpfrige Problem von Big Data in Bezug auf Kausalität vs. Korrelation." Verdrahtet. 15. Juli 2013. (18. Dez. 2013) http://insights.wired.com/profiles/blogs/big-data-s-slippery-issue-of-causation-versus-correlation
- Toporek, Bryan. "Kobe Bryant vs. Michael Jordan: Vergleich der ZIEGE mit dem Geburtstagskind." Bleacher-Bericht. 23. Aug. 2013. (18. Dez. 2013) http://bleacherreport.com/articles/1732165-kobe-bryant-vs-michael-jordan-comparing-the-goat-to-the-birthday-boy
- Trex, Ethan. "Die 10 bizarrsten Sportler-Aberglauben." Das Wall Street Journal. 14. Juli 2009. (18. Dezember 2013) http://online.wsj.com/news/articles/SB124640412099376447
- Tversky, Amos und Thomas Gilovich. "Die kalten Fakten über die 'heiße Hand' im Basketball." In Präferenz, Glaube und Ähnlichkeit: Ausgewählte Schriften von Amos Tversky und Eldar Shafir. (18. Dezember 2013) http://bayes.bgsu.edu/honors/the_hot_hand.pdf
- Vogt, W. Paul. "Wörterbuch für Statistik und Methodik." Salbei. 1993.
- Wyatt, Holly R., Gary K. Grunwald, Cecilia L. Mosca, Mary L. Klem, Rena R. Wing und James O. Hill. "Langfristiger Gewichtsverlust und Frühstück bei Probanden im National Weight Control Registry." Obesity Research Vol. 10, nein. 2. Seite 78. (18. Dez. 2013) http://onlinelibrary.wiley.com/doi/10.1038/oby.2002.13/pdf
- Zweig, Jason. "Super Bowl Indicator: Die geheime Geschichte." Das Wall Street Journal. 28. Januar 2011. (18. Dezember 2013) http://blogs.wsj.com/marketbeat/2011/01/28/super-bowl-indicator-the-secret-history/