Nate Silver

The Signal and the Noise

Why So Many Predictions Fail-but Some Don't

• Gebundenes Buch

Produktbeschreibung

UPDATED FOR 2020 WITH A NEW PREFACE BY NATE SILVER "One of the more momentous books of the decade."-The New York Times Book Review Nate Silver built an innovative system for predicting baseball performance, predicted the 2008 election within a hair's breadth, and became a national sensation as a blogger-all by the time he was thirty. He solidified his standing as the nation's foremost political forecaster with his near perfect prediction of the 2012 election. Silver is the founder and editor in chief of the website FiveThirtyEight. Drawing on his own groundbreaking work, Silver examines the world of prediction, investigating how we can distinguish a true signal from a universe of noisy data. Most predictions fail, often at great cost to society, because most of us have a poor understanding of probability and uncertainty. Both experts and laypeople mistake more confident predictions for more accurate ones. But overconfidence is often the reason for failure. If our appreciation of uncertainty improves, our predictions can get better too. This is the "prediction paradox": The more humility we have about our ability to make predictions, the more successful we can be in planning for the future. In keeping with his own aim to seek truth from data, Silver visits the most successful forecasters in a range of areas, from hurricanes to baseball to global pandemics, from the poker table to the stock market, from Capitol Hill to the NBA. He explains and evaluates how these forecasters think and what bonds they share. What lies behind their success? Are they good-or just lucky? What patterns have they unraveled? And are their forecasts really right? He explores unanticipated commonalities and exposes unexpected juxtapositions. And sometimes, it is not so much how good a prediction is in an absolute sense that matters but how good it is relative to the competition. In other cases, prediction is still a very rudimentary-and dangerous-science. Silver observes that the most accurate forecasters tend to have a superior command of probability, and they tend to be both humble and hardworking. They distinguish the predictable from the unpredictable, and they notice a thousand little details that lead them closer to the truth. Because of their appreciation of probability, they can distinguish the signal from the noise. With everything from the health of the global economy to our ability to fight terrorism dependent on the quality of our predictions, Nate Silver's insights are an essential read.

Produktdetails

• Verlag: Penguin LLC US
• Seitenzahl: 544
• Erscheinungstermin: September 2012
• Englisch
• Abmessung: 241mm x 163mm x 32mm
• Gewicht: 801g
• ISBN-13: 9781594204111
• ISBN-10: 159420411X
• Artikelnr.: 35368503

Autorenporträt

Nate Silver

Rezensionen

Frankfurter Allgemeine Zeitung | Besprechung von 09.12.2012

Kopf oder Zahl

Sind wir Herr über unsere Entscheidungen? Oder längst Opfer allmächtiger Algorithmen? Ausgerechnet Nate Silver, Zukunftsforscher der Stunde, hält die Berechenbarkeit menschlichen Handelns für eine Illusion

Alle fünf Jahre nehmen die Bürger der Vereinigten Staaten an einem landesweiten philosophischen Experiment teil. Etwa sechzig Prozent der erwachsenen Staatsbürger versuchen durch ihre persönliche Stimmabgabe herauszufinden, ob ihre freie Entscheidung notwendig ist, um zu ermitteln, wer in den kommenden Jahren der Präsident ihres Landes sein soll. In den vergangenen beiden Präsidentschaftswahlen hat sich das altmodische Ritual als relativ überflüssig erwiesen: Man hätte auch einfach Nate Silver fragen können.

Weil er in seinem "New York Times"-Blog "Five Thirty Eight" die Wahlergebnisse in 50 von 50 Bundesstaaten richtig prognostizierte, gilt der vierunddreißigjährige Statistiker als heimlicher Gewinner der Wahl. Seitdem wird Silver, der schon 2008 die Ergebnisse in 49 von 50 Staaten richtig vorhergesehen hatte, nicht nur persönlich mit unvermeidlichen Ehrentiteln ("König der Quants", "Amerikas Präsident der Daten", "Gott der Algorithmen") gefeiert; sein Erfolg gilt auch als Triumph der Mathematik gegen die pundits, jene meinungsstarken Fernsehexperten, die ihre Prophezeiungen vor der Wahl aus einer Mischung aus Eitelkeit und Ideologie zusammenbrauten. Und all jenen konservativen Stimmungsmachern, die womöglich selbst daran geglaubt hatten, dass Silvers Zahlen nur sein demokratisches Wunschdenken zum Ausdruck bringen, bleibt jetzt nur, sich über dessen simple Methodik zu wundern. Denn im Prinzip hat Silver nichts anderes getan, als die Durchschnittswerte der wichtigsten Umfragen zu errechnen. Im Gegensatz zu jenen Kommentatoren aber, welche, als hätten sie noch nie vom Prinzip der Mehrheitswahl gehört, die Ausgeglichenheit in nationalen Umfragen als Indikator eines Kopf-an-Kopf-Rennens interpretierten, zog er die richtigen Schlüsse aus den Zahlen. Womöglich besteht darin tatsächlich die größte Frechheit Silvers: dass seinen Berechnungen keine geheime Formel zugrunde lag.

Jenseits aller Genugtuung aber, über diesen Sieg der Nüchternheit gegen das Geschrei, den Sieg auch der Analyse gegen die Meinung, jenseits dieses unerwarteten Schimmers der Vernunft in den oft so krawallorientierten amerikanischen Medien, scheint Silvers Präzision eine derzeit verbreitete Sorge zu bestätigen: die Angst um den Kontrollverlust der Individuen angesichts immer raffinierterer Datenprofile. Die Vorstellung, dass die Autonomie menschlicher Entscheidungen durch immer perfektere Algorithmen aufgehoben wird, ist heute als Utopie genauso verbreitet wie ihr Gegenteil. Wenn Bürger in der Wahlkabine nicht mehr als freie Menschen entscheiden, sondern nur noch das Opfer ihrer eigenen, berechenbaren Prädispositionen (wie Wohnort, Alter, Familienstand, Einkommen, Hautfarbe, Bildung, Musikgeschmack, Leseliste) sind, dann ist das erst der Anfang ihrer umfassenden Entmündigung.

Nicht alle aber weinen dem Ende menschlicher Undurchschaubarkeit nach: Das Schlagwort "Big Data", das derzeit die ganze IT-Branche verrückt macht, beinhaltet das Versprechen, dass unerschöpfliche Datenfelder brachliegen, die nur auf die richtigen Techniken warten, um eingefahren, analysiert und kommerziell verwertet zu werden. Der "Wired"-Chefredakteur Chris Anderson hat angesichts des "Zeitalters der Petabytes" bereits vor vier Jahren das Ende aller Theorie verkündet. Heute werden Tag für Tag Daten im Exabyte-Bereich produziert, alleine die Menge der täglichen Tweets ergibt zwölf Terrabytes. Big Data mache es möglich, verspricht etwa die Firma IBM ihren Kunden, "Fragen zu beantworten, die bisher unerreichbar waren".

Zur Enttäuschung all dieser Propheten aber, weist ausgerechnet Silver solche Allmachtsphantasien zurück. Sein kurz vor der Wahl erschienenes Buch "The Signal and the Noise" ist alles andere als eine Bedienungsanleitung für idiotensichere Prognosen. Nicht zum Spaß lautet sein Untertitel: "Warum so viele Vorhersagen scheitern - und manche nicht". Dabei hat Silver natürlich keine grundsätzlichen Einwände gegen Prognosen. Aber im Unterschied zu vielen anderen Naturwissenschaftlern weiß er um die Illusion einer objektiven Wissenschaft. Denn erst indem wir den Daten eine Bedeutung geben, werden sie zum "Signal"; alles andere ist Rauschen. "Zahlen können nicht für sich selbst sprechen", schreibt Silver. "Wir sprechen für sie. Wir laden sie mit Bedeutung auf." Und im Gegensatz zu vielen Pressesprechern seines Fachs denkt er gar nicht daran, die Schwächen seines Fachs zu unterschlagen: "Wir können niemals perfekte objektive Vorhersagen machen. Sie werden immer von unserer subjektiven Sicht der Dinge geprägt sein." Skepsis ist die erste Tugend des Statistikers: Nur wer sich all der Voraussetzungen und Überzeugungen bewusst ist, die in seine Modelle eingehen, sagt Silver, kann zu brauchbaren Ergebnissen kommen.

Silvers Chronik der Pleiten, Pech und Pannen macht deutlich, wie groß die Unwägbarkeiten der Vorhersagen sind, und zwar in so unterschiedlichen Bereichen wie Wetter, Erdbeben, Baseball, Poker oder Politik. Am härtesten geht er mit dem Versagen der Prognosen in der Wirtschaft ins Gericht, die Finanzkrise liefert erwartungsgemäß umfangreiches Material. Und trotzdem hat es nichts mit Rechthaberei zu tun, wenn er, in der ersten Hälfte seines Buches, über all die Blindheiten und Taschenspielertricks seiner Kollegen spricht, über systematische und absichtliche Fehler. Über den Unterschied zwischen Vorhersagen und Prognosen, zwischen akkuraten und präzisen Aussagen, zwischen zu spezifischen und zu unspezifischen Modellen. Es geht ihm um die Verbesserung der Methoden, deren Qualität im Zweifelsfall nicht daran zu erkennen ist, ob sich eine Prophezeiung am Ende auch erfüllt. Denn natürlich ist eine erfolgreiche Vorhersage, das wissen wir seit Krake Paul, kein Indiz für deren Verlässlichkeit. Oft aber kommen die Zweifel an den Unzulänglichkeiten eines Modells erst, wenn es nicht mehr funktioniert.

Jahrelang etwa galt der Gewinner des Super Bowl als wichtiger Indikator für den amerikanischen Aktienmarkt. Bis 1997 stiegen beziehungsweise fielen die Kurse, je nachdem, ob ein Team der National Football League (NFL) oder der American Football League (AFL) die Meisterschaft gewann, immerhin in 28 von 31 Jahren. Erst als sich ab 1998 die Korrelation umdrehte, wurde offensichtlich, dass sich die Trefferquote nur dem Zufall verdankte. Selbst wenn seriöse Ökonomen diesen Wert nie ernst genommen haben, schreibt Silver, glauben auch heute noch viele, dass ihre Prognosen besser werden, indem man sie mit möglichst vielen Variablen anreichert. Und wenn der Wettbewerb um die Erschließung der unentdeckten Datenmeere erst richtig losgeht, wird die Prahlerei über vermeintliche Geheimzusammenhänge vermutlich kaum zurückhaltender.

Dass Silver den Visionen solcher Zahlenmagie misstraut, das liegt nicht nur daran, dass er viele der Fehler, die er beschreibt, auch selbst gemacht hat. Eine Zeitlang verdiente er sein Geld als professioneller Pokerspieler, bis er erkannte, dass auch die besten Wahrscheinlichkeitsrechnungen das Pech nicht ausschließen können. Vor allem aber verdankt sich seine gesunde Skepsis einem mathematischen Theorem, an dem sich viele Pokerspieler orientieren, ohne es zu wissen: dem Satz von Bayes. Der britische Mathematiker Thomas Bayes entwickelte Mitte des 18. Jahrhunderts eine Formel, die zu berechnen hilft, wie neue Erkenntnisse im Lichte vorheriger Urteile interpretiert werden müssen. Für Bayes war Wahrheit immer nur als Annäherung zu haben, nicht weil die Wirklichkeit so unzuverlässig ist, sondern unsere Fähigkeiten, sie zu verstehen. Was hilft, glauben Bayes und Silver, ist, sich seine eigene Unvollkommenheit einzugestehen. Als Statistiker hält auch er sich an eine Art Hippokratischen Eid, wenigstens an den Teil, der verlangt: Richte keinen Schaden an!

Wenn man aber den Versprechen der absoluten Berechenbarkeit der Welt nicht glauben kann, dann muss man auch die Prophezeiungen eines totalitären Datendeterminismus relativieren, die sich daran anschließen. Dass immer genauere persönliche Profile möglich werden, bedeutet eben nicht, dass man sich den Menschen nur noch als Summe seiner Amazonempfehlungen, Googletreffer und Bookmarks vorstellen muss. Daten aus der Vergangenheit, auch das lehrt Silver, sind ein erbärmlicher Indikator für zukünftige Ereignisse; wieso sollte man sich selbst von seinem eigenen Profil entmündigen lassen?

Die Existenz dominanter Verhaltensmuster ermöglicht nicht nur Dissidenz; sie belohnt sie womöglich sogar. Sein eigenes Handeln unvorhersehbar zu machen, ist nicht nur eine Strategie beim Pokern, sondern eine elementare Eigenschaft des Menschen. Einer der Helden in Silvers Buch ist der Wettmillionär Haralabos "Bob" Voulgaris, von dem man lernen könnte, dass es kein Nachteil sein muss, wenn man eigene Erfahrungen und Intuition gegen die vermeintlich sicheren Prognosen (die sich in seiner Welt als Quoten ausdrücken) setzt.

"Die Zukunft", hat Jacques Derrida einmal gesagt, "gehört den Gespenstern." Sie ist mehr als die Hochrechnung der Vergangenheit. Wem könnte man das besser glauben, als einem Mann, der sie vorhersehen kann.

HARALD STAUN

Nate Silver: "The Signal and The Noise", Penguin Press, 544 Seiten

Alle Rechte vorbehalten. © F.A.Z. GmbH, Frankfurt am Main

Süddeutsche Zeitung | Besprechung von 11.01.2013

Der Wundernerd
Perfekt programmierte Kristallkugel: Der beste politische Blogger der USA hat ein Buch geschrieben
Die Ergebnisse der amerikanischen Präsidentenwahl im November sind lange ausgezählt und gewonnen hat eindeutig: Nate Silver – der „Wundernerd“ (so die Zeitschrift The Atlantic ), der in jedem der fünfzig US-Bundesstaaten den Wahlsieger korrekt vorhergesagt hatte. Die Wirklichkeit hatte seine längst als „Best Political Blog“ ausgezeichneten Analysen eindrucksvoll bestätigt. Es war ein Sieg der Statistik über die steile These.
  Schon vor ein paar Jahren hatte der in Berkeley lehrende Psychologe Philip Tetlock 82 361 politische Vorhersagen von 284 politischen Experten untersucht und dabei einen klaren Zusammenhang festgestellt: Je häufiger ein Experte in den Medien auftrat, desto öfter lag er falsch. Überhaupt waren die untersuchten Profis „nur unwesentlich besser als mit Dartpfeilen werfende Schimpansen“.
  Nate Silver, der schon beim ersten Obama-Sieg bei 49 von 50 Staaten richtig gelegen hatte, arbeitet mit einer komplizierten Formel und hatte seine Methode in dem inzwischen zur New York Times gehörenden Blog „FiveThirtyEight“ erklärt. Hier nur so viel: Er führt keine eigenen Umfragen durch, sondern gewichtet die zur Verfügung stehenden Quellen. Wie alt ist die Umfrage? Wie viele Leute wurden befragt? Wie richtig lag dieses Institut in der Vergangenheit? Da zum Beispiel Online-Umfragen jüngere Leute erreichen, tendieren sie nach links und müssen nach rechts korrigiert werden.
  Der Durchschnitt der so gewichteten Informationen bildet einen „Schnappschuss“ der aktuellen Lage: So ginge die Wahl wahrscheinlich heute aus. Bei der Hochrechnung berücksichtigt Silver dann noch Trends und historische Erfahrungen und simuliert auf dieser Basis 10 000 mal den Wahlprozess. Voilà: Gewinnt einer 7364 Mal, liegen seine Siegchancen bei 73,64 Prozent.
  Bahnbrechend ist das grundsätzlich nicht. In anderen Bereichen, etwa der Wissenschaft, haben sich ähnliche Meta-Analysen längst etabliert. Und auch auf dem Feld der Politik ist Silver längst nicht mehr allein: Auch Votamatic.org und das Princeton Election Consortium haben dieses Jahr ähnlich gute Voraussagen gemacht. Was die Sache dagegen wirklich interessant macht, ist der Kulturwandel, der stattfindet, wenn eine Diskussion plötzlich von Mathematikern beherrscht wird.
  In dieser Hinsicht ist Silver Wiederholungstäter. Die Revolution, die er in den vergangenen Jahren in die Politik getragen hat, hatte er längst woanders geprobt – unter anderem im Baseball. In seinem Bestseller „Moneyball, The Art of Winning an Unfair Game“ (2003) hat der Journalist Michael Lewis diese Revolution beschrieben – den Einzug der Nerds in die Kommandozentralen des Sports.
  Hauptfigur in Lewis’ später verfilmter Geschichte ist Billy Beane, der Manager der Oakland Athletics. Oakland war im Verhältnis zu anderen Teams bitterarm. Während die New York Yankees 125 Millionen Dollar für Spieler in der Tasche hatten, stand Oakland kaum ein Drittel davon zur Verfügung. Die Lage war also im Grunde aussichtslos: Die größten Talente würden auch dieses Jahr wieder zu den reichsten Teams gehen, den Ärmeren blieb eine Zukunft auf der Verliererstraße.
  Wer so denkt, hatte seine Rechnung ohne die Nerds gemacht. Statistisch begabte Fans hatten Baseball seit den Siebzigerjahren zunehmend genau analysiert. Dabei war ihnen aufgefallen, dass die angeblichen Experten relativ oft falsch lagen: Die Clubs investierten große Summen in Talente, die sich in der Liga nie durchsetzten und übersahen gleichzeitig äußerst vielversprechende Spieler – etwa weil sie zu dick waren oder den Ball komisch warfen. Auch die alten Spielerscouts nutzten Statistiken, aber am Ende entschied ihr Bauchgefühl: Diesen Jungen kann ich mir auf einem Poster vorstellen.
  Die Nerds dagegen sahen nur Zahlen. Dabei handelten sie im Grunde wie eine Private-Equity-Gesellschaft, die gezielt nach unterbewerteten Unternehmen sucht, um in sie zu investieren. Gegen den Widerstand der alten Garde kaufte Billy Beane auf Empfehlungen der Nerds für wenig Geld eine „Gurkentruppe“ mit bislang übersehenen Stärken zusammen. Der Erfolg gab ihm recht: als drittärmstes Team der Liga zogen die Oakland A’s souverän in die Playoffs ein.
  Inzwischen hat fast jede Profi-Mannschaft ihre Nerds – die Wissenslücke wurde geschlossen. Silver, der eine Zeitlang einer der führenden Köpfe dieser Bewegung gewesen war, zog daraufhin weiter. Seine Zwischenstation vor der Politik hieß Online-Poker, dessen Boom um 2004 viele neue Spieler anzog: Noch so eine Nische, in welcher der bessere Statistiker häufiger gewann.
  In seinem nun erschienenen Buch „The Signal and the Noise: Why Most Predictions Fail – But Some Don’t“ weitet Silver diese Strategie schließlich auf die ganze Welt aus. Schließlich gibt es fast überall Prognosen, die er ausführlich bewerten kann: Im Finanzmarkt, in Bezug auf das Wetter, zu Erdbeben, Epidemien, dem Klima, Sportergebnissen. Schachcomputer antizipieren die Züge ihrer Gegner, Geheimdienste verhindern die Terroranschläge von übermorgen, Google weiß schon nach drei Buchstaben, wonach man eigentlich sucht.
Dabei liegen manchmal die meisten Vorhersagen falsch – wie zum Beispiel die AAA-Ratings vor der Finanzkrise. Oder eine Vorhersage liegt richtig, wird aber ignoriert – wie die dringende Aufforderung der Meteorologen vor dem Hurrikan Katrina , New Orleans zu evakuieren. Dann wieder sind genaue Vorhersagen gar nicht möglich – wie etwa bei Erdbeben, für die bis heute kein funktionierendes Frühwarnsystem existiert. Jedenfalls ist es in den meisten Fällen äußerst schwer, im ohrenbetäubenden Rauschen der Information das Signal wahrzunehmen, das sehr leise von der Wahrheit kündet.
  Und genau darum war Silvers Buch selbst schwer vorherzusehen. Wider Erwarten geht es nicht darum, groß aufzutrumpfen: der Prognose-Popstar mit der perfekt programmierten Kristallkugel predigt eine neue Science-Gewissheit in der Politik. Stattdessen liest man eine spannende und äußerst detailreiche Ethik – ein Plädoyer für die zurückhaltende, ständig mit eigenen Fehlern rechnende Analyse von immer zu viel Information von überallher. „The Signal and the Noise“ ist also ein Buch über das richtige zeitgenössische Denken: in fundierten und wohlkalkulierten – Ungewissheiten. Selten hatte dieses Zeugnis so viel Appeal: „Wahrscheinlichkeitsrechnung: Nachsitzen“.
JAN FÜCHTJOHANN
Nate Silver: The Signal and the Noise: Why So Many Predictions Fail – but Some Don’t. Penguin Press, New York 2012. 544 Seiten, 16,95 Euro.
Die Vorhersagen der Profis:
So genau wie „ein mit Dartpfeilen
werfender Schimpanse“
Popstar der Prognose: Nate Silver.
FOTO: ROBERT GAULDIN/PENGUIN PRESS
DIZdigital: Alle Rechte vorbehalten – Süddeutsche Zeitung GmbH, München
Jegliche Veröffentlichung und nicht-private Nutzung exklusiv über www.sz-content.de