Nash-Gleichgewicht
Das Nash-Gleichgewicht, teils auch (wie im Englischen) Nash-Equilibrium genannt, ist ein zentraler Begriff der mathematischen Spieltheorie. Es beschreibt in nicht-kooperativen Spielen eine Kombination von Strategien, eine für jeden Spieler, von der ausgehend kein einzelner Spieler für sich einen Vorteil erzielen kann, indem er einseitig von seiner Strategie abweicht. In einem Nash-Gleichgewicht bereut daher kein Spieler seine Strategiewahl. Die Strategien der Spieler sind wechselseitig beste Antworten. Es ist ein grundlegendes Lösungskonzept der Spieltheorie. Definition und Existenzbeweis des Nash-Gleichgewichts gehen auf die 1950 veröffentlichte Dissertation des Mathematikers John Forbes Nash Jr. zurück[1].
Idee
Das wesentliche Ziel der mathematischen Spieltheorie ist es, für Konfliktsituationen rationale Entscheidungen zu charakterisieren und zu bestimmen. Die Schwierigkeit dabei ist, dass keiner der Entscheider („Spieler“) weiß, welche Pläne die anderen Spieler verfolgen und wie sie sich dementsprechend entscheiden werden. Damit ist es für einen einzelnen Spieler völlig ungewiss, wie sich seine konkrete Entscheidung für einen Handlungsplan („Strategie“) auswirken wird.
Dem Nash-Gleichgewicht liegt nun die folgende Idee zugrunde: Man geht von allen möglichen Kombinationen aus, die für jeden Spieler eine Strategie beinhalten. Eine solche Strategie-Kombination heißt Nash-Gleichgewicht, wenn ihr eine gewisse Stabilität unterstellt werden kann aufgrund der Tatsache, dass kein einzelner Spieler einen Anreiz besitzt, von seiner Strategie abzuweichen. Formal bedeutet dies, dass sich die Auszahlung an denjenigen Spieler, der seine Strategie als Einzelner ändert, aufgrund dieser Änderung nicht erhöhen darf.
Formale Definition
Nash-Gleichgewicht bei reinen Strategien
Es bezeichne $ \Sigma _{i} $ die Menge der Strategien (Handlungsalternativen) des i-ten Spielers und $ \Sigma :=\Sigma _{1}\times \ldots \times \Sigma _{n} $ das kartesische Produkt dieser Strategienmengen.
Unter einem Nash-Gleichgewicht in reinen Strategien versteht man ein Strategieprofil $ \sigma ^{*}=(\sigma _{1}^{*},...,\sigma _{n}^{*})\in \Sigma $, bei dem die Strategie jedes Spielers $ i $ eine beste Antwort auf die gewählten Strategien der anderen Spieler ist. Wenn alle anderen Spieler an ihren gewählten Strategien festhalten, so ist das Nash-Gleichgewicht bei reinen Strategien formal dadurch gekennzeichnet, dass es für Spieler $ i $ also kein $ \sigma _{i}\neq \sigma _{i}^{*} $ gibt, das dem Spieler $ i $ eine höhere Auszahlung verspricht:
- $ \forall \sigma _{i}\in \Sigma _{i}:u_{i}(\sigma _{1}^{*},\ldots ,\sigma _{i}^{*},\ldots ,\sigma _{n}^{*})\geq u_{i}(\sigma _{1}^{*},\ldots ,\sigma _{i},\ldots ,\sigma _{n}^{*}) $.
Man sagt auch, dass Spieler $ i $ seine Auszahlung durch ein einseitiges Abweichen nicht verbessern kann. Ein Nash-Gleichgewicht zeichnet sich damit dadurch aus, dass sich kein Spieler durch eine einseitige Änderung seiner Strategie verbessern kann.
Nash-Gleichgewicht bei gemischten Strategien
In manchen Fällen lässt man zu, dass die Spieler sich nicht auf eine bestimmte Strategie festlegen, sondern auf eine Wahrscheinlichkeitsverteilung, mit der die $ \sigma _{i} $ aus $ \Sigma _{i} $ zufällig gezogen werden. Ist $ \Sigma _{i} $ endlich oder zumindest abzählbar, so kann die Wahrscheinlichkeitsverteilung durch einen Vektor $ s_{i} $ beschrieben werden, wobei $ s_{i,j} $ die Wahrscheinlichkeit ist, dass die Strategie $ \sigma _{i,j}\in \Sigma _{i} $ gewählt wird.
Die gemischte Strategie $ s=(s_{1}^{*},...,s_{n}^{*}) $ ist genau dann ein Nash-Gleichgewicht, wenn kein Spieler durch alleiniges Abweichen eine bessere Auszahlung erreichen kann, das heißt genau dann, wenn
- $ \forall i\in 1..n\;\;\forall s_{i}\in S_{i}\;\;u_{i}(s_{1}^{*},\ldots ,s_{i-1}^{*},s_{i},s_{i+1}^{*},\ldots ,s_{n}^{*})\leq u_{i}(s_{1}^{*},\ldots ,s_{i-1}^{*},s_{i}^{*},s_{i+1}^{*},\ldots ,s_{n}^{*})\ $.
Existenz
Mit Hilfe des Fixpunktsatzes von Kakutani kann man zeigen, dass mindestens ein Nash-Gleichgewicht existieren muss, wenn folgende Voraussetzungen erfüllt sind:
- Die Auszahlungsfunktionen $ H_{i}(\sigma _{1},\ldots ,\sigma _{n}) $ sind stetig und quasikonkav in $ \sigma _{i} $ .
- Die Strategiemengen $ \Sigma _{1},\ldots ,\Sigma _{n} $ sind konvex und kompakt.
Häufig werden Spiele so konstruiert, dass die $ \Sigma _{i} $ endlich sind, endliche Mengen können jedoch nicht konvex sein. Allerdings ist die Menge der gemischten Strategien $ S_{i} $ über $ \Sigma _{i} $ kompakt und konvex und die entsprechende Erweiterung von $ H $ multilinear. Während die Existenz eines Nash-Gleichgewichtes in reinen Strategien also nicht garantiert werden kann, existiert mindestens ein Nash-Gleichgewicht bei einem Spiel in gemischten Strategien.
Ein einfacher Algorithmus zur Identifizierung von Nash-Gleichgewichten
Liegt ein Spiel in strategischer Form vor, so lassen sich alle Nash-Gleichgewichte in reinen Strategien durch folgenden Algorithmus bestimmen:
- Optimiere die Entscheidung von Spieler i=1,...,n bei (beliebig) fixierten Strategien aller anderen Spieler: Markiere die unter diesen Umständen erreichbaren höchsten Auszahlungen für Spieler i. Wiederhole dies für alle möglichen Strategiekombinationen der anderen Spieler.
- Führe 1. für alle Spieler durch.
Dann sind genau die Strategienkombinationen Nash-Gleichgewichte, bei denen alle Auszahlungen markiert sind. Diese Vorgehensweise eignet sich nur für eine geringe Anzahl von Spielern und Strategien.
Beispiel
Sei folgendes Spiel in Normalform gegeben:
Spieler 2 | ||||
links | mitte | rechts | ||
---|---|---|---|---|
Spieler 1 | oben | 4 , 2 | 1 , 1 | 2 , 0 |
mitte | 2, 3 | 1 , 1 | 1, 4 | |
unten | 3, 0 | 0, 2 | 1, 3 |
Dann funktioniert der Algorithmus wie folgt:
- i = 1:
- gegeben Spieler 2 spielt Rechts: Für Spieler 1 ist oben optimal – markiere die 2 („Oben ist beste Antwort auf Rechts“)
- gegeben Spieler 2 spielt Mitte: oben und mitte ist optimal – markiere die beiden 1en
- gegeben Spieler 2 spielt Links: oben ist optimal – markiere die 4
- i = 2:
- gegeben Spieler 1 spielt oben: Für Spieler 2 ist Links optimal – markiere die 2
- gegeben Spieler 1 spielt mitte: Rechts ist optimal – markiere die 4
- gegeben Spieler 1 spielt unten: Rechts ist optimal – markiere die 3
Das einzige Nash-Gleichgewicht ist also die Strategie, die zur Auszahlung 4, 2 führt: (oben,links).
Falls zu überprüfen ist, ob ein Tupel von gemischten Strategien ein Nash-Gleichgewicht ist, funktioniert obiger Algorithmus nur bedingt, da eine unendliche Anzahl an gemischten Strategien überprüft werden müsste.
Ein Algorithmus zur Identifizierung von Nash-Gleichgewichten in gemischten Strategien
Bei der Identifizierung von Nash-Gleichgewichten in gemischten Strategien ist es hilfreich, diejenigen gemischten Strategien zu identifizieren, die den Gegenspieler indifferent zwischen seinen Handlungsalternativen machen. Ist solch eine Strategie gefunden, sind alle Handlungen des Gegners beste Antworten. Treffen solche gemischten Strategien aufeinander, so sind sie folglich wechselseitig beste Antworten, es besteht kein Grund zum einseitigen Abweichen, und die gemischten Strategien bilden ein Nash-Gleichgewicht.
Beispiel
Betrachten Sie die folgende Bi-Matrix:
Spieler 2 | |||
Oper | Fußball | ||
---|---|---|---|
Spieler 1 | Oper | 3, 2 | 2, 3 |
Fußball | 1, 3 | 4, 1 |
Dann funktioniert der Algorithmus wie folgt:
Spielt Spieler 2 mit einer Wahrscheinlichkeit von q Oper und mit der Gegenwahrscheinlichkeit von (1-q) Fußball, so ergeben sich für Spieler 1 folgende Erwartungsnutzen (Expected Utility):
- EU1(O) = 3q + 2(1-q)
- EU1(F) = 1q + 4(1-q)
Spieler 1 ist also indifferent zwischen seinen beiden Strategien, wenn
- 3q + 2(1-q) = 1q + 4(1-q)
- 3q + 2 - 2q = 1q + 4 - 4q
- 1q + 2 = 4 - 3q
- 4q = 2
- q = 1/2
Für Spieler 2 lässt sich analog ermitteln, dass er indifferent ist, wenn Spieler 1 mit einer Wahrscheinlichkeit von p = 2/3 Oper und mit (1-p) = 1/3 Fußball spielt.
Da auf diese beiden Strategien alle Antworten des Gegenspielers beste Antworten sind, sind sie speziell jeweils auch wechselseitig beste Antworten. Somit kann [(2/3;1/3),(1/2;1/2)] als Nash-Gleichgewicht in gemischten Strategien identifiziert werden.
Spezialfälle
Ein Spezialfall von Nashs Existenzsatz für Gleichgewichte ist das für Zwei-Personen-Nullsummenspiele gültige Min-Max-Theorem, das 1928 durch John von Neumann bewiesen wurde. Anders als im allgemeinen Fall entspricht dabei jedem Spiel ein eindeutiger Auszahlungsvektor $ (v,-v) $, wobei $ v $ der Wert des Spieles heißt.
Für Zwei-Personen-Nullsummenspiele mit perfekter Information, zu denen Brettspiele wie Schach und Mühle gehören, existiert sogar immer ein Minimax-Gleichgewicht in reinen Strategien, das mit dem Minimax-Algorithmus rekursiv bestimmt werden kann. Dieser Satz wurde bereits 1912 von Ernst Zermelo bewiesen.
Praxisbeispiele
Marktwirtschaft
In der Marktwirtschaft ist eine Situation denkbar, bei der mehrere Anbieter in einem Markt die Preise ihrer konkurrierenden Produkte so weit gesenkt haben, dass sie gerade noch wirtschaftlich arbeiten. Für den einzelnen Anbieter wäre eine ausweichende Strategie nicht möglich: Senkt er seinen Preis, um seinen Absatz zu erhöhen, fällt er unter die Wirtschaftlichkeit; erhöht er ihn, werden die Käufer auf die Konkurrenzprodukte ausweichen und sein Gewinn sinkt ebenfalls. Ein Ausweg kann nun etwa darin bestehen, (beinahe) gleichzeitig mit einem Konkurrenten eine Produktinnovation einzuführen, um damit einen höheren Preis zu begründen. Unter dem Begriff Coopetition wurden derartige Szenarien Mitte der 1990er breiter diskutiert, wobei vor allem die Auseinandersetzung zwischen den US-amerikanischen Fluglinien als markantes Beispiel zitiert wurde.
Gefangenendilemma
Ein weiteres Beispiel ist das Gefangenendilemma, ein spieltheoretisches Problem, bei dem genau ein Nash-Gleichgewicht existiert.
Hierzu stelle man sich folgende Situation vor: Zwei Gefangene werden verdächtigt, gemeinsam eine Straftat begangen zu haben. Die Höchststrafe für das Verbrechen beträgt fünf Jahre Haft. Beiden Gefangenen wird nun ein Handel angeboten, worüber auch beide informiert sind. Wenn einer allein gesteht und somit seinen Partner mitbelastet, kommt er ohne Strafe davon – der andere muss die vollen fünf Jahre absitzen. Entscheiden sich beide zu schweigen, bleiben nur Indizienbeweise, die aber ausreichen, um beide für zwei Jahre einzusperren. Gestehen aber beide die Tat, erwartet jeden eine Gefängnisstrafe von vier Jahren. Nun werden die Gefangenen unabhängig voneinander befragt. Weder vor noch während der Befragung haben die beiden die Möglichkeit, sich untereinander abzusprechen.
Zwar ist es optimal für die beiden Gefangenen, wenn sie beide schweigen. Diese Strategie-Kombination ist aber nicht stabil, weil sich ein einzelner Gefangener durch ein Geständnis einen Vorteil für sich verschaffen kann. Stabil im Sinne eines Nash-Gleichgewichtes ist die Strategie-Kombination, bei der beide Gefangene gestehen: Dann kann sich kein einzelner durch ein Schweigen einen Vorteil verschaffen, so dass ein Nash-Gleichgewicht vorliegt. Dieses Nash-Gleichgewicht liefert aber für beide Gefangene schlechtere Ergebnisse als das beidseitige Schweigen, das nur durch Kooperation fixierbar ist.
Einzelnachweise
- ↑ John Forbes Nash: Non-cooperative games, Dissertation, Princeton University 1950 (Online-Version)