Siegquoten und Balance: Ist das wirklich zu stark?
Eine Siegquote bedeutet nur etwas neben ihrem Bereich, also frag, ob der ganze Bereich über deinem Ziel liegt, und nicht, ob eine Zahl hoch aussieht. Bei vielen Seiten oder Waffen weitest du jeden Bereich, denn eine davon wirkt allein durch Glück stark.
Wie liest du eine Tabelle mit Siegquoten?
Tidecall Skirmish ist ein erfundenes Strategiespiel für zwei Spieler mit vier Seiten, die Zahlen sind für dieses Beispiel ausgedacht. In 620 Partien, jede mit zwei verschiedenen Seiten, gab es je einen Sieg und eine Niederlage, alle Seiten zusammen haben also genau 620-mal gewonnen.
Das Ziel des Entwicklers: Jede Seite soll 50 % gewinnen, plus oder minus 5 Punkte.
| Seite | Siege | Spiele | Siegquote | Sehr wahrscheinlich zwischen | Urteil |
|---|---|---|---|---|---|
| Storm | 12 | 19 | 63 % | 36 und 84 % | Noch nicht zu sagen |
| Reef | 239 | 420 | 57 % | 51 und 63 % | Über dem Ziel, evtl. im Rahmen |
| Kelp | 183 | 391 | 47 % | 41 und 53 % | Noch nicht zu sagen |
| Gale | 186 | 410 | 45 % | 39 und 52 % | Noch nicht zu sagen |
Fang mit der verlockendsten Zeile an. Storm hat die höchste Siegquote und am wenigsten zu sagen. Die 19 Spiele lassen einen Bereich von „schwach“ bis „kaputt“ offen. Etwa 560 weitere Spiele würden das klären. Storm jetzt zu schwächen hieße, auf eine gute Woche zu reagieren.
Reef ist die einzige Seite mit einer echten Neuigkeit. Der ganze Bereich liegt über 50 %, die Seite gewinnt also sehr wahrscheinlich mehr als die Hälfte. Sie kann aber auch nur bei 51 % stehen, und das akzeptiert der Entwickler noch. Das ehrliche Urteil lautet also: über dem Ziel, aber nicht nachweislich zu stark.
Kelp und Gale wirken schwach und könnten trotzdem in Ordnung sein. Beachte auch, was so eine Tabelle verbirgt: Wenn in einem Spiel zu zweit Reef mehr gewinnt, müssen andere weniger gewinnen. Rein rechnerisch liegen alle Seiten zusammen im Schnitt bei 50 %. Kelp und Gale sind also vielleicht nur wegen Reef niedrig, und sie auch noch zu stärken hieße, ein Problem zweimal zu reparieren.
Warum sind die Bereiche so breit?
Aus zwei Gründen. Der erste ist die Zahl der Spiele: Eine Siegquote auf 5 Punkte nach oben und unten festzulegen, kostet rund 385 Spiele, auf die Hälfte davon rund 1.540.
Der zweite wird leicht übersehen: Es gibt vier Seiten. Testest du genug Dinge, wirken einige allein durch Zufall extrem. Statistiker nennen das das Problem der multiplen Vergleiche. Führst du 100 Tests auf dem üblichen Niveau durch und nichts ist wirklich anders, sehen trotzdem etwa 5 wie ein Fund aus. Das übliche Gegenmittel ist die Bonferroni-Korrektur: Du teilst das erlaubte Risiko durch die Zahl der Tests. Bei vier Seiten gilt für jeden Bereich also 1 zu 80 statt 1 zu 20. Ohne das läge der Bereich von Reef bei 52 bis 62 %.
Wann solltest du eine Seite ändern?
- Leg zuerst das Ziel fest. Ein Boss soll nicht 50 % gewinnen. Fair ist, was du vorher entschieden hast.
- Fass eine Seite an, und nur wenig. Der Entwickler nahm Reef 3 Punkte Startgesundheit und ließ Kelp und Gale in Ruhe.
- Warte auf die Zahl. Leg fest, wie viele Partien du brauchst, und vergleiche dann beide Versionen.
Eine Seite mit genau 50 % kann trotzdem öde sein, lies also auch Waffen und Gegenstände. Der Siegquoten-Check gibt deiner KI all das als fertiges Werkzeug.
Das sagst du deiner KI
Sag mir, ob eine Seite in meinem Spiel zu stark oder zu schwach ist und wie sicher du das weißt. Die Liste der Spiele liegt in [Datei oder Ordner].
1. Frag mich, was hier fair heißt: welche Siegquote ich will und wie weit daneben noch in Ordnung ist. Schreib das auf, bevor du Ergebnisse ansiehst.
2. Zeichne eine Partie als Mermaid-Zustandsdiagramm von der Wahl der Seite bis zum Ergebnis. Prüfe, ob jede Partie in den Daten genau ein Ergebnis pro Spieler hat, und lass Spiegelpartien weg. Sag mir, wie viele du entfernt hast.
3. Nimm get_recipe mit win-rate-check, wenn Spielerando verbunden ist. Wenn nicht, nimm Wilson-Bereiche, nach Bonferroni für die Zahl der Seiten geweitet, und sag das.
4. Zeig eine Tabelle: Seite, Siege, Spiele, Siegquote, Bereich, Urteil. Erlaubte Urteile: zu stark, zu schwach, passt, Tendenz, noch nicht zu sagen.
5. Sag bei jedem „noch nicht zu sagen“, wie viele Spiele das klären würden.
Schlag nur für eine Seite eine Änderung vor, deren ganzer Bereich außerhalb des Ziels liegt. Sag, was sie mit den anderen Seiten macht. Trifft das auf keine zu, sag, dass noch keine Änderung begründet ist.
Oder spar dir das und schließ den MCP an: Dann findet deine KI das alles von selbst.MCP anschließen
So prüfst du es
- Zähl die Siege zusammen. Bei eins gegen eins müssen alle Siege die Zahl der Partien ergeben.
- Schau zuerst auf die Spalte Spiele, dann erst auf die Siegquote.
- Teil die Daten nach Wochen. Ein echtes Ungleichgewicht zeigt sich in beiden Hälften.