Zitieren:
Im Gegensatz zu Thorsten interessiert es mich durchaus auch, wie sich Geräte gegen ihre Vorgänger schlagen. Es geht ja letztendlich um eine Weiterentwicklung (die es leider im Fall des CGP nicht gegeben hat), ganz egal gegen welche Gegner.
Ihr versteht mich falsch. Es geht nicht um Interesse.
Wenn zwei sehr ähnliche Programme gegeneinander spielen funktioniert sonst die übliche Sortierung nicht mehr. Weil !! Die Programme so ähnlich sind. Es ist so als rastet was ein, und sie produzieren Ergebnisse die nichts mit der normalen Spielstärke zu tun haben.
Ihr glaubt ihr könntet durch das Spiel / Match herausfinden ob a sich zu b verbessert oder verschlechtert hat. De facto findet ihr einen spielstärkezuwachs aber nicht heraus, weil die Programme so ähnlich sind lässt sich das nicht feststellen.
Ich kenne Programmierer die haben durch das testen Version x gegen Version x+1 geglaubt die hätten eine Version herausgefunden die 50 elo Vorsprung hat, oder was auch immer für eine elo. Dann die Version veröffentlicht. Und dann haben die Kunden im Spiel gegen ANDERE Engine festgestellt das die angeblich stärkere Version in wirklichkeit schwächer war als die Versionen vorher.
Das ist mein Punkt.
Ed Schröder ist so ein Beispiel. Irgendwann hat er das auch mal gemerkt das er so kein "besseres" Programm herausfinden kann, aber dazwischen lagen tausende und abertausende Partien die alle für die Katz waren.