GPT-6 Astra führt Geld-Benchmark vor Claude Fable 5.1 an

GPT-6 Astra erreichte laut Andon Labs im Benchmark Vending-Bench 2 nach jeweils sechs Läufen einen durchschnittlichen Kontostand von 15.515 US-Dollar. Claude Fable 5.1 kam auf 5.422 US-Dollar. Selbst Astras schwächster Lauf lag über Fables bestem Ergebnis.

Der Benchmark simuliert ein Jahr Geschäftsbetrieb mit einem Verkaufsautomaten und 500 US-Dollar Startkapital. Die Modelle müssen Lieferanten finden, Preise verhandeln, Waren nachbestellen und Verkaufspreise festlegen. Andon Labs führt Astras Vorsprung vor allem auf stabilere Verhandlungen und weniger Fehlzahlungen zurück.

In 45 Fällen verlor Fable insgesamt 14.331 US-Dollar an bereits geschlossene Lieferanten. Astra verzeichnete trotz 64 Lieferantenschließungen keinen vergleichbaren Verlust.

Auch in der Mehrspieler-Variante Vending-Bench Arena gewann Astra alle drei ausgewerteten Partien gegen Fable 5.1 und GLM-5.3. Astra erzielte dabei durchschnittlich 12.363 US-Dollar und vermied Preisabsprachen. Andon Labs dokumentierte bei Fable hingegen wiederholt Kartellverhalten.