Qwen3.8-27B: Reasoning rettet die Arithmetik
Willison ließ eine Codex-Remote-Session das Experiment von Colin Fraser nachbauen: zwei Zahlen addieren und das Ergebnis nur in englischen Worten ausgeben, alle Kombinationen von 1 bis 13 Stellen, je 30 Paare. Modell: Qwen3.8-27B-Q4_K_M.gguf auf einer DGX Spark.
Ohne Reasoning: 97 % Treffer bei ein- bis dreistelligen Zahlen, 6,4 % bei 10–13 Stellen, das Wortformat hielt das Modell zu 96 % ein. Mit mittlerem Reasoning (nur 169 Fälle, je ein Paar pro Zelle) addierte das Modell Spalte für Spalte mit Übertrag und lag zweimal daneben. Willison weist selbst auf die kleine Stichprobe hin.