glm-4.6:cloud im LLM-Testsuite-Report

Modellbeschreibung

Fortschrittliche agentische Fähigkeiten sowie Fähigkeiten zum Schlussfolgern und Programmieren.

Modellfamilieglm-4.6
Kontext198K
InputText

Readme-Auszug

Modelleinführung

GLM-4.6 bringt mehrere wichtige Verbesserungen:

Längeres Kontextfenster: Das Kontextfenster wurde von 128K auf 200K Tokens erweitert, sodass das Modell komplexere agentische Aufgaben bewältigen kann. Überlegene Programmierleistung: Das Modell erzielt höhere Werte in Code-Benchmarks und zeigt eine bessere Leistung in realen Anwendungen wie Claude Code, Cline, Roo Code und Kilo Code. Dazu zählen auch Verbesserungen bei der Erzeugung visuell ausgefeilter Frontend-Seiten. Fortschrittliches Schlussfolgern: GLM-4.6 zeigt eine klare Verbesserung beim Schlussfolgern und unterstützt während der Inferenz die Verwendung von Werkzeugen, was insgesamt zu stärkeren Fähigkeiten führt. Leistungsfähigere Agenten: GLM-4.6 zeigt eine bessere Leistung bei Agenten, die Werkzeuge und Suche verwenden, und lässt sich effektiver in Agenten-Frameworks integrieren. Verfeinertes Schreiben: Das Modell entspricht menschlichen Präferenzen hinsichtlich Stil und Lesbarkeit.

Wir haben GLM-4.6 anhand von acht öffentlichen Benchmarks zu Agenten, Schlussfolgern und Programmieren bewertet. Die Ergebnisse zeigen deutliche Zugewinne gegenüber GLM-4.5. Zudem weist GLM-4.6 Wettbewerbsvorteile gegenüber führenden nationalen und internationalen Modellen auf, darunter DeepSeek-V3.1-Terminus und Claude Sonnet 4.

633 Runs 516 bewertet 60.2 % Score 49.2 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit

Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.

Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.

Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.

Erzeugt am