granite-code:20b im LLM-Testsuite-Report

Modellbeschreibung

Eine Familie offener Basismodelle von IBM für Code-Intelligenz.

Modellfamiliegranite-code
Kontext8K
InputText
Größe12 GB
Familiengrößen3b, 8b, 20b, 34b

Readme-Auszug

Granite Code ist eine Familie reiner Decoder-Code-Modelle für Aufgaben der Codegenerierung, beispielsweise das Erzeugen, Erklären und Korrigieren von Code.

Parametergrößen

34B Parameter ollama run granite-code:34b 20B Parameter ollama run granite-code:20b 8B Parameter mit 128K-Kontextfenster ollama run granite-code:8b 3B Parameter mit 128K-Kontextfenster ollama run granite-code:3b

Ressourcen

Hugging Face Fachartikel

381 Runs 402 bewertet 20.8 % Score 3.5 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit

Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.

Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.

Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.

Erzeugt am