dolphincoder:15b im LLM-Testsuite-Report

Modellbeschreibung

Eine unzensierte 7B- und 15B-Variante der Dolphin-Modellfamilie auf Basis von StarCoder2, die sich beim Programmieren auszeichnet.

Diese Dolphin-Feinabstimmung basiert auf den StarCoder2-Modellen mit 7B und 15B und zeichnet sich beim Programmieren aus.

HuggingFace

725 Runs 732 bewertet 30.2 % Score 5.3 % exakt korrekt

Hilfe zu Bewertung, Score und exakter Korrektheit

Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.

Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.

Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.

Testfall Kategorie