command-r:35b im LLM-Testsuite-Report

Modellbeschreibung

Command R ist ein großes Sprachmodell, das für dialogorientierte Interaktion und Aufgaben mit langem Kontext optimiert wurde.

Modellfamiliecommand-r
Kontext128K
InputText
Größe19 GB
Familiengrößen35b

Readme-Auszug

Command R ist ein generatives Modell, das für Aufgaben mit langem Kontext optimiert wurde, etwa abrufgestützte Generierung (RAG) und die Nutzung externer APIs und Werkzeuge. Als Modell, das für den großflächigen Einsatz in Unternehmen entwickelt wurde, bietet Command R:

Hohe Genauigkeit bei RAG und Werkzeugnutzung Niedrige Latenz und hoher Durchsatz Einen längeren Kontext von 128K Starke Fähigkeiten in 10 wichtigen Sprachen

Derzeit gibt es zwei Versionen von Command R:

Ursprüngliche Veröffentlichung mit dem Tag v0.1 Aktualisierung vom August 2024 mit dem Tag 08-2024

Referenzen

Blogbeitrag Hugging Face

677 Runs 637 bewertet 35.9 % Score 22.3 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit

Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.

Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.

Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.

Erzeugt am