aya:8b im LLM-Testsuite-Report

Modellbeschreibung

Aya 23, von Cohere veröffentlicht, ist eine neue Familie hochmoderner, mehrsprachiger Modelle, die 23 Sprachen unterstützt.

Modellfamilieaya
Kontext8K
InputText
Größe48 GB
Familiengrößen8b, 35b

Readme-Auszug

Aya 23, von Cohere veröffentlicht, ist eine neue Familie hochmoderner, mehrsprachiger generativer großer Sprachmodelle (LLMs), die 23 verschiedene Sprachen abdecken.

Es ist in Varianten mit 8 und 35 Milliarden Parametern verfügbar:

8B ollama run aya:8b 35B ollama run aya:35b

Referenzen

Blogbeitrag

Aya 23: Veröffentlichungen mit offenen Gewichten für weitere Fortschritte bei der Mehrsprachigkeit

Hugging Face

1270 Runs 1340 bewertet 32.9 % Score 9.0 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit

Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.

Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.

Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.

Erzeugt am