openhermes:7b-mistral-v2-fp16 im LLM-Testsuite-Report
Modellbeschreibung
OpenHermes 2.5 ist ein 7B-Modell, das Teknium auf Grundlage von Mistral mit vollständig offenen Datensätzen feinabgestimmt hat.
| Modellfamilie | openhermes |
|---|---|
| Kontext | 32K |
| Input | Text |
| Größe | 14 GB |
Readme-Auszug
Open Hermes 2 ist ein mit vollständig offenen Datensätzen feinabgestimmtes Mistral-7B-Modell. Es erreicht in Benchmarks die Leistung von 70B-Modellen und verfügt über starke Fähigkeiten für mehrstufige Dialoge und Systemprompts. Insgesamt wurde das Modell mit 900.000 Anweisungen trainiert und übertrifft alle vorherigen Versionen von Nous-Hermes mit bis zu 13B Parametern.
Versionen
Tag Datum Hinweise v2.5 latest 11/02/2023 Rund 100.000 Beispiele für Programmieranweisungen hinzugefügt v2 10/16/2023 Erstveröffentlichung von Open Hermes 2
Verwendung
CLI
ollama run openhermes
API
Beispiel:
curl -X POST http://localhost:11434/api/generate -d '{ "model": "openhermes", "prompt": "Hier ist eine Geschichte über Lamas, die Gras fressen" }'
Referenzen
Hugging Face
Hilfe zu Bewertung, Score und exakter Korrektheit
Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.
Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.
Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.