ICD11_Test_10_DiabetesTyp2 im LLM-Testsuite-Report
Testfallbeschreibung
Test zur Erkennung eines Diabetes mellitus Typ 2.
| Quelldatei | ICD11_Test_10_DiabetesTyp2.txt |
|---|---|
| Serie | 2 |
| Kategorien | icd11, classification |
| Bewertung | Deterministisch |
| Prompt SHA-256 | 189429145fc242ae1d232a51b9c2f8e0ec66c0ecb67e9ec5330d89353ce263c3 |
Deterministisch: Die Antwort wird regelbasiert gegen ein erwartetes Ergebnis geprüft. Bewertet wird also, ob die geforderten Werte, Muster oder Strukturen in der Modellantwort gefunden werden.
Erwartetes Ergebnis
5A11
| Erwartung im Katalog | ja |
|---|---|
| Korrektes Ergebnis im Katalog | ja |
Hinweis: ICD-11 MMS Referenzwert laut fachlicher Vorgabe.
Prompt
Text Ein 61-jähriger Patient zeigt erhöhte Nüchternglukosewerte, HbA1c von 7.1 Prozent, vermehrten Durst und häufiges Wasserlassen. Kein Hinweis auf Autoimmunprozesse. Aufgabe Gib ausschließlich den ICD-11 Code zurück. Beispiel Beispiel: Hypothyreose → 5A20
760 Runs
756 bewertet
8.0 % Score
7.8 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit
Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.
Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.
Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.