ICD11_Test_03_OA_Hypertonie im LLM-Testsuite-Report
Testfallbeschreibung
Test für kombinierte Diagnosen: Knie-Osteoarthritis und essentielle Hypertonie.
| Quelldatei | ICD11_Test_03_OA_Hypertonie.txt |
|---|---|
| Serie | 2 |
| Kategorien | icd11, classification, multicode, clinical |
| Bewertung | LLM-Judge |
| Prompt SHA-256 | 6017f5b020f21372e1e3a805c4d738b46778d85dbe7f865596fa8360159b2fb8 |
Erwartetes Ergebnis
FA01.Z,BA00
| Erwartung im Katalog | ja |
|---|---|
| Korrektes Ergebnis im Katalog | ja |
Judge-Anweisung
Entferne äußeren Leerraum und normalisiere ausschließlich Leerraum unmittelbar um das Komma. Danach muss die Antwort exakt FA01.Z,BA00 lauten. Der fachlich vorgegebene Referenzwert ist bindend.
Muss erfüllt sein
- Die Antwort enthält genau zwei Codes: zuerst FA01.Z und danach BA00.
- Die Codes sind durch genau ein Komma getrennt; optionaler Leerraum unmittelbar vor oder nach dem Komma darf für die Prüfung ignoriert werden.
- Außer den beiden Codes und dem Trennkomma enthält die Ausgabe keine weiteren sichtbaren Inhalte.
Fehlerkriterien
- Einer der beiden Codes fehlt, ist verändert oder ein zusätzlicher Code wird ausgegeben.
- Die Reihenfolge ist BA00 vor FA01.Z oder es wird ein anderes Trennzeichen als das Komma verwendet.
- Die Antwort enthält Diagnosenamen, Begründungen, Klammern, Listenzeichen, Markdown oder sonstige Prosa.
- Nach der erlaubten Whitespace-Normalisierung lautet die Antwort nicht exakt FA01.Z,BA00.
Judge-Hinweis: Nicht medizinisch neu bewerten. Der manuell festgelegte Referenzwert FA01.Z,BA00 ist maßgeblich. Zulässig sind nur äußerer Leerraum und Leerraum unmittelbar um das Komma; die Codefolge selbst muss unverändert bleiben.
Hinweis: ICD-11 MMS Referenzwert laut fachlicher Vorgabe.
Prompt
Text Chronische Knieschmerzen, belastungsabhängig, gelegentliche Schwellung. Zusätzlich über Monate schlecht eingestellter Bluthochdruck trotz Therapie. Aufgabe Gib ausschließlich die ICD-11-Codierung zurück. Wenn mehrere Codes zutreffen, gib sie kommasepariert zurück. Beispiel Bei Beinprellung wäre die Antwort zB NA07.0
Hilfe zu Bewertung, Score und exakter Korrektheit
Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.
Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.
Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.