ICD11_Test_07_Panik_Agoraphobie im LLM-Testsuite-Report
Testfallbeschreibung
Test zur Erkennung einer Panikstörung. Zusätzlicher Code für Agoraphobie kann im System vorgesehen werden.
| Quelldatei | ICD11_Test_07_Panik_Agoraphobie.txt |
|---|---|
| Serie | 2 |
| Kategorien | icd11, classification, clinical, multicode |
| Bewertung | Deterministisch |
| Prompt SHA-256 | 0b9f59fa384ed1c418d6b00fcb339fbe159eed8a39fe60a03b35c06d34be0770 |
Deterministisch: Die Antwort wird regelbasiert gegen ein erwartetes Ergebnis geprüft. Bewertet wird also, ob die geforderten Werte, Muster oder Strukturen in der Modellantwort gefunden werden.
Erwartetes Ergebnis
6B01
| Erwartung im Katalog | ja |
|---|---|
| Korrektes Ergebnis im Katalog | ja |
Hinweis: ICD-11 MMS Referenzwert laut fachlicher Vorgabe.
Prompt
Text Monate wiederkehrende Episoden von Herzrasen, Zittern, Atemnot, Gefühl drohender Ohnmacht. Organmedizinisch alles unauffällig. Vermeidung verschiedener Situationen. Aufgabe Gib ausschließlich den ICD-11 Code zurück. Wenn zusätzlich Agoraphobie beschrieben wäre, könnte 6B02 ergänzt werden. Beispiel Bei „soziale Angststörung“ wäre die Antwort zB 6B03
764 Runs
762 bewertet
14.7 % Score
10.3 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit
Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.
Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.
Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.