ICD11_Test_11_Asthma im LLM-Testsuite-Report
Testfallbeschreibung
Test zur Erkennung eines Asthmaanfalls bei bekannter Vorgeschichte.
| Quelldatei | ICD11_Test_11_Asthma.txt |
|---|---|
| Serie | 2 |
| Kategorien | icd11, classification |
| Bewertung | Deterministisch |
| Prompt SHA-256 | 52f8d1dd12f07bf8a84ef75febf8d26e39cc92b68923e31a1f8e450c3aed8278 |
Deterministisch: Die Antwort wird regelbasiert gegen ein erwartetes Ergebnis geprüft. Bewertet wird also, ob die geforderten Werte, Muster oder Strukturen in der Modellantwort gefunden werden.
Erwartetes Ergebnis
CA23
| Erwartung im Katalog | ja |
|---|---|
| Korrektes Ergebnis im Katalog | ja |
Hinweis: ICD-11 MMS Referenzwert laut fachlicher Vorgabe.
Prompt
Text Ein 14-jähriger Jugendlicher mit bekannter Asthmaerkrankung berichtet über akute pfeifende Atmung, Atemnot, Engegefühl in der Brust und verlängerte Ausatmung. Auslöser mutmaßlich Pollen. Aufgabe Gib ausschließlich den ICD-11 Code zurück. Beispiel Beispiel: akute Bronchitis → CA20
760 Runs
757 bewertet
5.3 % Score
1.1 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit
Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.
Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.
Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.