ICD11_Test_06_InfluenzaA im LLM-Testsuite-Report
Testfallbeschreibung
Test zur Erkennung von Influenza A.
| Quelldatei | ICD11_Test_06_InfluenzaA.txt |
|---|---|
| Serie | 2 |
| Kategorien | icd11, classification, clinical |
| Bewertung | Deterministisch |
| Prompt SHA-256 | 146afa163e986405553e2f6ec257d8f40a0f824b0a579c9d5557840ba97c8419 |
Deterministisch: Die Antwort wird regelbasiert gegen ein erwartetes Ergebnis geprüft. Bewertet wird also, ob die geforderten Werte, Muster oder Strukturen in der Modellantwort gefunden werden.
Erwartetes Ergebnis
1E30
| Erwartung im Katalog | ja |
|---|---|
| Korrektes Ergebnis im Katalog | ja |
Hinweis: ICD-11 MMS Referenzwert laut fachlicher Vorgabe.
Prompt
Text Plötzlich hohes Fieber, starker Husten, Kopf- und Gliederschmerzen. Schnelltest positiv auf Influenza A. Aufgabe Gib ausschließlich den ICD-11 Code zurück. Beispiel Bei „Lungenentzündung bakteriell“ wäre die Antwort zB CA40
754 Runs
750 bewertet
1.4 % Score
0.1 % exakt korrekt
Hilfe zu Bewertung, Score und exakter Korrektheit
Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.
Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.
Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.