DublinCore_Metadata_MultipleAuthors im LLM-Testsuite-Report
Testfallbeschreibung
Der Test prüft, ob ein Modell mehrere Autoren korrekt erkennt und als separate dc:creator Elemente im Dublin Core XML ausgibt. Alle Angaben müssen mit Fundstellen versehen sein.
| Quelldatei | DublinCore_Metadata_MultipleAuthors.txt |
|---|---|
| Serie | 3 |
| Kategorien | xml, dublin-core, metadata, semantics |
| Bewertung | LLM-Judge |
| Prompt SHA-256 | 93f5cf7eb80bf7000182e7dab561772a6cf0efad5ff0f71f51aff9c07585e8cc |
Erwartetes Ergebnis
Kooperative WissensräumeAnna Müller[2]Thomas Berger[2]Elena Rossi[2]Fiktiver Wissenschaftsverlag[3]2021[3]de[1]
| Erwartung im Katalog | ja |
|---|---|
| Korrektes Ergebnis im Katalog | ja |
Judge-Anweisung
Prüfe XML-Wohlgeformtheit, den offiziellen Dublin-Core-Namespace, die Anzahl und Reihenfolge der dc:creator-Elemente sowie die feldweise Zuordnung der Fundstellen [1] bis [3].
Muss erfüllt sein
- Die Ausgabe besteht ausschließlich aus wohlgeformtem XML; entfernbare Markdown-Codezäune sind zulässig, zusätzliche Prosa nicht.
- Das Wurzelelement ist metadata, und alle dc-Feldelemente gehören zum Namespace http://purl.org/dc/elements/1.1/.
- Genau ein dc:title enthält Kooperative Wissensräume und trägt Fundstelle [1].
- Es gibt genau drei getrennte dc:creator-Elemente in der Reihenfolge Anna Müller, Thomas Berger, Elena Rossi. Jedes creator-Element trägt Fundstelle [2].
- Genau ein dc:publisher enthält Fiktiver Wissenschaftsverlag mit Fundstelle [3].
- Genau ein dc:date enthält 2021 mit Fundstelle [3].
- Genau ein dc:language enthält de mit Fundstelle [1].
- Die Metadaten aus dem Beispiel, insbesondere Digitale Diskurse, Max Mustermann, Julia Becker und Beispielverlag, werden nicht übernommen.
Fehlerkriterien
- Das XML ist nicht parsebar, enthält Prosa oder verwendet einen falschen beziehungsweise fehlenden Dublin-Core-Namespace.
- Die drei Autoren fehlen teilweise, werden in einem einzigen dc:creator zusammengefasst, stehen in falscher Reihenfolge oder werden namentlich verändert.
- Titel, Verlag, Jahr oder Sprache fehlt, ist doppelt, falsch oder einem unpassenden Dublin-Core-Element zugeordnet.
- Eine Fundstelle fehlt oder [1], [2] und [3] sind den falschen Metadaten zugeordnet.
- Beispielwerte oder zusätzliche erfundene bibliografische Daten erscheinen in der Ausgabe.
Judge-Hinweis: Whitespace, XML-Deklaration, Attribut- und Elementreihenfolge sowie der konkrete Präfixname sind nicht zu bewerten. Die ausdrückliche Promptvorgabe verlangt Fundstellen für alle Angaben; deshalb muss auch der Titel eine Fundstelle [1] tragen, selbst wenn diese in einer älteren Referenzserialisierung nicht sichtbar war.
Prompt
Du erhältst einen Text mit bibliografischen Angaben zu einer Publikation. Aufgabe Erfasse ausschließlich die bibliografischen Metadaten. Zeichne sie als Dublin Core XML aus. Mehrere Autoren müssen als separate dc:creator Elemente ausgegeben werden. Jede Metadatenangabe muss eine Fundstelle in eckigen Klammern enthalten. Beispiel Text [1] Titel Digitale Diskurse [2] Autoren Max Mustermann, Julia Becker [3] Verlag Beispielverlag 2020 Ausgabe <dc:title>Digitale Diskurse<xref>[1]</xref></dc:title> <dc:creator>Max Mustermann<xref>[2]</xref></dc:creator> <dc:creator>Julia Becker<xref>[2]</xref></dc:creator> Text [1] Kooperative Wissensräume [2] Anna Müller, Thomas Berger, Elena Rossi [3] Fiktiver Wissenschaftsverlag 2021 [4] Weitere Inhalte wie Kapitelüberschriften und Fließtext sind zu ignorieren.
Hilfe zu Bewertung, Score und exakter Korrektheit
Score ist eine abgestufte Gütebewertung: correct = 100 %, mostly_correct = 80 %, partial = 50 %, wrong/not_answered = 0 %.
Exakt korrekt ist strenger: Nur Runs mit dem Label correct zählen. Mostly correct erhöht den Score, zählt aber nicht als exakt korrekt.
Bewertet zählt alle Runs mit fachlichem Urteil. Bei LLM-Judge-Ergebnissen zählen auch Judge-Fehler als bewertet, aber mit Score 0 %.