docs: record rechtsprechung eval baseline

This commit is contained in:
2026-09-15 16:42:49 +02:00
parent a11f2740f7
commit f525fb4862
3 changed files with 17 additions and 8 deletions
+8 -6
View File
@@ -186,12 +186,14 @@ Normauszüge und 5 als nichtamtlich markierte EuGH-Textwiedergaben im neuen
`rj-rjs-*`-ID-Raum. Der Reindex erzeugte **16.480 Chunks** (1.496 neue
`bge-m3`-Embeddings, 75 s). Retrieval mit dem erweiterten 50-Fragen-Goldset:
Hit-Rate **0,956** · Recall@8 **0,922** · MRR 0,661; das Recall-Gate >0,9
bleibt erfüllt, alle vier neuen Rechtsprechungsfälle werden gefunden. Vier
gezielte Antwortläufe (q-120123) sind zitiergültig, ohne Verweigerung und
ohne Regenerierung; der volle Antwortmodus-Eval für den erweiterten Korpus
steht noch aus. EuGH-Texte sind im Kontext und in der Quelle explizit als
nichtamtliche lexetius-Wiedergabe gekennzeichnet; der Systemprompt verlangt
nun dieselbe Einschränkung auch in der Antwort.
bleibt erfüllt, alle vier neuen Rechtsprechungsfälle werden gefunden. Der
vollständige Antwortmodus-Eval (50 Fragen) erreicht **100 % Zitier-Präzision**
und **100 % korrekte Verweigerungen**, bei 93,3 % erwarteter Quelle, mean
39,4 s / p95 82,2 s und fünf Regenerierungen. Report:
`data/eval-qwen38-rj.json` (lokal, unversioniert). EuGH-Texte sind im Kontext
und in der Quelle explizit als nichtamtliche lexetius-Wiedergabe
gekennzeichnet; der Systemprompt verlangt nun dieselbe Einschränkung auch in
der Antwort.
## Dateien