diff --git a/evaluation/json_files/rag_answer_overrides.json b/evaluation/json_files/rag_answer_overrides.json index 7f2fc5d..931e003 100644 --- a/evaluation/json_files/rag_answer_overrides.json +++ b/evaluation/json_files/rag_answer_overrides.json @@ -3,7 +3,7 @@ "question": "Aká téma diplomovej práce je uvedená pri osobe „Ján Holp“?" }, "q0010": { - "question": "Je rok 2016 rokom diplomovej práce Jána Holpa? Ak nie, čo rok 2016 označuje a v ktorom roku je uvedená jeho diplomová práca?" + "question": "Je rok 2016 rokom diplomovej práce Jána Holpa? Ak nie, čo rok 2016 označuje a v ktorom roku je uvedená jeho diplomová práca?" }, "q0020": { "question": "Aká téma diplomovej práce je uvedená pri osobe „Maroš Harahus“?" @@ -121,5 +121,18 @@ }, "q0529": { "question": "Aká téma bakalárskej práce je uvedená pri osobe „Denis Le Thanh“?" + }, + "q0024": { + "question": "Ktorý študentský dokument o grafových neurónových sieťach má v metadátach ako autora dokumentu uvedeného Maroša Harahusa?", + "expected_answer_contains": [ + "Dmytro Mural", + "Maroš Harahus", + "grafové neurónové siete" + ], + "expected_source_urls": [ + "https://zp.kemt.fei.tuke.sk/students/2019/dmytro_mural" + ], + "should_answer": true, + "note": "Answer-level disambiguation: študentský dokument patrí Dmytrovi Muralovi; Maroš Harahus je v jeho metadátach uvedený ako autor dokumentu. Nemá sa zamieňať autor dokumentu so študentom, ktorý prácu vypracoval." } }