dp-zp-agent/tools/rag/evaluation/results/full_dev_1148_dataset/failures.txt

890 lines
42 KiB
Plaintext

FAILS: 46
==============================================================================================================
ID: q0004
CATEGORY: topic_lookup
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Nájdi študenta alebo dokument, ktorý rieši tému „Systém získavania informácií v slovenskom jazyku“.
ANSWER: V dostupných dokumentoch ZP Wiki sa táto presná téma „Systém získavania informácií v slovenskom jazyku" nenašla pod týmto názvom, no nájdené sú študentské práce s tematikou agentov a systémov pre získavanie informácií alebo vyhľadávanie v slovenskom jazyku. Napríklad Kristián Sopkovič má v rámci dizertácie (2028) návrh témy „Agentový prístup k získavaniu informácií", kde agent iniciatívne získava potrebné informácie, a v rámci diplomovej práce (2024) pracoval na „cross-lingual information retrieval" (kroslinguálne vyhľadávanie), vrátane modelov pre slovenský jazyk. Ďalším príkladom je Dávid Stromp, ktorý mal v diplomovke cieľ „Zlepšiť proces získavania informácií" (2022), a Oleh Poiasnik, ktorý riešil „Generovanie jazyka s podporou vyhľadávania v doménovo orientovaných dátach" (2025), vrátane vyhľadávania v slovenských zákonoch.
Zdroje:
https://zp.kemt.fei.tuke.sk/students/2019/kristian_sopkovic
https://zp.kemt.fei.tuke.sk/students/2019/david_stromp
https://zp.kemt.fei.tuke.sk/students/2022/oleh_poiasnik
EXPECTED: ['Ján Holp', 'Systém získavania informácií v slovenskom jazyku']
ANSWER MATCHES: [False, True]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/jan_holp']
SOURCE MATCHES: [False]
SOURCE SCORE: 0.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0026
CATEGORY: specific_fact
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Aké metódy mal Maroš Harahus študovať v súvislosti s US Steel?
ANSWER: Maroš Harahus mal pri spolupráci s US Steel za úlohu naštudovať dáta z vysokej pece a následne navrhnúť a vyskúšať metódy na predikciu, vrátane rekurentných neurónových sietí (RNN, GRU, LSTM), Transformer network, Generative Adversarial Network (GAN), variáneho autoenkódera (VAE) a klasických štatistických modelov, ako aj metódy konverzie dát na vektor príznakov a výpočtu chybovej funkcie.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/maros_harahus
EXPECTED: ['grafové neurónové siete']
ANSWER MATCHES: [False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/maros_harahus']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0040
CATEGORY: reverse_lookup
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Kto sa venuje práci s názvom „Anotácia a rozpoznávanie pomenovaných entít v slovenskom jazyku“?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť záverečnú prácu s presným názvom „Anotácia a rozpoznávanie pomenovaných entít v slovenskom jazyku" a jej autora. Hoci sa v záznamoch objavuje téma rozpoznávania pomenovaných entít v slovenčine pri študentoch Martin Wencel (bakalárska práca 2020) a Serhii Yemets (bakalárska práca 2025), žiadny z nich nemá uvedený tento konkrétny názov práce.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2018/martin_wencel
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/serhii_yemets
Zdroj: https://zp.kemt.fei.tuke.sk/topics/otvorene
EXPECTED: ['Jakub Maruniak']
ANSWER MATCHES: [False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/jakub_maruniak']
SOURCE MATCHES: [False]
SOURCE SCORE: 0.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0041
CATEGORY: topic_lookup
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Nájdi študenta alebo dokument, ktorý rieši tému „Anotácia a rozpoznávanie pomenovaných entít v slovenskom jazyku“.
ANSWER: Na tému „Anotácia a rozpoznávanie pomenovaných entít v slovenskom jazyku" riešil študent Than Trung Thanh v rámci svojho bakalárskeho projektu v roku 2020, pri ktorom vytváral korpus a model pomocou nástrojov Spacy a Prodigy. Ďalšími študentmi, ktorí sa touto problematikou zaoberali, sú Martin Wencel (bakalárska práca 2020 o demonštrácii spracovania jazyka vrátane rozpoznávania entít) a Serhii Yemets (bakalárska práca 2025 o zlepšení slovenského modelu pre rozpoznávanie pomenovaných entít).
Zdroje:
https://zp.kemt.fei.tuke.sk/students/2017/than_trung_thanh
https://zp.kemt.fei.tuke.sk/students/2018/martin_wencel
https://zp.kemt.fei.tuke.sk/students/2022/serhii_yemets
EXPECTED: ['Jakub Maruniak', 'Anotácia a rozpoznávanie pomenovaných entít v slovenskom jazyku']
ANSWER MATCHES: [False, True]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/jakub_maruniak']
SOURCE MATCHES: [False]
SOURCE SCORE: 0.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0173
CATEGORY: specific_fact
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Aký bol hlavný cieľ bakalárskej práce Kristiána Sopkoviča?
ANSWER: Hlavným cieľom bakalárskej práce Kristiána Sopkoviča bolo zlepšiť presnosť modelu Spacy pre spracovanie slovenčine, čo zahŕňalo natrénovanie modelu, vykonanie experimentov a identifikáciu slabých miest na jeho následné vylepšenie.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2019/kristian_sopkovic
EXPECTED: ['Zlepšiť presnosť modelu Spacy pre slovenčinu']
ANSWER MATCHES: [False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2019/kristian_sopkovic']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0253
CATEGORY: disambiguation_year
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: Rozlíš rok začiatku štúdia a rok práce osoby Vladimír Ferko.
ANSWER: Z dostupných dokumentov sa nepodarilo nájsť rok, v ktorom Vladimír Ferko začal pracovať, je však uvedené, že rok začiatku štúdia bol 2021.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2021/vladimir_ferko
EXPECTED: ['2021', '2024']
ANSWER MATCHES: [True, False]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2021/vladimir_ferko']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0336
CATEGORY: topic_lookup
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Nájdi študenta alebo dokument, ktorý rieši tému „Rozpoznávanie nenávistnej reči pomocou veľkých jazykových modelov“.
ANSWER: Podľa dostupných informácií v ZP Wiki sa téma „Rozpoznávanie nenávistnej reči pomocou veľkých jazykových modelov" (alebo podobne sformulovaná ako „Rozpoznávanie nenávistnej reči pomocou transfomers") objavila ako jeden z nápadov na tému diplomovej práce študenta Martina Jancuru, pričom jeho finálna diplomová práca bola pomenovaná „Rozpoznávanie emócií v texte" a zameriavala sa na sentiment a emócie v texte.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2017/martin_jancura
EXPECTED: ['Tetiana Mohorian', 'Rozpoznávanie nenávistnej reči pomocou veľkých jazykových modelov']
ANSWER MATCHES: [False, True]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/tetiana_mohorian']
SOURCE MATCHES: [False]
SOURCE SCORE: 0.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0393
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Akú databázu a backend už Ján Pták podľa stavu používal?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o konkrétnej databáze alebo backendovom technologickom riešení, ktoré Ján Pták už používal. Dokument o jeho diplomovom projekte z roku 2026 s témou „Agent pre manažment záverečných prác" uvádza cieľ nasadiť riešenie pomocou Dockeru a rozhrania OpenWebUI, no neobsahuje explicitné uvedenie konkrétnej databázy ani backendového jazyka či frameworku, ktorý by už bol v stave projektu implementovaný.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0494
CATEGORY: specific_fact
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Aký problém mali malé modely pri práci Simony Bobrovčanovej?
ANSWER: Pri práci Simony Bobrovčanovej, konkrétne pri jej bakalárskej práci zamerané na automatickú sumarizáciu slovenských právnych textov, mali malé modely problém s príliš krátkou dĺžkou kontextu, vďaka čomu často vynechávali informácie nachádzajúce sa na konci textu.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2023/simona_bobrovcanova
EXPECTED: ['príliš maly kontext']
ANSWER MATCHES: [False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2023/simona_bobrovcanova']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0556
CATEGORY: specific_fact
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Na akých dvoch MTEB úlohách mal Oliver Pejic pracovať?
ANSWER: Oliver Pejic mal počas svojej stáže pracovať na vytvorení MTEB vyhodnocovacích úloh pre slovenskú detekciu nenávistných prejavov a pre slovenské vyhľadávanie odpovedí na otázky (retrieval).
Zdroj: https://zp.kemt.fei.tuke.sk/interns/oliver_pejic
EXPECTED: ['Slovak HATE speech', 'Slovak question answering']
ANSWER MATCHES: [False, False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/interns/oliver_pejic']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0570
CATEGORY: internship_topic
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Akému problému alebo téme sa venovala stáž osoby Cesar Abascal Gutierrez?
ANSWER: Stáž osoby Cesar Abascal Gutierrez sa venovala problému rozpoznávania neznámych entít v prenesených transkriptoch reči, pričom cieľom bolo vytvoriť manuálne anotovanú trénovaciu sadu a navrhnúť schému pre anotáciu.
Zdroj: https://zp.kemt.fei.tuke.sk/interns/cesar_gutierrez
EXPECTED: ['anotácia pomenovaných entít']
ANSWER MATCHES: [False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/interns/cesar_gutierrez']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0575
CATEGORY: specific_fact
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Aké tri hlavné ciele mal Cesar Abascal Gutierrez?
ANSWER: Cesar Abascal Gutierrez mal počas svojej stáže v lete 2019 stanovené tieto tri hlavné ciele: byť schopný rozpoznať neznáme menované entity, vytvoriť manuálne anotovanú trénovaciu množinu z prepisov reči a navrhnúť schému anotácie.
Zdroj: https://zp.kemt.fei.tuke.sk/interns/cesar_gutierrez
EXPECTED: ['recognize unknown named entities', 'manually annotated training set', 'annotation schema']
ANSWER MATCHES: [False, True, True]
ANSWER SCORE: 0.6666666666666666
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/interns/cesar_gutierrez']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0579
CATEGORY: internship_topic
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Akému problému alebo téme sa venovala stáž osoby Bogdan Paul Chiș?
ANSWER: Stáž osoby Bogdan Paul Chiš sa venovala téme extrakcie trojíc z lekárskych dát v mnohých jazykoch s cieľom zostaviť znalostný graf z balíčkových letákov liekov a využiť ho v inteligentnom agentovi odporúčajúcom lieky.
Zdroj: https://zp.kemt.fei.tuke.sk/interns/bogdan_paul_chis
EXPECTED: ['multilinguálna extrakcia trojíc z medicínskych dát']
ANSWER MATCHES: [False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/interns/bogdan_paul_chis']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0584
CATEGORY: specific_fact
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Aká bola téma stáže Bogdana Paula Chișa?
ANSWER: Témai Bogdana Paula Chișa počas jeho stáže bolo (multilingválne) extrahovanie trojíc z lekárskeho obsahu.
Zdroj: https://zp.kemt.fei.tuke.sk/interns/bogdan_paul_chis
EXPECTED: ['Triplet extraction from medical data']
ANSWER MATCHES: [False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/interns/bogdan_paul_chis']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0633
CATEGORY: topic_page_lookup
DIFFICULTY: medium
SHOULD ANSWER: True
QUESTION: Ktorý dokument v ZP Wiki sa priamo venuje téme „Strojový preklad“?
ANSWER: Dokument s názvom „Strojový preklad", ktorý sa priamo a podrobne venuje tejto téme, je študentská práca Patrika Pavlišina, kde sú rozebrané prístupy ako neurónový strojový preklad, architektúra Encoder-Decoder a modely ako BERT.
Zdroj:
https://zp.kemt.fei.tuke.sk/students/2016/patrik_pavlisin/tp20
EXPECTED: ['Strojový preklad']
ANSWER MATCHES: [True]
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/topics/translation']
SOURCE MATCHES: [False]
SOURCE SCORE: 0.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0827
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko GB RAM mal počítač alebo server, ktorý Jakub Maruniak používal pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa informácia o počte GB RAM počítača alebo servera, ktorý Jakub Maruniak používal pri práci, nepodarilo spoľahlivo nájsť.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/jakub_maruniak
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/jakub_maruniak']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0829
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Jakub Maruniak pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť informáciu o konkrétnom modeli GPU, ktorý použil Jakub Maruniak pri práci. Zdrojové dokumenty spomínajú použitie knižnice Spacy a nástroja Prodigy, ako aj vykonávanie experimentov s trénovaním modelu, ale nezisťuje sa v nich špecifikácia hardvéru, konkrétne modelu grafickej karty.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/jakub_maruniak
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/jakub_maruniak']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0832
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Dominik Nagy pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o konkrétnom modeli GPU, ktorý Dominik Nagy pri práci použil; v záznamoch je uvedené len, že prebiehalo trénovanie na GPU bez použitia balíka Anaconda, ale bez špecifikácie typu hardvéru.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/dominik_nagy
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/dominik_nagy']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0834
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko konkrétnych používateľov testovalo výsledný systém osoby Patrik Pavlišin?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť informáciu o počte konkrétnych používateľov, ktorí testovali výsledný systém patriaci osobe Patrik Pavlišin.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/patrik_pavlisin
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/patrik_pavlisin']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0838
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Dávid Omasta pri práci?
ANSWER: Z dostupných dokumentov ZP Wiki nie je uvedený konkrétny model GPU, ktorý Dávid Omasta použil, iba sa spomína, že experimenty s modelmi LLAMA a mt5-base sa nedarili realizovať kvôli obmedzeniam GPU.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2018/david_omasta
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2018/david_omasta']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0841
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Kristián Sopkovič pri práci?
ANSWER: Z dostupných dokumentov ZP Wiki sa nepodarilo nájsť informáciu o konkrétnom modeli GPU, ktorý Kristián Sopkovič pri práci používal. Zdroje síce spomínajú, že pri trénovaní modelov pracoval s hardvérom s 24 GB pamäte (v kontexte 1x24 GB Titan) a nasadzoval modely na Titan, ale nezverejňujú presný model GPU.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2019/kristian_sopkovic
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2019/kristian_sopkovic']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0843
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko konkrétnych používateľov testovalo výsledný systém osoby Michal Stromko?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o počte konkrétnych používateľov, ktorí testovali výsledný systém Michala Stromka.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2019/michal_stromko
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2019/michal_stromko']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0844
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Michal Stromko pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť informáciu o konkrétnom modeli GPU, ktorý Michal Stromko pri svojej práci použil. Zdroje uvádzajú používanie softvérových modelov a nástrojov, ako sú mnlr, MPnet, LABSE, SlovakBERT, FAISS a JinaDocArray, ale neobsahujú špecifikáciu hardvéru ani konkrétny typ grafickej karty.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2019/michal_stromko
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2019/michal_stromko']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0845
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko GB RAM mal počítač alebo server, ktorý Artem Yatsenko používal pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa túto informáciu nepodarilo spoľahlivo nájsť.
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2019/artem_yatsenko']
SOURCE MATCHES: [False]
SOURCE SCORE: 0.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: True
STRICT: False
==============================================================================================================
ID: q0847
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Artem Yatsenko pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa informáciu o konkrétnom modeli GPU, ktorý Artem Yatsenko pri práci využíval, nepodarilo spoľahlivo nájsť.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2019/artem_yatsenko
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2019/artem_yatsenko']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0848
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko GB RAM mal počítač alebo server, ktorý Matej Ščišľak používal pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa túto informáciu nepodarilo spoľahlivo nájsť.
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2021/matej_scislak']
SOURCE MATCHES: [False]
SOURCE SCORE: 0.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: True
STRICT: False
==============================================================================================================
ID: q0850
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Matej Ščišľak pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o konkrétnom modeli GPU, ktorý Matej Ščišľak pri práci použil.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2021/matej_scislak
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2021/matej_scislak']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0852
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko konkrétnych používateľov testovalo výsledný systém osoby Oleh Poiasnik?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o presnom počte konkrétnych používateľov, ktorí testovali výsledný systém od osoby Oleh Poiasnik. Dokumenty síce obsahujú úlohy osloviť kolegov na testovanie a slovne vyhodnotiť systém, ale neuvádzajú konkrétny počet účastníkov testovania.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/oleh_poiasnik
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/oleh_poiasnik']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0853
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Oleh Poiasnik pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť informáciu o konkrétnom modeli GPU, ktorý Oleh Poiasnik použil pri práci. Zdroje uvádzajú len použitie softvérových nástrojov (ako vllm, ollama) a modelov (Mistral, Qwen2.5, MiniLM), ale nie hardvéru GPU.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/oleh_poiasnik
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/oleh_poiasnik']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0854
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko GB RAM mal počítač alebo server, ktorý Tetiana Mohorian používal pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o tom, koľko GB RAM mal počítač alebo server, ktorý Tetiana Mohorian používala pri práci. Zdroj uvádza len, že ak by jej GPU počítača nestačilo, vedúci jej pridelí prístup na školský server alebo môže vyskúšať Google Colab, konkrétne hodnoty pamäte však nie sú uvedené.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/tetiana_mohorian
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/tetiana_mohorian']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0856
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Tetiana Mohorian pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť informáciu o konkrétnom modeli GPU, ktorý Tetiana Mohorian použila pri práci. Dokument uvádza len všeobecnú možnosť, že ak jej GPU vlastného počítača nebude stačiť, môže získať prístup na školský server alebo využiť Google Colab.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/tetiana_mohorian
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/tetiana_mohorian']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0864
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko konkrétnych používateľov testovalo výsledný systém osoby Samuel Džurina?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o presnom počte konkrétnych používateľov, ktorí testovali výsledný systém Samuela Džurinu. Dokumenty uvádzajú, že agenta je potrebné otestovať a vyhodnotiť formou dotazníka a že existujúci chatbot je použiteľný, ale nešpecifikujú počet testujúcich.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2023/samuel_dzurina
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2023/samuel_dzurina']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0865
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Samuel Džurina pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť informáciu o konkrétnom modeli GPU, ktorý Samuel Džurina používal pri práci; v zázname je síce spomenutá otázka o tom, či firma disponuje hardvérom s GPU, no odpoveď uvádza, že je možné riešenie externe a nie je špecifikovaný žiadny konkrétny model.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2023/samuel_dzurina
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2023/samuel_dzurina']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0870
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Valerii Kutsenko pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa túto informáciu nepodarilo spoľahlivo nájsť, pretože v uvedených záznamoch o Valerii Kutsenkovi sa síce spomínajú modely (napr. Slovak T5, mT5, Slovak Mistral, Slovak Falcon) a nástroje (Ollama), ale nie je explicitne uvedený konkrétny model GPU hardvéru, ktorý pri práci používal.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/valerii_kutsenko
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/valerii_kutsenko']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0873
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny model GPU používal Andrii Pervashov pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa túto informáciu nepodarilo spoľahlivo nájsť, pretože hoci je v zázname o Andrii Pervashovi uvedené, že pri trénovaní modelu sa stretol s problémami s pamäťou GPU a pracoval s obmedzením 128 znakov kvôli dostupnej pamäti, konkrétny model GPU nie je v zdrojoch explicitne uvedený.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/andrii_pervashov
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/andrii_pervashov']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0874
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko GB RAM mal počítač alebo server, ktorý Ján Pták používal pri práci?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo nájsť informáciu o tom, koľko GB RAM mal počítač alebo server, ktorý Ján Pták používal pri práci.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0879
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Koľko strán mala finálna záverečná práca osoby Ján Holp?
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť informáciu o počte strán finálnej záverečnej práce osoby Ján Holp.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/jan_holp
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/jan_holp']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0882
CATEGORY: unanswerable_missing_fact
DIFFICULTY: medium
SHOULD ANSWER: False
QUESTION: Aký konkrétny finančný rozpočet bol uvedený pre projekt osoby Ján Holp?
ANSWER: V dostupných dokumentoch ZP Wiki sa informáciu o konkrétnom finančnom rozpočte pre projekt Ján Holpa nepodarilo spoľahlivo nájsť.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/jan_holp
EXPECTED: []
ANSWER MATCHES: []
ANSWER SCORE: 1.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/jan_holp']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: False
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0968
CATEGORY: single_document_synthesis
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: Pri osobe Ján Pták uveď názov záznamu typu „diplomový projekt“ a rok, pri ktorom je táto práca na ZP Wiki uvedená.
ANSWER: Ján Pták vypracováva diplomový projekt s názvom „Agent pre manažment záverečných prác“ a rok začatia štúdia pre túto prácu je 2022.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak
EXPECTED: ['Agent pre manažment záverečných prác', '2026']
ANSWER MATCHES: [True, False]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0982
CATEGORY: single_document_synthesis
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: Rozlíš pri osobe Dárius Lindvai rok začiatku štúdia a rok, pri ktorom je na ZP Wiki uvedený záznam typu „diplomová práca“.
ANSWER: V dostupných dokumentoch ZP Wiki sa nepodarilo spoľahlivo nájsť rok začiatku štúdia pre osobu Dárius Lindvai, hoci je uvedený záznam o diplomovom projekte (často používanom ako súčasť diplomovej práce) v roku 2020.
Zdroj:
https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai
EXPECTED: ['2016', '2021']
ANSWER MATCHES: [True, False]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q0990
CATEGORY: single_document_synthesis
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: V dokumente osoby Tomáš Kuchárik, ktorý súvisí s témou „Question Answering“, uveď názov záznamu typu „diplomová práca“ a rok, pri ktorom je táto práca uvedená.
ANSWER: Tomáš Kuchárik má zaznamenanú diplomovú prácu s názvom „Tvorba korpusu otázok a odpovedí v slovenskom jazyku pomocou crowdsourcingu" z roku 2021, ktorá sa zameriava na tému Question Answering.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/tomas_kucharik
EXPECTED: ['Tvorba korpusu otázok a odpovedí v slovenskom jazyku pomocou strojového prekladu', '2022']
ANSWER MATCHES: [False, False]
ANSWER SCORE: 0.0
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/tomas_kucharik']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q1022
CATEGORY: single_document_synthesis
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: V dokumente osoby Dárius Lindvai, ktorý súvisí s témou „interpunkcia“, uveď názov záznamu typu „diplomová práca“ a rok, pri ktorom je táto práca uvedená.
ANSWER: Dárius Lindvai vypracoval diplomovú prácu s názvom „Obnovenie interpunkcie pomocou hlbokých neurónových sietí“ v roku 2020.
Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai
EXPECTED: ['Obnovenie interpunkcie pomocou hlbokých neurónových sietí', '2021']
ANSWER MATCHES: [True, False]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai']
SOURCE MATCHES: [True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q1092
CATEGORY: multi_document
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: Porovnaj záznamy osôb Dárius Lindvai a Ján Pták. Pri osobe Dárius Lindvai použi záznam typu „diplomová práca“ a pri osobe Ján Pták záznam typu „diplomový projekt“. Uveď názov každej práce a rok, pri ktorom je na ZP Wiki uvedená.
ANSWER: Z dostupných záznamov na ZP Wiki sa Dárius Lindvai uvádza s diplomovou prácou (konkrétne v kontexte diplomového projektu z roku 2020) s názvom „Obnovenie interpunkcie pomocou hlbokých neurónových sietí", zatiaľ čo pri Jánovi Ptákovi sa v zázname typu „diplomový projekt" uvádza téma „Agent pre manažment záverečných prác" pre rok 2026, no explicitný finálny názov práce nie je v poskytnutom kontexte uvedený.
Zdroje:
https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai
https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak
EXPECTED: ['Obnovenie interpunkcie pomocou hlbokých neurónových sietí', '2021', 'Agent pre manažment záverečných prác', '2026']
ANSWER MATCHES: [True, False, True, True]
ANSWER SCORE: 0.75
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai', 'https://zp.kemt.fei.tuke.sk/students/2022/jan_ptak']
SOURCE MATCHES: [True, True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q1109
CATEGORY: multi_document
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: Porovnaj záznamy osôb Martin Šarišský a Andrii Pervashov. Pri osobe Martin Šarišský použi záznam typu „diplomová práca“ a pri osobe Andrii Pervashov záznam typu „diplomová práca“. Uveď názov každej práce a rok, pri ktorom je na ZP Wiki uvedená.
ANSWER: V dostupných dokumentoch ZP Wiki sa pre Martina Šarišského pri diplomovej práci z roku 2026 nenachádza uvedený názov práce, pretože sekcia „Názov práce“ je prázdna a obsahuje len odkaz na repozitár, zatiaľ čo pre Andriiho Pervashova je pri diplomovej práci z roku 2027 uvedený návrh na tému „Prepis reči pre tvorbu štruktúrovaného zdravotného záznamu“, pričom konkrétne pole „Názov“ nie je explicitne vyplnené.
Zdroje:
https://zp.kemt.fei.tuke.sk/students/2021/martin_sarissky
https://zp.kemt.fei.tuke.sk/students/2022/andrii_pervashov
EXPECTED: ['Agentové systémy pomocou veľkého jazykového modelu', '2026', 'Prepis reči pre tvorbu štruktúrovaného zdravotného záznamu', '2027']
ANSWER MATCHES: [False, True, True, True]
ANSWER SCORE: 0.75
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2021/martin_sarissky', 'https://zp.kemt.fei.tuke.sk/students/2022/andrii_pervashov']
SOURCE MATCHES: [True, True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q1125
CATEGORY: multi_document
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: Porovnaj záznamy osôb Dárius Lindvai a Andrii Pervashov. Pri osobe Dárius Lindvai použi záznam typu „diplomová práca“ a pri osobe Andrii Pervashov záznam typu „diplomová práca“. Uveď názov každej práce a rok, pri ktorom je na ZP Wiki uvedená.
ANSWER: Dárius Lindvai vypracovával diplomový projekt s názvom „Obnovenie interpunkcie pomocou hlbokých neurónových sietí“ v roku 2020 a Andrii Pervashov má na ZP Wiki uvedený návrh na tému diplomovej práce s názvom „Prepis reči pre tvorbu štruktúrovaného zdravotného záznamu“ pre rok 2027.
Zdroje:
https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai
https://zp.kemt.fei.tuke.sk/students/2022/andrii_pervashov
EXPECTED: ['Obnovenie interpunkcie pomocou hlbokých neurónových sietí', '2021', 'Prepis reči pre tvorbu štruktúrovaného zdravotného záznamu', '2027']
ANSWER MATCHES: [True, False, True, True]
ANSWER SCORE: 0.75
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2016/darius_lindvai', 'https://zp.kemt.fei.tuke.sk/students/2022/andrii_pervashov']
SOURCE MATCHES: [True, True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False
==============================================================================================================
ID: q1136
CATEGORY: multi_document
DIFFICULTY: hard
SHOULD ANSWER: True
QUESTION: Porovnaj záznamy osôb Ján Malinovský a Yevhenii Medushivskyi. Pri osobe Ján Malinovský použi záznam typu „diplomový projekt“ a pri osobe Yevhenii Medushivskyi záznam typu „bakalárska práca“. Uveď názov každej práce a rok, pri ktorom je na ZP Wiki uvedená.
ANSWER: Ján Malinovský vypracováva diplomový projekt s názvom „Grafové vyhľadávanie pre podporu vzdelávania" a v ZP Wiki je uvedený v roku 2022, kedy študent začal štúdium. Yevhenii Medushivskyi vypracúva bakalársku prácu s názvom „Získavanie textu z webových stránok" a v ZP Wiki je uvedený v roku 2023, kedy študent začal štúdium.
Zdroje:
https://zp.kemt.fei.tuke.sk/students/2022/jan_malinovsky
https://zp.kemt.fei.tuke.sk/students/2023/yevhenii_medushivskyi
EXPECTED: ['Grafové vyhľadávanie pre podporu vzdelávania', '2026', 'Získavanie textu z webových stránok', '2026']
ANSWER MATCHES: [True, False, True, False]
ANSWER SCORE: 0.5
EXPECTED SOURCES: ['https://zp.kemt.fei.tuke.sk/students/2022/jan_malinovsky', 'https://zp.kemt.fei.tuke.sk/students/2023/yevhenii_medushivskyi']
SOURCE MATCHES: [True, True]
SOURCE SCORE: 1.0
SHOULD ANSWER OK: True
RETURNED NO ANSWER: False
STRICT: False