1.1 KiB
1.1 KiB
| 1 | id | split | category | difficulty | question | requested_model | response_model | tool_called | tool_call_count | answer_contains_score | source_url_score | should_answer_score | overall_score | strict_pass | expected_answer_contains | expected_source_urls | rag_source_urls | answer | first_model_latency_seconds | tool_latency_seconds | final_model_latency_seconds | total_latency_seconds | prompt_tokens | completion_tokens | total_tokens | error |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 2 | q0010 | dev | adversarial_year | hard | Je rok 2016 rokom diplomovej práce Jána Holpa? Ak nie, čo rok 2016 označuje a v ktorom roku je uvedená jeho diplomová práca? | model120-fast | Qwen3.5-122B-A10B-Q4_K_M | True | 1 | 1.0 | 1.0 | 1.0 | 1.0 | True | ["2016", "2021"] | ["https://zp.kemt.fei.tuke.sk/students/2016/jan_holp"] | ["https://zp.kemt.fei.tuke.sk/students/2016/jan_holp"] | Rok 2016 nie je rokom diplomovej práce Jána Holpa, ale označuje rok začiatku jeho štúdia. Jeho diplomová práca s názvom „Systém získavania informácií v slovenskom jazyku" je uvedená v roku 2021. Zdroj: https://zp.kemt.fei.tuke.sk/students/2016/jan_holp | 1.785037 | 0.039992 | 4.012958 | 5.838173 | 3223 | 145 | 3368 |