From 967567a82dcf156836c84f39df8df718152e56ed Mon Sep 17 00:00:00 2001 From: dano Date: Fri, 24 Feb 2023 08:50:30 +0000 Subject: [PATCH] Update 'pages/students/2018/ondrej_megela/README.md' --- pages/students/2018/ondrej_megela/README.md | 18 ++++++++++++++++++ 1 file changed, 18 insertions(+) diff --git a/pages/students/2018/ondrej_megela/README.md b/pages/students/2018/ondrej_megela/README.md index d944fc1f..63886280 100644 --- a/pages/students/2018/ondrej_megela/README.md +++ b/pages/students/2018/ondrej_megela/README.md @@ -41,6 +41,24 @@ Cieľ: Využiť slovenský generatívny model na tvorbu databázy otázok a odpo https://git.kemt.fei.tuke.sk/om385wg/DP +Stretnutie 24.2.2023 + +Stav: + +- Vytvorený notebook pre vyhodnotenie generovanie otázok pomocou BLEU. Zatiaľ nefunguje, pretože asi je potrebné spoávne zoradiť vygenerovanú otázku a referenciu, Ku paragrafu môže existovať viacero rôznych otázok, preto je tažké ich porovnať pomocou BLEU ngramov. + +Úlohy: + +- Na vyhodnotenie použiť sémantický model. POdľa modelu vytvoriť dvojice - generovaná veta a referencia. +- Na vyhodnotneie použiť "Answerability" - QA model s thresholdom. +- Pracovať na diplomovej práci - písať prehľad - metódy, metriky vyhodnotenia, datasety. +- Do DP pripraviť experiment s vyhodnotením. + +Zásobník úloh: +- Priradiť vgenerované vety ku referencii na základe sémantickej podobnosti. +- Priamo merať sémantickú pokdobnosť vygenerovaných viet a referenciíá. +- Použiť operátor max, mean alebo kl-diveregencia, cross-entropy? + Stretnutie 23.1.2023 Stav: