diff --git a/pages/students/2018/ondrej_megela/README.md b/pages/students/2018/ondrej_megela/README.md index d944fc1fb8..638862803f 100644 --- a/pages/students/2018/ondrej_megela/README.md +++ b/pages/students/2018/ondrej_megela/README.md @@ -41,6 +41,24 @@ Cieľ: Využiť slovenský generatívny model na tvorbu databázy otázok a odpo https://git.kemt.fei.tuke.sk/om385wg/DP +Stretnutie 24.2.2023 + +Stav: + +- Vytvorený notebook pre vyhodnotenie generovanie otázok pomocou BLEU. Zatiaľ nefunguje, pretože asi je potrebné spoávne zoradiť vygenerovanú otázku a referenciu, Ku paragrafu môže existovať viacero rôznych otázok, preto je tažké ich porovnať pomocou BLEU ngramov. + +Úlohy: + +- Na vyhodnotenie použiť sémantický model. POdľa modelu vytvoriť dvojice - generovaná veta a referencia. +- Na vyhodnotneie použiť "Answerability" - QA model s thresholdom. +- Pracovať na diplomovej práci - písať prehľad - metódy, metriky vyhodnotenia, datasety. +- Do DP pripraviť experiment s vyhodnotením. + +Zásobník úloh: +- Priradiť vgenerované vety ku referencii na základe sémantickej podobnosti. +- Priamo merať sémantickú pokdobnosť vygenerovaných viet a referenciíá. +- Použiť operátor max, mean alebo kl-diveregencia, cross-entropy? + Stretnutie 23.1.2023 Stav: