diff --git a/pages/students/2020/kamil_tomcufcik/README.md b/pages/students/2020/kamil_tomcufcik/README.md index 64675aa02..6cc8c8ae3 100644 --- a/pages/students/2020/kamil_tomcufcik/README.md +++ b/pages/students/2020/kamil_tomcufcik/README.md @@ -21,6 +21,7 @@ Stav: - Metrika Pass@K sa používa na vyhodnotenie generovaného kódu. Meria, koľko automatických textov bolo splnených. Používa sa aj BLEU, verzia CodeBLEU. CodeJudge. - Na testovanie generovaných testov sa používajú: vykonanie produkčného kódu, pokrytie testov, mutácie kódu, statická analýza generovaného kódu. +- Vyskúšaný model polycoder (na C),codeparrot (na python) na kaggle. Code T5 zatiaľ nie je vyskúšaný. Stretnutie 14.11. 2924 @@ -34,7 +35,7 @@ Stav: Zistite odpovede na tieto otázky: - Ako zistíme, že vygenerovaný kód je dobrý. - Ako zistíme, že vygenerovaný test vyhovuje špecifikácii? -- Vypracujte písomný prehľad. Napíšte aké modely sa používajú, Akým spôsobom sa vyhodnocujú. Použite odborné článkyl. Odborné články nájdete na google scholar alebo scopus. +- Vypracujte písomný prehľad. Napíšte aké modely sa používajú, Akým spôsobom sa vyhodnocujú. Použite odborné články. Odborné články nájdete na google scholar alebo scopus. - Pripravte vzorovú dátovú množinu. Hotové testy, implementácie aj dokumentáciu., Možno vybrať exsitujúci open source projekt alebo hotovú dátovú množinu. - Vyskúšajte niekoľko jazkovych modelov pre generovanie kódu aj generovanie testov. - Do diplomovej práce vypracujte experimenty kde vyhodnotíte jazykové modely pre generovanie testov v rôznych prostrediach.