KEMT/zpwiki
31
1
Fork 9
Code Issues Pull Requests Releases Wiki Activity

Update 'pages/students/2021/eduard_matovka/README.md'

Browse Source
This commit is contained in:
dano 2023-10-12 11:09:26 +00:00
parent db7890b061
commit 98359fe3c5
1 changed files with 7 additions and 4 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

11
pages/students/2021/eduard_matovka/README.md
View File

@ -23,10 +23,9 @@ Natrénovať jazykový model pre jednoduchú slovenskú konverzáciu.
Predbežné úlohy:
- [x] Oboznámte sa s existujúcimi modelmi pre generovanie slovenského jazyka.
- Oboznámte sa s existujúcimi modelmi pre generovanie slovenského jazyka.
- Pripravte korpus diskusií v slovenskom jazyku. Vyberte vhodný zdroj diskusí a pripravte ho do podoby vhodnej na trénovanie neurónových sietí. Napr. modrý koník, modrá strecha, íné diskusie.
- Natrénujte neurónovú sieť pre odpovedanie v diskusiách.
- Druhá možnosť je použiť dáta z REditu.
- Vytvorte webové demo.
Stretnutie 12.10.2023
@ -34,11 +33,15 @@ Stretnutie 12.10.2023
Stav:
- Pripravený skript na preklad pomoocu HF transformers a Helsinki NLP modelov aj s TKInter rozhraním.
- Písomná príprava podľa pokynov.
Úlohy:
- Dobrý model na generovanie Slov. jazyka je Slovak T5 Small.
- Pokračujte v teoretickej príprave podľa otvorených úloh.
- Vytvorte dataset slovenských konverzácií. Vyberte zdroj dát, pomocou scrapera extrahujte dáta a upravte ich do vhodného formátu JSON. Stiahnite časť alebo celú webovú stránku do viacerých htmls súborov. Neposielajte veľa requestov za minútu. Dobrý nástorj na stianutie je wget. Napíšte skript, ktorý pomocu knižnice BeautifulSoup4 extrahuje diskusie a uloží ich do JSON.
Úlohy:
- Druhá možnosť je použiť dáta z Reditu alebo Faceboku, podľa skriptov V. Ferko.
- Generatívny model už natrénoval p. Omasta a p. Megela. Oboznámte sa s ich profilmi.
Stretnutie 1.8.2023