pm623gs/zpwiki
1
0
Fork 0
forked from KEMT/zpwiki
Code Issues Pull Requests Releases Wiki Activity

Update 'pages/students/2021/eduard_matovka/README.md'

Browse Source
This commit is contained in:
dano 2023-10-12 11:05:30 +00:00
parent c7cd410f7d
commit db7890b061
1 changed files with 15 additions and 2 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

15
pages/students/2021/eduard_matovka/README.md
View File

@ -23,11 +23,24 @@ Natrénovať jazykový model pre jednoduchú slovenskú konverzáciu.
Predbežné úlohy:
- Oboznámte sa s existujúcimi modelmi pre generovanie slovenkého jazyka.
- [x] Oboznámte sa s existujúcimi modelmi pre generovanie slovenského jazyka.
- Pripravte korpus diskusií v slovenskom jazyku. Vyberte vhodný zdroj diskusí a pripravte ho do podoby vhodnej na trénovanie neurónových sietí. Napr. modrý koník, modrá strecha, íné diskusie.
- Natrénujte neurónovú sieť pre odpovedanie v diskusiách.
- Druhá možnosť je použiť dáta z REditu.
- Vytvorte webové demo.
Stretnutie 12.10.2023
Stav:
- Pripravený skript na preklad pomoocu HF transformers a Helsinki NLP modelov aj s TKInter rozhraním.
- Dobrý model na generovanie Slov. jazyka je Slovak T5 Small.
- Pokračujte v teoretickej príprave podľa otvorených úloh.
- Vytvorte dataset slovenských konverzácií. Vyberte zdroj dát, pomocou scrapera extrahujte dáta a upravte ich do vhodného formátu JSON. Stiahnite časť alebo celú webovú stránku do viacerých htmls súborov. Neposielajte veľa requestov za minútu. Dobrý nástorj na stianutie je wget. Napíšte skript, ktorý pomocu knižnice BeautifulSoup4 extrahuje diskusie a uloží ich do JSON.
Úlohy:
Stretnutie 1.8.2023
Stav: