History

Daniel Hladek dd21dc5c9e stretko		2020-03-05 13:03:57 +01:00
..
timovy_projekt	Aktualizovat „pages/students/2016/maros_harahus/timovy_projekt/README.md“	2019-12-21 19:18:39 +00:00
README.md	stretko	2020-03-05 13:03:57 +01:00

Maroš Harahus

Diplomový projekt 2020

Zdroje:

Doplnenie podpory morfologického značkovania slovenského jazyka do nlp frameworku (spacy alebo flair)

Úlohy na tento semester:
- Pozrieť jazykové zdroje z https://www.clarin.eu/resource-families/manually-annotated-corpora (MultextEast)
- Oboznámte sa so sadou morfologických značiek Universal Dependencies https://universaldependencies.org/sk/index.html
- Oboznámte sa so sadou SNK https://korpus.sk/morpho.html
- Natrénovať Spacy Model s POS a s pretrénovaním

Stretnutie 5.3.2020:

Úlohy na ďalšie stretnutie:

zobrať alebo vytvoriť fasttext model
pozrieť sa na spacy pretrain - tam sa bude dať využiť fasttext model
vložiť ho do spacy modelu pomocou spacy pretrain
pozrieť si http://nl.ijs.si/ME/V4/ morfosyntaktická anotácia MULTEXT
porozmýšľať ako využiť korpus "MultextEast" - potrebné vytvoriť mapovanie značiek na SNK Tagset

Poznámka:

Stretnutie: 20.2.2020:

Úlohy na ďalšie stretnutie:

Pozrieť https://spacy.io/usage/training#tagger-parser
Pozrieť si čo je word embedding - word2vec, fasttext, glove
Nájsť spôsob ako využiť existujúci model word embedding pri trénovaní https://fasttext.cc/docs/en/pretrained-vectors.html
Ako natrénovať Spacy POS model?

Názov diplomovej práce: Štatistická morfologická anotácia slovenského jazyka

Vypracujte prehľad spôsobov morfologickej anotácie slovenského jazyka.
Pripravte trénovacie dáta vo vhodnom formáte a natrénujte štatistický model morfologického značkovania
Vyhodnoťte presnosť značkovania a navrhnite možné zlepšenia.

Projektové stránky:

Vypracovať tutoriál pre prácu s nástrojom Spacy pre úlohu zisťovania gramatických značiek (part-of-speech). Súčasťou tutoriálu by mali byť aj odkazy na relevantné zdroje (odborné članky, min. 4).