forked from KEMT/zpwiki
| .. | ||
| img | ||
| README.md | ||
Trénovacie experimenty
Do tohto súboru sa budú postupne zapisovať štatistiky a poznámky ku vykonaným trénovacím experimentom.
V rámci experimentu pracujeme s dvomi databázami:
- Wikiart - vlastná anotovaná databáza článkov. Každý článok = 1 veta.
- Skner - anotovaná databáza z https://skner.tukekemt.xyz/ . Počet viet v jednotlivých článkoch je rôzny.
Trénovanie Wikiart
- Experiment - trénovanie modelu pomocou databázy Wikiart
Celkovo 501 článkov.
351 použitých na trénovanie, 150 na testovanie.
15 iterácii trénovania.
F-skóre natrénovaného modelu: 55,55%
| Entita | Počet anotácii | F-skóre |
|---|---|---|
| PER | 85 | 41,66% |
| LOC | 240 | 65,51% |
| ORG | 30 | 0,0% |
| MISC | 42 | 44,44% |
Trénovanie Skner
- Experiment - trénovanie modelu pomocou databázy skner.
Celkovo 488 článkov.
342 použitých na trénovanie, 146 na testovanie.
15 iterácii trénovania.
F-skóre natrénovaného modelu: 60,99%
| Entita | Počet anotácii | F-skóre |
|---|---|---|
| PER | 376 | 60,07% |
| LOC | 885 | 67,39% |
| ORG | 149 | 42,10% |
| MISC | 80 | 8,69% |
3. Experiment
- Experiment - na natrénovanie modelu je využitá kompletná databáza Skner. Na testovanie modelu je využitá databáza Wikiart.
15 iterácii trénovania.
F-skóre natrénovaného modelu: 49,67%
| Entita | F-skóre |
|---|---|
| PER | 39,08% |
| LOC | 60,99% |
| ORG | 27,77% |
| MISC | 4,44% |
4. Experiment
- Experiment - Obe databázy sme zlúčili.
Celkovo 989 článkov.
693 použitých na trénovanie, 296 na testovanie.
15 iterácii trénovania.
F-skóre natrénovaného modelu: 61,90%
| Entita | Počet anotácii | F-skóre |
|---|---|---|
| PER | 461 | 54,00% |
| LOC | 1125 | 71,87% |
| ORG | 179 | 42,00% |
| MISC | 122 | 18,18% |