KEMT/zpwiki
32
1
Fork 9
Code Issues Pull Requests Releases Wiki Activity

Update 'pages/students/2020/pavol_hudak/README.md'

Browse Source
This commit is contained in:
dano 2024-04-05 13:52:35 +00:00
parent 56535a22d3
commit 5a3033991b
1 changed files with 19 additions and 1 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

20
pages/students/2020/pavol_hudak/README.md
View File

@ -13,7 +13,18 @@ rok začiatku štúdia: 2020
Ciel: Ciel:
Vylepšiť slovenský veľký jazykový model. Vylepšiť RAG - retrieval augmented generation pre slovenčinu. - Vylepšiť slovenský veľký jazykový model. Vylepšiť RAG - retrieval augmented generation pre slovenčinu.
- Dotrénovanie LLM pre zlepšenie jeho schopnosti odpovedať na otázku v slovenskom jazyku.
Ciele na semester:
- Zobrať veľký jazykový model (základný alebo instruct alebo chat).
- Skúsiť ho dotrénovať metódou PEFT pre úlohu Question Answering na korpuse SK QUAD.
- Vyhodnotiť presnosť QA dotrénovaného modelu.
Ďalšie nápady:
-
Vybrať jednu z úloh: Vybrať jednu z úloh:
@ -21,6 +32,13 @@ Vybrať jednu z úloh:
- Dotrénovanie LLM na dostupnom hardvéri - LORA-PEFT - Dotrénovanie LLM na dostupnom hardvéri - LORA-PEFT
- Rozpoznávanie nenávistnej reči (pomocou LLM?, prompting, finetuning) - Rozpoznávanie nenávistnej reči (pomocou LLM?, prompting, finetuning)
Stretnutie 5.4.
Stav:
- Nainštalované PrivateGPT.
- Nainštalovaná Anaconda a Python, aj štúdium a príprava.
Stretnutie 23.2. Stretnutie 23.2.
Stav: Stav: