Compare commits

...

3 Commits

Author SHA1 Message Date
0e383c5122 Merge branch 'master' of git.kemt.fei.tuke.sk:KEMT/zpwiki 2025-11-03 09:57:52 +01:00
5f7353564f zz 2025-11-03 09:57:46 +01:00
940bf96fcd zz 2025-10-24 14:56:17 +02:00
2 changed files with 46 additions and 5 deletions

View File

@ -22,6 +22,27 @@ Možné ciele:
- Vyhodnotiť viacero jazykových modelov vo viacerých jazykoch. - Vyhodnotiť viacero jazykových modelov vo viacerých jazykoch.
- Navrhnúť zlepšenia na zvýšenie bezpečnosti. - Navrhnúť zlepšenia na zvýšenie bezpečnosti.
Stretnutie 3.11.2025
Stav:
- Vyskúšané modely (mistral, openchat) pre generovanie nebezpečných odpovedí a pre detekciu nebezpečných promptov.
- Splnená väčšina otvorených úloh.
Úlohy:
- Ako číselne vyhodnotiť "nebezpečnosť modelu"? Prečítajte si články. Aké sú metriky? Aké sú databázy?
- Nájsť alebo natrénovať model pre detekciu nebezpečných promptov a nebezpečných odpovedí.
- Číselne porovnajte nebezpečnosť viacerých mdoelov. llama, gemma, qwen gpt-oss, Výsledky dajte do tabuľky.
- Vybrať vhodný model pre potlačenie nebezpečných odpovedí pomocou DPO. Ako hodnotenie poslúži datababáza nebezpečných promptov, alebo iný model alebo aj náhodná hodnota.
- Skripty dávajte na GIT.
- Pokračujte v písaní.
Zásobník úloh:
- Zarovnajte ľubovoľný model zvolenou metódou.
- Pripravte postup pre zarovnanie slovenského modelu.
Stretnutie 10.10.2025: Stretnutie 10.10.2025:
Stav: Stav:
@ -36,11 +57,11 @@ Preštudované:
Úlohy: Úlohy:
- pozrite si databázy PKU-Alignment/PKU-SafeRLHF alebo aurora-m/adversarial-prompts . Vyhľadajte iné databázy. - [x] pozrite si databázy PKU-Alignment/PKU-SafeRLHF alebo aurora-m/adversarial-prompts . Vyhľadajte iné databázy.
- Vyskúšajte LLM s týmito databázami. Ako sa bydú správať? - [x] Vyskúšajte LLM s týmito databázami. Ako sa bydú správať?
- Oboznámte sa s pojmom LLM alignment. Ako upravíme správanie jazykového modelu pomocou reinformcement learning? - [x] Oboznámte sa s pojmom LLM alignment. Ako upravíme správanie jazykového modelu pomocou reinformcement learning?
- Používajte google scholar a píšte si poznámky. - [ ] Používajte google scholar a píšte si poznámky.
- Pokračujte v otvorených úlohách - DPO. - [-] Pokračujte v otvorených úlohách - DPO.
Zásobník úloh: Zásobník úloh:

View File

@ -26,3 +26,23 @@ Orchestrácia veľkých jazykových modelov pomocou model context protokolu s vy
- Vybrať viacero vhodných modelov a sprístupniť ich pomoocou Webového rozhrania a REST API - Vybrať viacero vhodných modelov a sprístupniť ich pomoocou Webového rozhrania a REST API
- Pridať podporu RAG, vyhľadávania na webe, volania funkcií a nástrojov. - Pridať podporu RAG, vyhľadávania na webe, volania funkcií a nástrojov.
Stretnutie 24.10.2025
Stav:
- Funguje OpenWebUI : WebUI, Proxy, MCP Adapter, OLLAMA server
Úlohy:
- Pridať RAG. Musí byť nejaká vektorová databáza.
- Dokončiť Docker Compose Skripty aj dokumentáciu a dať ich na KEMT GIT
- Do práce pidajte prehľad LLM Deployment - prečítaje a citujete články z Google scholar.
Budúce úlohy:
- Nasadiť systém do produkcie na školskom servri.
- Navrhnúť politiku prístupu pre študentov, Autentifikácia pomocou LDAP?
- Dalo by sa urobiť aj dotrénovanie?
- Pozrieť pluginy - doplniť zaujímavé vlastnosti.