diff --git a/pages/students/2022/yevhenii_leonov/README.md b/pages/students/2022/yevhenii_leonov/README.md index b4cb04d5..d215252b 100644 --- a/pages/students/2022/yevhenii_leonov/README.md +++ b/pages/students/2022/yevhenii_leonov/README.md @@ -27,8 +27,6 @@ Predbežné zadanie: Návrh na tému: - Vyhodnotenie systémov RAG -- Zostavte množinu na vyhodnotenie RAG systému pre medicínsku oblasť. -- Napíšte príklady alebo použite generatívny model Spolupráca Oleh Poiasnik @@ -44,7 +42,14 @@ Stav: - Budeme využívať systém RAGAS. Nainštalujte si ho a vyskúšajte. OPtimálne použite systém Anaconda-Linux. V anaconda využívajte virtuálne prostredia. - Naštudujte dokumentáciu a články https://docs.ragas.io/en/stable/index.html +- Vyhľadajte vedecké články na tému "retrieval augmented generation evaluation" a prečítajte si aj článok o "ragas". Použite google scholar. Napíšte si poznámky. +- Zistite a opíšte aké metriky sa používajú. +Zásobník úloh: + +- Zostavte množinu na vyhodnotenie RAG systému pre medicínsku oblasť. +- Množina bude vyjadrovať "testovací scenár" navštevy lekárne. V prvej fáze neriešime dialóg, ale otázky a odpovede. +- Napíšte príklady alebo použite generatívny model