From 22eec496fdd5249975ab6d5d1d72c38af3ab3fe8 Mon Sep 17 00:00:00 2001 From: dano Date: Fri, 11 Oct 2024 08:24:34 +0000 Subject: [PATCH] Update pages/students/2022/yevhenii_leonov/README.md --- pages/students/2022/yevhenii_leonov/README.md | 9 +++++++-- 1 file changed, 7 insertions(+), 2 deletions(-) diff --git a/pages/students/2022/yevhenii_leonov/README.md b/pages/students/2022/yevhenii_leonov/README.md index b4cb04d56a..d215252b96 100644 --- a/pages/students/2022/yevhenii_leonov/README.md +++ b/pages/students/2022/yevhenii_leonov/README.md @@ -27,8 +27,6 @@ Predbežné zadanie: Návrh na tému: - Vyhodnotenie systémov RAG -- Zostavte množinu na vyhodnotenie RAG systému pre medicínsku oblasť. -- Napíšte príklady alebo použite generatívny model Spolupráca Oleh Poiasnik @@ -44,7 +42,14 @@ Stav: - Budeme využívať systém RAGAS. Nainštalujte si ho a vyskúšajte. OPtimálne použite systém Anaconda-Linux. V anaconda využívajte virtuálne prostredia. - Naštudujte dokumentáciu a články https://docs.ragas.io/en/stable/index.html +- Vyhľadajte vedecké články na tému "retrieval augmented generation evaluation" a prečítajte si aj článok o "ragas". Použite google scholar. Napíšte si poznámky. +- Zistite a opíšte aké metriky sa používajú. +Zásobník úloh: + +- Zostavte množinu na vyhodnotenie RAG systému pre medicínsku oblasť. +- Množina bude vyjadrovať "testovací scenár" navštevy lekárne. V prvej fáze neriešime dialóg, ale otázky a odpovede. +- Napíšte príklady alebo použite generatívny model