Druhý Evals.cz meetup

​Benchmarky modelů jsou všude. Ale když nasazujete AI do produktu, zajímá vás něco jiného: funguje to u vás, s vašimi daty, pro vaše uživatele?

​​evals.cz je pražský meetup pro lidi, kteří AI produkty staví - a potřebují je měřit.

​​Co čekat

• ​​3 krátké přednášky + diskuze

• ​​Praktické zkušenosti z praxe

• ​​Žádné sales pitche

• ​​Převážně anglicky

​​Témata

​​RAG kvalita · používání veřejných benchmarků · human-in-the-loop · metriky a metodologie

​​Pro koho

​​ML/AI engineers, backend vývojáři integrující LLMs, data scientists, product manažeři, AI researchers — i zvědaví začátečníci.

​​Speakers

​Po úspěchu minulého meetupu jsme se rozhodli soustředit na praktické oblasti, obzvláště kolem RAGu.

• ​Jak používat veřejné benchmarky v oblasti duševního zdraví pro vlastní aplikace (Aneta @ Promethist),

• ​Jak vyvíjet a evaluovat RAG produkt (Matouš @ Waypoint AI),

• ​a v jednání máme třetí prezentaci o vyhodnocování a zlepšování searche v RAGu - stay tuned!