AI Evals 101 — Online webinář

O webináři

Toto není kurz ani tutoriál — je to dvouhodinová živá session, kde se dozvíte, proč a jak evaluovat AI aplikace. Konceptuální základ, praktická ukázka a jasný akční plán na pondělí ráno. Vedeno v češtině.

Délka ~2 hodiny

Formát Online (Zoom)

Kapacita 30–50 účastníků

Cena 3 000 CZK bez DPH

V ceně

Záznam session, materiály a přístup do Discord komunity.

Program

0:00–0:10

Úvod

Proč jsme tady. Kontext a pravidla hry.

0:10–0:30

Proč na evals záleží

Reálné příběhy selhání. Cena létání naslepo. Ten moment, kdy zjistíte, že jste rozbili produkci.

0:30–0:55

Mentální modely

Typy evaluací (unit-level, system-level, human, automated, LLM-as-judge). Kdy použít kterou. Eval mindset.

0:55–1:25

Živé demo

Stavba jednoduché evaluace od nuly. Jeden nástroj do hloubky — celý workflow od dat po výsledky.

1:25–1:40

Orientace v nástrojích

Braintrust, pydantic-evals, Langfuse, vlastní řešení. Dost na to, abyste věděli, kde začít.

1:40–2:00

Q&A

Živé dotazy, diskuse nad konkrétními use cases účastníků.

Pro koho je webinář

Product manažeři

Integrujete LLM do produktu, ale nemůžete změřit kvalitu výstupů ani komunikovat pokrok vedení.

Software inženýři v AI

Máte silný testovací instinkt, ale nevíte, jak ho aplikovat na nedeterministické systémy.

Technical founderové a team leadi

Děláte prompt engineering podle pocitu a víte, že to nebude škálovat.

Ceník

Živá účast3 000 CZK
bez DPHŽivá session + Q&A
Záznam session
Discord komunita
Materiály

Pouze záznam

1 500 CZK

bez DPH

Záznam session
Materiály

Týmový balíček (5 míst)

12 000 CZK

bez DPH

5× živá účast (sleva 20%)
Sdílený Discord přístup
Záznam + materiály

Kdo vás povede

Šimon Podhajský

Head of AI · Waypoint AI

Jako Head of AI ve Waypoint AI navrhuje evaluační pipeline a regresní testy pro produkční AI systémy. Specializuje se na to, aby z vágních pocitů o kvalitě aplikace udělal konkrétní, měřitelné metriky. Předtím se věnoval datovému inženýrství v Pure Storage a datové infrastruktuře v Nano Energies. Vystudoval kognitivní vědu na Yale. Pro Evals.cz spoluvytváří kurikulum školení.

Head of AI @ Waypoint AI
Cognitive Science @ Yale
Spolutvůrce kurikula Evals.cz

Veronika Pešková

Gamee · Ctrl AI

Jako Data Lead v Gamee vybudovala analytickou infrastrukturu pro mobilní hry s miliony hráčů — od sběru dat přes statistickou analýzu po vizualizaci. V Ctrl AI se věnuje AI inženýringu. Dříve jako hlavní lektorka v Czechitas vedla datové kurzy. Specializuje se na evaluace multimodálních AI systémů. Pro Evals.cz spoluvytváří kurikulum.

Data Lead @ Gamee
AI Engineer @ Ctrl AI
Dříve hlavní lektorka @ Czechitas
Spolutvůrkyně kurikula Evals.cz

Objednávka

Vyberte variantu a odešlete objednávku. Fakturu vám pošleme emailem.