9 minutterLangSmith på 10 minutter
Du kan navigere traces, projects og datasets i LangSmith og aflæse token-omkostning, latenstid, fejlrate og per-span-detalje.
AvanceretAI til virksomheder
Sådan konstruerer du domænespecifikke LLM-evalueringssystemer: Hamel Husain og Emil Sedgh
AI Engineer. Hamel Husain og Rechats CTO gennemgår eval-systemet bag et rigtigt AI-produkt: hvorfor generiske off-the-shelf-evals fejler, en lagdelt opsætning af assertions, loggede traces med menneskelig gennemgang og LLM-judges holdt aligned med en domæneekspert, og hvordan et fungerende eval-system låser data curation og finjustering op. Det er produktionscasestudiet for artiklens argument om, at evalueringer er regression-fangende maskineri, ikke en leaderboard.
Bemærkning fra AI Expert
Optaget midt i 2024; specifikke værktøjer er gået videre, men systemdesignet er det ikke. Behandl den som en arkitekturreference, ikke en vendor-guide, og hold domæneeksperten i loopet, som talket insisterer på.
Hvad du bør få ud af dette
Se, hvordan et produktionsteam lægger assertions, menneskelig gennemgang og LLM-judges i lag, så regressioner dukker op før release.
Forudsætninger
Fortrolig med grundlæggende LLM-evalueringsterminologi og artiklens eval-stige-framing.
Senest gennemgået: 15. jul. 2026
Se næste
Fortsæt ad den samme læringsvej med de næste kuraterede videoer.
9 minutter
75 minutterDen ultimative MCP crash course — byg fra bunden
Byg en første MCP-server, og forstå, hvordan tools, schemas, prompts, resources og transports hænger sammen.
AvanceretAI til virksomheder
19 minutterBygning af mere effektive AI-agenter
Forbedr værktøjsdesign, så agenter vælger den rigtige handling med de rigtige parametre.
AvanceretAI til virksomheder
Gå i dybden
Håndplukkede eksterne kurser, der går i dybden med dette emne.
Coursera · Emory UniversityGenerative AI in Marketing
Emory University Goizueta Business School faculty
The deeper, university-level counterpart to our beginner HubSpot marketing pick — Emory's business-school treatment goes past 'how to prompt' into training generative models for brand-specific output, the purchase-funnel economics of AI-generated content, and a full module of genuine skepticism about when generative AI is and isn't worth using in marketing.
Avanceret~14 hours · self-paced (4 modules)
Coursera · IBMGenerativ AI for topledere og virksomhedsledere
IBM AI Academy
GenAI-æraens svar på spørgsmålet om ledelsesstrategi. Tre korte kurser målrettet virksomhedsledere — uden krav om teknisk baggrund — om, hvor generativ AI skaber værdi, hvordan teknologien styres ansvarligt, og hvordan et uklart "vi bør bruge AI" omsættes til et konkret anvendelsesscenarie, der kan forsvares. Bedømt til 4,6 på tværs af cirka 700 anmeldelser. Tag det helst før din næste beslutning om AI-budgettet.
Avanceret~10 timer · specialisering med 3 kurser