9 minuterLangSmith på 10 minuter
Du kan navigera bland spår, projekt och datamängder i LangSmith och läsa av tokenkostnad, latens, felfrekvens och detaljer per spann.
AvanceradAI för företag
Så sätter du systematiskt upp LLM-utvärderingar (mätvärden, enhetstester, LLM som bedömare)
Dave Ebbelaar. En verksam AI-ingenjör går igenom sin faktiska utvärderingsstege – enhetstester baserade på assertioner, referensfria mätvärden, anpassning av LLM-bedömare till människor och arbetscykeln analysera/mäta/förbättra. Strukturen är den närmaste videomotsvarigheten till artikelns argument att utvärderingar är ett system för att upptäcka regressioner, inte en topplista.
Anteckning från AI Expert
Vissa verktygsval kommer att åldras, men stegen är sund: deterministiska kontroller först, därefter modellbedömda kontroller som validerats mot människor. Hoppa inte över kalibreringen bara för att det är enkelt att lägga till en LLM-bedömare.
Vad du bör få ut av detta
Utforma en utvärderingsstege som upptäcker regressioner innan ändringar av prompt eller modell når användarna.
Titta på eller ha koll på först
Erfarenhet av att driftsätta eller underhålla ett AI-arbetsflöde med kända exempel på fel.
Senast granskad: 18 maj 2026
Se nästa
Fortsätt längs samma lärstig med nästa kurerade kompletterande video.
9 minuter
75 minuterDen ultimata snabbkursen i MCP – bygg från grunden
Bygg en första MCP-server och förstå hur verktyg, scheman, prompter, resurser och transporter hänger ihop.
AvanceradAI för företag
19 minuterBygg effektivare AI-agenter
Förbättra verktygsdesignen så att agenter väljer rätt åtgärd med rätt parametrar.
AvanceradAI för företag
Gå vidare
Externa kurser som är handplockade och går djupare in i detta ämne.
Coursera · Emory UniversityGenerative AI in Marketing
Emory University Goizueta Business School faculty
The deeper, university-level counterpart to our beginner HubSpot marketing pick — Emory's business-school treatment goes past 'how to prompt' into training generative models for brand-specific output, the purchase-funnel economics of AI-generated content, and a full module of genuine skepticism about when generative AI is and isn't worth using in marketing.
Avancerad~14 hours · self-paced (4 modules)
Coursera · IBMGenerative AI for Executives and Business Leaders
IBM AI Academy
Svaret på ledningens strategiska frågor i den generativa AI-eran. Tre korta kurser direkt riktade till företagsledare – inga tekniska förkunskaper krävs – om var generativ AI skapar värde, hur den styrs ansvarsfullt och hur ett vagt ”vi borde använda AI” omvandlas till ett konkret användningsfall som går att försvara. Betyget är 4,6 baserat på ~700 omdömen. Gå den helst före nästa beslut om AI-budgeten.
Avancerad~10 timmar · specialisering med 3 kurser