1:08:40MLOps.community
Prosus AI-chef och en AI-utvecklare berättar vad som faktiskt gick sönder när de driftsatte agenter i koncernens portföljbolag: penetrationstestning av promptinjektion före lansering, en osäker skrivning när en Jira-agent inte kunde tolka mänsklig kortnotation, inaktuell kontext som hanterades genom att agenterna fick redovisa sina antaganden samt reservlösningar som slog samman eller stängde av agenter när dessa började öka den kognitiva belastningen. Det är som att se artikelns register över fellägen spelas upp som en direktsänd incidentanalys.
Vad du bör få ut av detta: Identifiera vilka fellägen dina egna agenter sannolikt kommer att drabbas av först och planera tester, reservlösningar och avvecklingskriterier för vart och ett.
Titta på eller ha koll på först: Kännedom om LLM-agenter, verktygsanrop och grundläggande produktionsövervakning samt artikelns register över fellägen som vägledning.
Anteckning från AI Expert: Videon spelades in i början av 2025, så verktygslandskapet har förändrats, men nya team återupptäcker fortfarande samtliga typer av fel som tas upp. Fokusera på incidenterna och de operativa besluten, inte på ramverkens namn.