55 минКак системно выстроить оценку LLM (метрики, юнит-тесты, LLM-as-a-Judge)
Спроектировать лестницу оценок, которая ловит регрессии до того, как изменения промпта или модели дойдут до пользователей.
Anthropic. Живая сессия сборки промпта для страховых заявок от команды Applied AI в Anthropic — они начинают с расплывчатой инструкции и итеративно доводят её до состояния, которое разработчик реально отправил бы в продакшен, демонстрируя ровно те правки, которые описывает статья для слоёв system и developer. Посмотрите её перед перечитыванием чек-листа статьи про примеры, структуру вывода и обработку отказов.
Увидеть, как расплывчатый промпт для страховых заявок превращается в структурированный, тестируемый промпт с более чёткими примерами, правилами вывода и поведением при отказах.
Последняя проверка: 18 мая 2026 г.
Продолжайте тот же учебный путь со следующими связанными видео.
55 минСпроектировать лестницу оценок, которая ловит регрессии до того, как изменения промпта или модели дойдут до пользователей.
9 минВы сможете ориентироваться в трассах, проектах и датасетах LangSmith и считывать стоимость по токенам, латентность, частоту ошибок и детализацию по каждому спану.
75 минВы соберёте свой первый MCP-сервер и поймёте, как связаны между собой инструменты, схемы, промпты, ресурсы и транспорты.
Тщательно подобранные внешние курсы, которые глубже раскрывают эту тему.
Иса Фулфорд · Эндрю Ын
Девяносто минут — и вы получаете годовой опыт интуиции. Если вы пишете код, вызывающий LLM, это самый эффективный курс в интернете для закрытия разрыва между «играю с ChatGPT» и «выкатываю функцию с вызовом LLM в рабочую эксплуатацию».
Microsoft Learn
Промпт-инжиниринг, но для инструмента, с которым большинство офисных сотрудников столкнётся первым. Собственная четырёхчастная схема промптов Microsoft (цель, контекст, источник, ожидание) — действительно полезная модель мышления, и в отличие от общих курсов по промптам для ChatGPT уже в нашем каталоге, этот полностью привязан к специфике Microsoft 365 Copilot и тому, как он опирается на данные.