18 分钟AWS re:Invent 2025——为多智能体AI系统实现人在回路控制（CNS428）
了解如何将审批关卡实现为明确的工作流检查点，而不是等问题发生后再进行非正式人工审核。
中级自动化
如何构建领域专用的LLM评估系统：Hamel Husain与Emil Sedgh
AI Engineer. Hamel Husain与Rechat的CTO讲解一个真实AI产品背后的评估系统：通用现成评估为何会失败；如何分层设置断言、带人工审核的追踪日志，以及持续与领域专家对齐的大语言模型评判；一套有效的评估系统又如何推动数据策展和微调。它是文章核心主张的生产案例研究：评估是捕获回归的机制，而不是排行榜。
AI Expert 注释
视频录制于2024年年中；具体工具已经发展，但系统设计并未过时。请将其视为架构参考，而不是供应商指南；并按视频强调的那样，让领域专家持续参与。
您应该从中获得什么
了解生产团队如何分层结合断言、人工审核和大语言模型评判，让回归在发布前暴露出来。
先观看或了解
熟悉基本的大语言模型评估术语，以及文章提出的评估阶梯框架。
最后审核：2026年7月15日
继续观看
通过相同的视频学习路径，继续观看下一个精选配套视频。
深入学习
精选的外部课程，帮助您更深入地了解该主题。
University of Helsinki · MinnaLearnElements of AI
University of Helsinki
这是欧洲最受信赖的免费AI入门课程，由University of Helsinki打造，已有超过一百万人学习，提供英语及20多种（主要为欧洲）语言版本。无需编程，不必担心数学，结课后还可获得证书。如果你想平静而可靠地了解“AI究竟是什么”，这门课程就是合适的选择。
AI新手约30小时 · 自主安排进度
Coursera · DeepLearning.AIAI for Everyone
Andrew Ng
发布多年后，这仍然是帮助不学编程的人理解AI最清晰的入门课程。没有数学公式、专业术语和夸张宣传——学完后，你将能够围绕AI项目进行有见地的交流。
AI新手约6小时
HubSpot AcademyAI-Driven Customer Service
Brenna Zenaty, Adriti Gulati
Closes our biggest vertical blind spot: nothing in the catalog spoke directly to support and customer-success teams. HubSpot Academy is free, well-produced, and refreshingly concrete — it walks through AI-assisted ticket triage and a knowledge-base agent rather than staying abstract, and the certificate is free too, not a paywall bait-and-switch.
初级~1 hour · self-paced (2 lessons)