18 分AWS re:Invent 2025：マルチエージェントAIへのHuman-in-the-Loop制御の実装（CNS428）
問題発生後の非公式な手動レビューではなく、明示的なワークフローチェックポイントとして承認ゲートを実装する方法を確認できます。
中級者自動化
LLM評価を体系的に構築する方法（指標、単体テスト、LLM-as-a-Judge）
Dave Ebbelaar. 現役のAIエンジニアが、実際に使用している評価の段階構成を説明します。アサーション形式の単体テスト、参照答案を必要としない指標、人間の判断と整合させたLLM-as-a-Judge、分析・測定・改善のループを扱います。この構成は、評価をランキングではなくリグレッション検出システムとして捉える記事の主張に、動画として最も近いものです。
AI Expertの注記
ツールの選択には古くなるものもありますが、段階構成は堅実です。まず決定論的なチェックを行い、次に人間の判断で検証したモデル採点を行います。LLMによる判定を簡単に追加できるからといって、キャリブレーションを省略しないでください。
このセクションから得られるもの
プロンプトやモデルの変更がユーザーに届く前にリグレッションを検出する、段階的な評価を設計できます。
視聴または事前に知っておくべきもの
既知の失敗例があるAIワークフローを提供または保守した経験。
最終確認日：2026年5月18日
次の動画を視聴
同じ学習パスで次のキュレーション済みの補完動画を続けて視聴してください。
さらに深く学ぶ
このトピックについてさらに詳しく学べる、厳選された外部コースです。
University of Helsinki · MinnaLearnElements of AI
University of Helsinki
英語のほか20以上の言語で提供されている、世界で最も有名なAI入門講座です。University of Helsinkiが制作し、100万人以上が受講しています。コーディングは不要で、数学への不安を感じる内容もなく、修了時には証明書を取得できます。「AIとは実際に何か」を冷静かつ信頼できる形で学びたいなら、この講座が最適です。
AI初心者約30時間 · 自分のペースで学習
Coursera · DeepLearning.AIAI for Everyone
Andrew Ng
コーディングを学ばずにAIを理解したい人にとって、開講から何年たっても最も分かりやすい出発点です。数学も専門用語も誇大宣伝もなく、修了時にはAIプロジェクトについて十分な知識に基づいて話せるようになります。
AI初心者約6時間
HubSpot AcademyAI-Driven Customer Service
Brenna Zenaty, Adriti Gulati
Closes our biggest vertical blind spot: nothing in the catalog spoke directly to support and customer-success teams. HubSpot Academy is free, well-produced, and refreshingly concrete — it walks through AI-assisted ticket triage and a knowledge-base agent rather than staying abstract, and the certificate is free too, not a paywall bait-and-switch.
初心者~1 hour · self-paced (2 lessons)