人間をループに残す
重要度の高いモデルに承認ステップを追加します。
「人間をループに残す」はCoddyKit上の無料MLOps Academyレッスンです。 これはレッスン4/4です。 下記で完全なレッスンを無料で読むことができます。その後、ブラウザ内の組み込みコードエディタと24時間対応のAIチューターでハンズオン演習できます。 これはMLOps Academy学習パスの一部であり、ウェブとCoddyKitアプリ全体で進捗が同期されます。 MLOps Academyコースには全4レッスンが含まれています。
自動化には限界がある
完全な自動昇格は、モデルが金銭、安全、人に影響を及ぼすまでは便利です。影響が大きい領域では、リリース前に人間が関与するようにしてください。
Human-in-the-Loop
Human-in-the-loopとは、人が重要なステップを確認して承認することです。パイプラインは一時停止し、明確な承認を待ちます。
承認のために一時停止する理由
メトリクスだけでは、公平性、法的リスク、奇妙なエッジケースなどの文脈を捉えられません。レビュー担当者は、単純な閾値チェックでは判断できない判断を加えます。
承認ゲート
評価の後、プロモーションの前に手動の承認ステップを挿入します。誰かが承認するまで、本番環境には何も到達しません。
DAGを一時停止して待機する
Airflowでは、人間が操作するまで実行を停止できます。このセンサーは、続行する前に外部からの承認シグナルを待機します。
wait = ExternalTaskSensor(
task_id="await_approval",
external_task_id="human_signed_off")レビュー担当者に根拠を示す
レビュー担当者に、メトリクス、ドリフトレポート、予測サンプルを提示します。十分なコンテキストがあれば、承認は推測ではなく実際の意思決定になります。
却下を簡単にする
レビュー担当者は、承認しないと判断した場合に、パイプラインを安全にロールバックできなければなりません。却下は、手間なく実行できる正式な結果として扱うべきです。
承認のタイムアウトを設定する
人の承認を待ったまま、実行をいつまでも保留しないでください。タイムアウトによって実行を安全に失敗させ、何も気づかれないまま宙に浮くのを防ぎます。
適切な人に通知する
承認が必要になったら、Slackまたはメールで通知します。迅速な通知により、誰にも気づかれないままパイプラインが待ち続けるのを防げます。
リスクで段階分けする
手動レビューは高リスクのモデルに限定し、影響の小さいモデルは自動でプロモーションします。リスクに応じて監督の度合いを調整すれば、安全性とスピードを両立できます。
承認者を記録する
プロモーションごとに、承認者、時刻、メモを記録します。この説明責任の記録は、監査やコンプライアンスに不可欠です。
クイックチェック
Human-in-the-loopの承認ステップは、通常どこに配置されますか。
まとめ
承認ゲートを評価後に設け、レビュー担当者に十分なコンテキストを示し、タイムアウト、通知、承認記録を追加しました。安全な処理は自動化し、リスクの高い処理はレビューしましょう。✅
AI チューターと学ぶ Python — 無料
ブラウザでリアルコードを書いて実行し、24/7 の AI チューターから瞬時にサポートを受け、ウェブまたはアプリで続きから学習できます。
- コース
- 30
- レッスン
- 120
よくある質問
「人間をループに残す」レッスンは無料ですか？
はい。「人間をループに残す」の完全なテキストはこのウェブで無料で読めます。インタラクティブに演習し（組み込みコードエディタと24時間対応のAIチューター）、MLOps Academyコースの残りをアンロックするには、CoddyKit PROにアップグレードしてください。 MLOps Academyコースには全4レッスンが含まれています。
「人間をループに残す」で何を学びますか？
重要度の高いモデルに承認ステップを追加します。 ブラウザで直接実行するハンズオンコードでMLOps Academyを演習し、24時間対応のAIチューターがレッスンを進める中での質問に答えます。
MLOps Academyを始めるのに経験は必要ですか？
事前経験は必要ありません。CoddyKitのMLOps Academyは初級者から上級者向けに構成されているため、ここから始めるか最初から始めて、自分のペースで進むことができます。 これはレッスン4/4です。
「人間をループに残す」レッスンにはどのくらい時間がかかりますか？
ほとんどのCoddyKitレッスンは約5～10分かかります。各レッスンはコンパクトでインタラクティブなので、着実に進歩し、ウェブとアプリ全体で正確に前回の場所から再開できます。
このMLOps Academyレッスンでコードを書いて実行できますか？
はい。すべてのMLOps Academyレッスンに組み込みコードエディタが含まれているため、ブラウザでリアルコードを書いて実行し、即座のAIフィードバックを取得できます。ローカル設定は不要です。