0Pricing
MLOps Academy · 课时

设置偏移阈值和触发条件

决定何时因偏移启动重新训练

设置偏移阈值和触发条件 是 CoddyKit 上的免费 MLOps Academy 课时。 这是第 4 节课，共 4 节。 你可以在下方免费阅读本课时的完整内容 — 然后在浏览器中使用内置代码编辑器和全天候 AI 导师进行实践。 这是 MLOps Academy 学习路径的一部分，你的进度在网页和 CoddyKit 应用中同步。 MLOps Academy 课程共包含 4 节课。

从检测到决策

衡量漂移只是工作的一半。真正的价值在于判断变化何时大到需要采取行动。这意味着要设置阈值和触发器。🚦

什么是阈值

阈值是漂移指标必须越过、您才会做出响应的界线。低于它时保持冷静；高于它时进行调查或重新训练。

从已知规则开始

一个合理的初始阈值是每个特征的 PSI 高于 0.25，因为这是常见的显著漂移界线。之后再根据您自己的数据进行调整。

PSI_THRESHOLD = 0.25

def is_drifted(psi_value):
    return psi_value > PSI_THRESHOLD

一个特征还是多个特征

确定告警的单位。您可以针对某个关键特征触发，也可以针对发生漂移的特征占比触发，例如所有列中超过 30% 的列发生漂移。

share = drifted_count / total_features
trigger = share > 0.3

避免告警过于敏感

一天的噪声不应触发重新训练。请要求漂移在一个时间窗口内持续存在，例如连续三次检查都出现漂移，然后再触发操作。

严重程度级别

并非所有漂移都值得同样的响应。请使用级别：一种只发送通知的警告级别，以及一个会真正启动重新训练的严重级别。

if psi_value > 0.25:
    level = "critical"
elif psi_value > 0.1:
    level = "warning"
else:
    level = "ok"

连接到触发器

触发器是与违规事件关联的操作。它可以打开告警、调用网络钩子，或启动训练流程运行。

if level == "critical":
    start_retraining_pipeline()

能看性能时优先看性能

输入漂移只是一个替代指标。如果标签能够及时获得，请针对真实指标的下降触发操作，例如准确率低于目标值；这比单看输入变化可靠得多。

添加冷却时间

重新训练后，请等待一段时间再允许下一次触发。冷却时间可以防止系统在指标稳定期间反复进行重新训练。

根据历史数据校准

不要盲目猜测阈值。重放历史数据，观察您的阈值在过去会触发哪些告警，然后不断调整，直到告警与真实问题相匹配。🔧

让人类了解情况

即使触发器会自动运行，也要记录每个决策并通知团队。良好的可观测性能让自动化值得信赖，而不是令人费解。🔔

快速检查

思考一个问题：如何让告警保持合理？

回顾

您已将漂移信号转化为行动：设置阈值，使用时间窗口和级别减少噪声，优先采用真实指标，添加冷却时间，并始终让人类参与其中。🎯

常见问题解答

「设置偏移阈值和触发条件」课时是免费的吗？

是的 — 「设置偏移阈值和触发条件」的完整文本可在网页上免费阅读。要进行交互式练习（内置代码编辑器和全天候 AI 导师）并解锁 MLOps Academy 课程的其余内容，请升级到 CoddyKit PRO。 MLOps Academy 课程共包含 4 节课。

「设置偏移阈值和触发条件」这节课中我会学到什么？

决定何时因偏移启动重新训练 你通过在浏览器中直接运行的动手代码来练习 MLOps Academy，全天候 AI 导师会在你学习这节课的过程中回答你的问题。

学习 MLOps Academy 需要有经验吗？

无需任何先前经验。CoddyKit 上的 MLOps Academy 课程适合初学者到高级学习者，你可以从这里开始或从头开始，按照自己的节奏学习。 这是第 4 节课，共 4 节。

「设置偏移阈值和触发条件」课时需要多长时间？

大多数 CoddyKit 课程大约需要 5–10 分钟。每节课都很精短且互动，所以你能稳步进步，并在网页和应用中从离开的地方继续。

我能在这节 MLOps Academy 课中编写并运行代码吗？

能。每节 MLOps Academy 课都包含内置代码编辑器，你可以在浏览器中直接编写并运行真实代码，并获得即时 AI 反馈 — 无需本地设置。

此课程中的所有课时

  1. 数据偏移与概念偏移
  2. 使用 PSI 和 KS 衡量偏移
  3. 使用 Evidently 生成偏移报告
  4. 设置偏移阈值和触发条件
← 返回 MLOps Academy