MLOps Academy · 课时

训练与服务偏差陷阱

了解服务时使用的数据何时不再匹配训练数据。

第 1 / 4 课13 个步骤

训练与服务偏差陷阱 是 CoddyKit 上的免费 MLOps Academy 课时。 这是第 1 节课,共 4 节。 你可以在下方免费阅读本课时的完整内容 — 然后在浏览器中使用内置代码编辑器和全天候 AI 导师进行实践。 这是 MLOps Academy 学习路径的一部分,你的进度在网页和 CoddyKit 应用中同步。 MLOps Academy 课程共包含 4 节课。

什么是偏差

训练与服务偏差是指模型在生产环境中看到的数据不再与训练时学习所用的数据相匹配。

为什么它会造成影响

您的模型假设服务数据看起来与训练数据相同。当这一假设被打破时,即使没有任何程序崩溃,预测结果也会悄悄变差。这就是偏差。

不同的代码路径

一个常见原因是存在两条代码路径:一个脚本准备训练数据,另一个脚本准备在线请求。两者之间细微的差异就会造成偏差。

看得见的不匹配

这里,训练过程使用一个均值进行缩放,而服务过程使用另一个均值。模型现在接收到的是它从未训练过的数字,因此其缩放出现了偏差。

# training
x = (raw - 50.0) / 10.0
# serving (wrong!)
x = (raw - 0.0) / 10.0

过时的特征

当某个特征在训练时是新鲜的,但在服务时已经过时,也会出现偏差,例如使用昨天计算的平均值,而不是刚刚计算的值。

两边使用同一个错误

最安全的修复方式是让两条路径共享同一个函数。如果其中存在错误,至少它会在训练和服务中完全相同,这样就不会悄悄产生偏差。

def make_features(raw):
    return (raw - 50.0) / 10.0
# call from training AND serving

架构偏差

当训练和服务之间某一列的类型或名称发生变化时,就会出现架构偏差,例如整数变成字符串。模型会在不提示的情况下错误地解读它。

特征顺序很重要

许多模型是按位置而不是按名称读取特征的。如果在服务时交换两列,就会产生隐蔽而危险的顺序不匹配。

通过检查来捕获偏差

一个简单的防护措施是断言服务输入包含与模型训练时相同的列。在入口处捕获偏差,而不是等到仪表板上才发现。

assert list(request.columns) == model.feature_names_in_.tolist()

特征库很有帮助

特征库只计算一次特征,然后同时将其提供给训练和推理环节,从设计上消除一整类偏差错误。

记录并比较

记录一部分真实服务输入,并将其统计数据与训练集进行比较。均值或范围存在差距,是偏差出现的早期预警。

快速检查

哪种选择最能消除训练与服务偏差?

回顾

偏差是训练数据与服务数据之间不易察觉的不匹配。共享特征代码、检查数据架构,并记录在线输入,才能让模型保持可靠。✅

免费开始

用 AI 导师学习 Python — 免费

在浏览器中编写并运行真实代码,获得全天候 AI 导师的即时帮助,并在网页或应用中继续学习。

课程
30
课程
120

常见问题解答

「训练与服务偏差陷阱」课时是免费的吗?

是的 — 「训练与服务偏差陷阱」的完整文本可在网页上免费阅读。要进行交互式练习(内置代码编辑器和全天候 AI 导师)并解锁 MLOps Academy 课程的其余内容,请升级到 CoddyKit PRO。 MLOps Academy 课程共包含 4 节课。

「训练与服务偏差陷阱」这节课中我会学到什么?

了解服务时使用的数据何时不再匹配训练数据。 你通过在浏览器中直接运行的动手代码来练习 MLOps Academy,全天候 AI 导师会在你学习这节课的过程中回答你的问题。

学习 MLOps Academy 需要有经验吗?

无需任何先前经验。CoddyKit 上的 MLOps Academy 课程适合初学者到高级学习者,你可以从这里开始或从头开始,按照自己的节奏学习。 这是第 1 节课,共 4 节。

「训练与服务偏差陷阱」课时需要多长时间?

大多数 CoddyKit 课程大约需要 5–10 分钟。每节课都很精短且互动,所以你能稳步进步,并在网页和应用中从离开的地方继续。

我能在这节 MLOps Academy 课中编写并运行代码吗?

能。每节 MLOps Academy 课都包含内置代码编辑器,你可以在浏览器中直接编写并运行真实代码,并获得即时 AI 反馈 — 无需本地设置。

此课程中的所有课时

  1. 训练与服务偏差陷阱
  2. 静默失败:没有崩溃,却给出错误答案
  3. 世界在模型之下发生变化
  4. 可复现性问题
← 返回 MLOps Academy