0Pricing
MLOps Academy · Aula

Condicione as incorporações à qualidade do modelo

Bloqueie uma PR se o novo modelo obtiver uma pontuação pior.

Condicione as incorporações à qualidade do modelo é uma aula grátis de MLOps Academy no CoddyKit. Esta é a aula 3 de 4. Você pode ler a aula completa abaixo gratuitamente — depois pratica ao vivo no navegador com um editor de código integrado e um tutor de IA 24/7. Faz parte do caminho de aprendizado de MLOps Academy, e seu progresso é sincronizado entre a web e o app CoddyKit. O curso de MLOps Academy inclui 4 aulas no total.

Partes desta aula ainda não foram traduzidas e aparecem em inglês.

A Gate at the Merge

A quality gate blocks a pull request from merging unless the new model is good enough. It turns model quality into a hard rule, not a hope. 🚧

Why Code Tests Are Not Enough

Code can pass every test and still produce a worse model. You need a separate check on the metric, like accuracy or F1, to protect users.

Pick One Guarding Metric

Choose a single primary metric that reflects success for your task. Gating on too many numbers at once makes every PR a confusing negotiation.

Set a Clear Threshold

Define a minimum bar, your threshold. If the new model scores below it, the build fails and the merge is blocked automatically.

MIN_ACCURACY = 0.85

Evaluate on a Fixed Set

Always score against the same held-out test set. A frozen evaluation set makes comparisons fair across every pull request and run.

Fail the Build on Purpose

In CI, a step that exits with a non-zero code marks the job failed. So if the metric misses, you deliberately raise an error to stop the merge.

if acc < MIN_ACCURACY:
    raise SystemExit(f"acc {acc} below bar")

Compare to the Champion

A smarter gate compares the new model to the current baseline in production, blocking merges that regress instead of just hitting a fixed number.

assert new_acc >= baseline_acc

Branch Protection Enforces It

In GitHub, mark the CI job a required check under branch protection. Then the merge button stays disabled until your gate passes.

Surface the Number in the PR

Print the score so reviewers see it. A clear log line or PR comment showing the metric turns a red X into an explanation people trust.

print(f"::notice::accuracy={acc:.3f}")

Allow a Reviewed Override

Sometimes a small dip is fine. Let a human override a failed gate through review approval, so the rule guides without fully blocking the team.

Guard Against Flaky Scores

Set a seed and a stable test set so the same model gives the same number. A deterministic eval keeps the gate from failing on pure luck.

Quick Check

How does a CI step actually block a merge when the model is too weak?

Recap

Pick one metric, set a threshold or beat the baseline, and fail the build when it misses. Mark the job required so a weak model can never merge silently.

Perguntas Frequentes

A aula “Condicione as incorporações à qualidade do modelo” é grátis?

Sim — o texto completo de “Condicione as incorporações à qualidade do modelo” é grátis para ler aqui na web. Para praticá-la interativamente (um editor de código integrado e um tutor de IA 24/7) e desbloquear o restante do curso de MLOps Academy, atualize para CoddyKit PRO. O curso de MLOps Academy inclui 4 aulas no total.

O que vou aprender em “Condicione as incorporações à qualidade do modelo”?

Bloqueie uma PR se o novo modelo obtiver uma pontuação pior. Você pratica MLOps Academy com código prático que executa diretamente no navegador, e um tutor de IA 24/7 responde suas dúvidas enquanto trabalha na aula.

Preciso ter experiência prévia para começar MLOps Academy?

Nenhuma experiência prévia é necessária. MLOps Academy no CoddyKit é estruturado para alunos iniciantes até avançados, então você pode começar aqui ou desde o início e aprender no seu ritmo. Esta é a aula 3 de 4.

Quanto tempo leva a aula “Condicione as incorporações à qualidade do modelo”?

A maioria das aulas CoddyKit leva cerca de 5–10 minutos. Cada uma é compacta e interativa, então você faz progresso constante e retoma exatamente de onde parou entre web e app.

Posso escrever e executar código nesta aula de MLOps Academy?

Sim. Cada aula de MLOps Academy inclui um editor de código integrado, então você escreve e executa código real direto no navegador e recebe feedback de IA instantaneamente — nenhuma configuração local necessária.

Todas as aulas deste curso

  1. O que CI/CD significa para modelos
  2. Um fluxo de trabalho do GitHub Actions para aprendizado de máquina
  3. Condicione as incorporações à qualidade do modelo
  4. Compile e envie a imagem ao publicar uma versão
← Voltar para MLOps Academy