Birleştirmeleri Model Kalitesine Bağlayın

Bir kalite kapısı, yeni model yeterince iyi değilse çekme isteğinin birleştirilmesini engeller. Böylece model kalitesi bir umuda değil, kesin bir kurala dönüşür. 🚧

Kod tüm testleri geçebilir, ancak yine de daha kötü bir model üretebilir. Kullanıcıları korumak için doğruluk veya F1 gibi ölçütü ayrıca denetlemeniz gerekir.

Görevinizdeki başarıyı yansıtan tek bir birincil ölçüt seçin. Aynı anda çok fazla sayıya göre kapı koymak, her PR'ı kafa karıştırıcı bir pazarlığa dönüştürür.

Asgari kabul düzeyini, yani eşiğinizi tanımlayın. Yeni model bunun altında puan alırsa derleme başarısız olur ve birleştirme otomatik olarak engellenir.

Her zaman aynı ayrılmış test kümesine göre puanlayın. Dondurulmuş bir değerlendirme kümesi, her çekme isteği ve çalıştırma arasındaki karşılaştırmaları adil kılar.

CI'da sıfır olmayan bir kodla çıkan bir adım işi başarısız olarak işaretler. Böylece ölçüt hedefi tutturamazsa birleştirmeyi durdurmak için bilerek hata üretirsiniz.

Daha akıllı bir kapı, yeni modeli üretimdeki mevcut temel çizgiyle karşılaştırır ve yalnızca sabit bir sayıya ulaşılmasını değil, gerilemelerin de birleştirilmesini engeller.

GitHub'da CI işini dal koruması altında bir zorunlu denetim olarak işaretleyin. Böylece kapınız geçene kadar birleştirme düğmesi devre dışı kalır.

İnceleyenlerin görmesi için puanı yazdırın. Ölçütü gösteren açık bir günlük satırı veya PR yorumu, kırmızı X'i insanların güveneceği bir açıklamaya dönüştürür.

Bazen küçük bir düşüş sorun değildir. Bir insanın, inceleme onayı aracılığıyla başarısız kapıyı geçersiz kılmasına izin verin; böylece kural ekibe tamamen engel olmadan yol gösterir.

Bir tohum ve kararlı bir test kümesi belirleyin; böylece aynı model aynı sayıyı üretir. Belirlenimci bir eval, kapının sırf şanssızlık yüzünden başarısız olmasını önler.

Tek bir ölçüt seçin, bir eşik belirleyin veya temel çizgiyi aşın ve hedef tutmadığında derlemeyi başarısız kılın. İşi zorunlu olarak işaretleyin; böylece zayıf bir model hiçbir zaman sessizce birleştirilemez.