Ponowne trenowanie według harmonogramu a na podstawie wyzwalacza

Świat zmienia się po wdrożeniu modelu, więc z czasem model traci aktualność. Retraining pozwala odświeżyć go na nowych danych, zanim jakość zacznie spadać. 🔄

Mogą Państwo ponownie trenować model według harmonogramu albo w reakcji na sygnał. Dwa główne wzorce to retraining według harmonogramu oraz retraining wyzwalany zdarzeniem.

Retraining według harmonogramu odbywa się w stałym rytmie, na przykład co noc lub co tydzień. Jest prosty, przewidywalny i łatwy do przeanalizowania.

Wyrażenie cron koduje ten rytm w pięciu polach. Ten wiersz cron oznacza uruchamianie codziennie o 02:00 — to klasyczna pora na retraining.

Harmonogramy mogą marnować zasoby obliczeniowe, gdy nic się nie zmieniło, albo reagować zbyt wolno na szybkie zmiany. Rytm jest zgadywaniem, a nie pomiarem.

Retraining wyzwalany zdarzeniem uruchamia się tylko po spełnieniu rzeczywistego warunku, na przykład po przekroczeniu progu driftu. Retraining odbywa się wtedy, gdy jest potrzebny, a nie dlatego, że tak wskazuje zegar.

Typowe wyzwalacze to data drift, spadek dokładności na produkcji lub pojawienie się nowej partii oznaczonych danych. Każdy z nich sygnalizuje, że model może pozostawać w tyle.

Wyzwalacz jest często tylko porównaniem z progiem. W tym przypadku drift score powyżej 0,2 uruchamia retraining.

Wyzwalacze działają tylko wtedy, gdy już mierzą Państwo coś na produkcji, na przykład drift lub współczynnik błędów. Bez monitorowania nie ma sygnału, który można wykorzystać jako wyzwalacz.

Większość dojrzałych zespołów korzysta z obu rozwiązań: harmonogramu jako zabezpieczenia oraz wyzwalaczy driftu. Harmonogram gwarantuje aktualność, a wyzwalacz wychwytuje nagłe zmiany.

Stabilne, powoli zmieniające się dane sprzyjają prostemu harmonogramowi. Zmienne dane i dobre monitorowanie sprzyjają wyzwalaczom. Rytm, czyli cadence, należy dopasować do tempa zmian w Państwa środowisku.

Kiedy uruchamia się retraining wyzwalany zdarzeniem?

Poznali Państwo dwa wzorce retrainingu: retraining według harmonogramu działa w rytmie cron, a retraining wyzwalany zdarzeniem reaguje na sygnał z produkcji. Wiele zespołów łączy oba podejścia dla bezpieczeństwa i szybkości. ✅