Co jest potrzebne:
- co X czasu lub na żądanie model powinien być przeuczony
- jedyna zmiana w modelu: przesunięcie zakresu dat modelu o X dni
- z uwagi na testy A/B, powinniśmy przetrenowywać wszystkie modele, które chodzą na produkcji (model powinien mieć checkbox - do przetrenowywania)
- z uwagi na testy A/B, powinniśmy oprócz nazwy modelu, mieć wersję; nazwa modelu byłaby taka jak teraz, np. 0027-AUTOINT-b-model, ale każdy model powinien mieć wersję z datą przeliczenia
- modele w ramach jednego testu A/B powinny wchodzić równoczesnie na produkcję
Ryzyko:
- czy dataset się przeliczył w tych dniach
- czy cechy się przeliczyły w nowych dniach
- kalibracja CTR jest per model, więc po zmianie wersji następuje reset kalibracji