Odborná definice
Odborná definice
Model drift je zhoršování nebo změna chování nasadeného modelu v čase v důsledku posunu dat, vztahu mezi vstupmi a cílem, používatelského chování, procesu měření nebo okolitého systému. Pojem se často používá jako provozní zastrešujúci název pro data drift, concept drift a posun výkonu. Drift nelze spolehlivě určit pouze z distribuce vstupů, protože ne každý posun zhorší rozhodnutí a výkon se může změnit i bez výraznej změny jednoduchých príznakových statistik.
Srozumitelné vysvětlení
Srozumitelné vysvětlení
Model odhadu dotazu může být přesný během běžného období a selhat po změně cien, chování zákazníků nebo skladovej politiky. Váhy se nezmenili, změnil se svet, na který se aplikují. Model drift proto neznamená, že se soubor modelu sám poškodil. Znamená, že jeho naučené vztahy už nemusí odpovídat aktuální provozu. Monitorování vstupů může upozornit na posun, ale rozhodující je sledovat i oneskorené skutečné výsledky, chyby podle segmentů a změny v procese.
Časté otázky
Časté otázky
Jak se model drift liší od data drift?
Data drift označuje změnu distribuce vstupů. Model drift je širší provozní problém zmeneného chování nebo výkonu, který může zahrnovat i concept drift.
Lze drift měřit bez nových labelů?
Lze sledovat vstupní distribuce, embeddingy, confidence a výstupní pomery, ale bez ground truth se nedá přímo potvrdit změna predikčnej chyby.
Je každý statistický posun důvod na pretrénování?
Ne. Posun může být neškodný nebo očekávaný. Rozhodnutí má vycházet z dopadu na výkon, riziko a provozní náklady.
Co je náhly a postupný drift?
Náhly vznikne při rychlé změně režimu, například nové politice. Postupný se prejavuje pomalým posunom preferencií, zařízení nebo populace.
Jak se na drift reaguje?
Vyšetrením příčiny, úpravou prahů, změnou příznaků, pretrénováním na novších datech, fallback pravidlem nebo dočasným obmedzením použití modelu.
Související pojmy
Související pojmy
Zdroje a redakční stopa
Zdroje a redakční stopa
- NIST AI RMF Playbook, monitoring and maintenance
Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.
