Odborná definícia
Odborná definícia
Z-score anomaly detection je jednoduchá pravidlová metóda, ktorá označuje pozorovanie za podozrivé, keď absolútna hodnota jeho štandardizovanej odchýlky prekročí zvolený prah, napríklad 3. Predpokladá stabilný referenčný priemer a smerodajnú odchýlku, pričom najlepšie funguje pri približne symetrickom jednorozmernom rozdelení bez výrazných ťažkých chvostov. V online prevádzke treba určiť okno, spôsob aktualizácie štatistík a ochranu pred tým, aby anomálie samy posúvali baseline.
Zrozumiteľné vysvetlenie
Zrozumiteľné vysvetlenie
Metóda sa pýta, ako ďaleko je nová hodnota od bežnej úrovne v jednotkách prirodzenej variability. Ak má senzor priemer 20 a smerodajnú odchýlku 2, hodnota 28 má z-skóre 4 a môže spustiť alarm. Takýto alarm však nehovorí, prečo odchýlka vznikla ani či je obchodne škodlivá. Pri sezónnych dátach, viacerých režimoch prevádzky alebo šikmom rozdelení môže pravidlo hlásiť priveľa falošných udalostí, preto sa často dopĺňa modelom trendu alebo robustnou štatistikou.
Časté otázky
Časté otázky
Prečo sa často používa hranica 3?
Pri normálnom rozdelení leží väčšina hodnôt v intervale troch smerodajných odchýlok. Ide však o heuristiku, nie univerzálne bezpečný prah.
Ako riešiť kladné a záporné anomálie?
Používa sa absolútne z-skóre pre obojstrannú kontrolu alebo samostatné prahy, keď majú vysoké a nízke hodnoty rozdielny význam.
Čo ak je rozdelenie silne šikmé?
Vhodná môže byť logaritmická transformácia, medián a MAD, kvantilové pravidlá alebo model anomálií, ktorý nepredpokladá symetriu.
Dá sa metóda použiť na viac príznakov naraz?
Samostatné z-skóre pre každý stĺpec ignoruje korelácie. Multivariačný problém lepšie zachytáva Mahalanobisova vzdialenosť alebo učený detektor.
Ako predísť posunu baseline po incidente?
Referenčné štatistiky sa aktualizujú kontrolovane, napríklad iba z overených normálnych období, prípadne pomocou robustného klzavého odhadu.
Súvisiace pojmy
Súvisiace pojmy
Zdroje a redakčná stopa
Zdroje a redakčná stopa
- SciPy, zscore
Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.