Mikro F1 skóre | AI slovník

Odborná definice

Micro F1 score nejprve sčíta true positives, false positives a false negatives napříč všemi třídami nebo štítkami a až potom z agregovaných počtů vypočítá precision, recall a F1. Každé jednotlivé rozhodnutí má stejnou váhu, proto výsledek silnější odráží početné třídy. Při běžné multiclass klasifikaci s jedním štítkem na vzorek se micro precision, micro recall a micro F1 rovnají accuracy. V multilabel úlohách měří globálnu kvalitu všech binárnych rozhodnutí.

Srozumitelné vysvětlení

Micro F1 vysype všechny rozhodnutí o třídách do jedné společné tabulky a hodnotí jejich najednou. Pokud má dominantní třída desaťtisíc příkladů a vzácna pouze deset, větší třída bude mít na výsledek omnoho větší vliv. Metrika proto dobře popisuje celkový objem správných a chybných označení, ale může skrýt úplné selhání malé kategorie. V multilabel systéme, kde jeden dokument může mít více tém, je Micro F1 užitečné na súhrnný výkon, ale malo by se doplnit triednymi metrikami a prahovou analýzou.

Časté otázky

Proč se Micro F1 při multiclass rovná accuracy?

Každá vzorek vytvoří jedno skutečné a jedno predikované označení. Agregované true positives odpovídají správným predikciám a chyby se započítají symetricky.

Kdy je Micro F1 vhodné?

Když je důležitý celkový počet správných rozhodnutí nebo když chcete jednu metriku pro velký multilabel problém s mnohými riedkymi štítkami.

Co Micro F1 skrýva?

Může zakrýt slabý recall menšinové třídy, protože početné třídy dominují agregovaným počtem. Vždy je třeba podívat i per-class výsledky.

Jako prahy ovlivňují Micro F1?

V multilabel úloze nižší práh zvyšuje počet pozitivních predikcí, často recall i false positives. Optimálny práh závisí na cíle a nákladů chyb.

Je Micro F1 vhodné při různých nákladoch tříd?

Ne jako jediná metrika. Agregace dává stejnou váhu jednotlivým rozhodnutiam, ne ekonomickému nebo bezpečnostnému významu tříd.

Související pojmy

Zdroje a redakční stopa

scikit-learn, F1 score averaging

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.