Citlivost nebo úplnost záchytu | AI slovník

Odborná definice

Recall vyjadřuje podíl skutečně pozitivních případů, které systém označil jako pozitivně. V binární klasifikaci se počítá TP dělené součtem TP a FN. Ve vyhledávání Recall@k měří, jaká část všech relevantních položek se nachází mezi prvými k výsledky. Hodnota závisí na definice pozitivní třídy, rozhodovacího prahu a způsobu průměrování při více třídách. Vysoký recall nezaručuje nízký počet falešných poplachů, proto se interpretuje spolu s precision a nákladmi chyb.

Srozumitelné vysvětlení

Recall odpovídá na otázku, kolik z toho, co jsme měli najít, jsme skutečně našli. Pokud skríning obsahuje sto opravdu rizikových případů a model zachytí deveťdesiat, recall je 90 procent. Metrika nerieši, kolik nerizikových případů model označil omylem. Při detekci choroby, podvodu nebo kritického dokumentu může být vynechání dražší než dodatečná kontrola, proto se často zvýhodní recall a následně se samostatně řídí pracovná záťaž spůsobená falošnými pozitívami.

Časté otázky

Jako souvisí recall s precision?

Snížení prahu obvykle zachytí více pozitivních případů, ale přidá falešné pozitíva. Proto recall často roste na úkor precision a kompromis se volí podle dopadu chyb.

Je recall vhodný při nevyvážených datech?

Ano, protože se soustřeďuje na pozitivní třídu. Sám však nepovie, kolik upozornení je chybných, takže je vhodné přidat precision, PR krivku a absolútne počty.

Co znamená macro recall?

Recall se vypočítá pro každou třídu samostatně a potom se udělá nevážený průměr. Malé třídy tak mají stejný vliv jako velké.

Jak se interpretuje Recall@k ve vyhledávání?

Udáva podíl známých relevantních dokumentů, které se objavili v prvních k výsledkoch. Je vhodný zejména pro kandidátnu fázu, po které nasleduje reranking.

Co pokud v datech není žiadny pozitivní případ?

Menovatel je nulový a metrika není přirozeně definovaná. Knihovna může vrátit nulu, Nan nebo upozornení podle nastavení, co je třeba uvést v reporte.

Související pojmy

Zdroje a redakční stopa

scikit-learn, recall_score documentation

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.