Klasifikace bez tréninkových příkladů cílových štítků

Odborná definice

Zero-shot classification je přiřazení vstupu k jednomu nebo viacerým kandidátnym štítkem, pro které model nebol zvlášť trénovaný na označených příkladech dané úlohy. V NLP se často realizuje přes natural language inference, kde se každý štítek vloží do hypotézy a model odhadne míru entailmentu, nebo přes embeddingovou podobnost mezi vstupem a popisem třídy. Výsledek je citlivý na formulaci štítků, šablónu hypotézy, kalibraci skóre a to, či jde o single-label nebo multi-label režim.

Srozumitelné vysvětlení

Místo vytvárání nového datasetu můžete modelu předložit text a seznam kategorií jako reklamace, pochvala a technický problém. Model posúdi, která slovná kategorie nejlépe vystihuje význam. Kvalita názvů je součástí modelování, štítek ostatní může být příliš neurčitý a dva synonymné štítky si rozdělí skóre. Zero-shot řešení je výborné na pilot a dlouhý ocas kategorií, ale při stabilní produkční taxonómii ho je třeba kalibrovat na reálných datech a porovnat s učenou alternatívou.

Časté otázky

Jako funguje NLI variant?

Text se berie jako premisa a věta s kandidátnym štítkem jako hypotéza. Skóre entailmentu se použije jako podpora kategorie.

Co mění multi-label nastavení?

Každý štítek se hodnotí nezávisle, takže vstup může patrit do více kategorií. Při single-label se skóre mezi třídami normalizuje.

Proč záleží na názve štítka?

Model interpretuje jeho přirozený význam. Nejasný, příliš krátký nebo doménovo nesprávný název vytváří slabý rozhodovací popis.

Jak se volí práh?

Na malé reprezentatívnej validační množině podle nákladů false positive a false negative, ne automaticky na hodnote 0,5.

Kdy projít na fine-tuning?

Když jsou třídy stabilní, je dostupný dostatek kvalitných příkladů a zero-shot model nedosahuje potřebnou přesnost, latenci nebo kalibraci.

Související pojmy

Zdroje a redakční stopa

Hugging Face, zero-shot classification

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.