Odborná definícia
Odborná definícia
User intent classification priraďuje používateľský vstup k jednej alebo viacerým triedam opisujúcim požadovaný cieľ, napríklad zmeniť heslo, reklamovať platbu alebo zistiť stav objednávky. Model môže používať pravidlá, klasifikátor nad embeddingmi alebo jazykový model. Kvalita závisí najmä od jasnej taxonómie, reprezentatívnych formulácií, detekcie vstupov mimo rozsahu a možnosti kombinovať intent s entitami. V produkcii sa sleduje zámena medzi podobnými zámermi, nízka istota a zmeny používateľského jazyka. Každý intent má mať definíciu, pozitívne príklady, podobné negatívne príklady, vlastníka a cieľový workflow.
Zrozumiteľné vysvetlenie
Zrozumiteľné vysvetlenie
Veta „kde je môj balík“ a veta „objednávka ešte neprišla“ používajú iné slová, no obe môžu znamenať sledovanie zásielky. Intent classifier ich priradí k rovnakému cieľu a aplikácia otvorí správny workflow. Problém vzniká, keď taxonómia obsahuje takmer rovnaké triedy, napríklad zrušenie objednávky a vrátenie tovaru, alebo keď používateľ položí dve otázky naraz. Dobrý systém preto nepozná iba názvy intentov, ale aj hranice, príklady, konflikty a fallback pre neznámy zámer. Pri zmene taxonómie sa historické dáta premigrujú alebo verziujú, inak metriky miešajú triedy s odlišným významom.
Časté otázky
Časté otázky
Ako sa intent líši od entity?
Intent opisuje, čo chce používateľ dosiahnuť. Entity sú konkrétne údaje vo vstupe, napríklad číslo objednávky, dátum, produkt alebo mesto.
Čo je out-of-scope intent?
Vstup nepatrí do žiadnej podporovanej triedy. Model ho nemá násilne zaradiť k najbližšiemu intentu, ale aktivovať fallback alebo ľudskú pomoc.
Ako sa rieši viac zámerov v jednej správe?
Používa sa multi-label klasifikácia, rozdelenie požiadavky na kroky alebo dialóg, ktorý určí prioritu. Jedna povinná trieda môže stratiť dôležitú časť.
Ktoré metriky sú vhodné?
Macro F1 po intentoch, confusion matrix, out-of-scope recall, kalibrácia a task success rate. Celková accuracy môže skryť zlyhanie zriedkavého kritického zámeru.
Kedy treba meniť intent taxonómiu?
Keď nové produkty vytvoria nové ciele, triedy sa často zamieňajú, operátori ich nevedia konzistentne označiť alebo jeden intent vedie k viacerým odlišným workflow.
Súvisiace pojmy
Súvisiace pojmy
Zdroje a redakčná stopa
Zdroje a redakčná stopa
- CLINC150: Evaluating Natural Language Understanding Services Rasa documentation, Intents and entities
Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.