Odborná definícia
Význam a odborné vymedzenie pojmu
Yes/no question answering je úloha, v ktorej systém rozhoduje, či dostupný kontext podporuje kladnú alebo zápornú odpoveď na polaritu otázky. Niektoré datasety povoľujú aj stav neznáme, neurčité alebo nedostatočné dôkazy. Úloha vyžaduje identifikáciu tvrdenia, práce s negáciou, kvantifikátormi, časom a často aj kombinovanie viacerých viet. Pri generatívnych modeloch sa hodnotí nielen token áno alebo nie, ale aj súlad odôvodnenia so zdrojom, kalibrácia istoty a odolnosť voči sugestívnej formulácii otázky.
Zrozumiteľné vysvetlenie
Ako sa pojem používa v praxi
Otázka typu Je zmluva podpísaná? vyzerá jednoducho, ale odpoveď môže závisieť od dodatku, dátumu, identity podpisujúcej osoby alebo od toho, či dokument iba uvádza plán podpisu. Model musí najprv nájsť relevantný dôkaz a rozlíšiť ho od podobnej, no neplatnej zmienky. Ak podklad odpoveď neobsahuje, bezpečný systém nemá hádať áno alebo nie. V praxi preto býva užitočná tretia možnosť neviem a citácia vety, ktorá rozhodnutie podporuje alebo vysvetľuje jeho nemožnosť.
Časté otázky
Otázky, ktoré spresňujú význam
Je táto úloha iba binárna klasifikácia?
Môže byť implementovaná binárne, ale kvalitný systém často potrebuje aj triedu bez dôkazu. Inak je nútený zvoliť odpoveď pri neúplnom kontexte.
Prečo sú negácie náročné?
Model musí rozlíšiť, čo je negované, v akom rozsahu a či ide o citáciu, podmienku alebo minulosť. Povrchová zhoda slov nestačí.
Ako sa hodnotí vysvetlenie odpovede?
Samostatne sa overuje správnosť polarity, podpora citovaným kontextom a úplnosť odôvodnenia. Dobrá odpoveď nesmie pridať tvrdenie, ktoré zdroj neobsahuje.
Čo je yes bias?
Tendencia modelu voliť kladnú odpoveď častejšie, než zodpovedá dátam. Môže vzniknúť z nevyváženého datasetu alebo sugestívneho promptu.
Kde sa úloha používa?
V právnom review, medicínskom triage, kontrole pravidiel, technickej podpore a pri overovaní podmienok v dokumentoch, vždy s primeranou ľudskou kontrolou.
Súvisiace pojmy
Významové a tematické súvislosti
Pojem v rozhodovaní
Odborné články, ktoré tento pojem používajú v praxi
Zdroje a redakčná stopa
Použité východiská a odborná revízia
- BoolQ dataset paper
Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.