Odpovídání na otázky ano nebo ne | AI slovník

Odborná definice

Yes/no question answering je úloha, ve které systém rozhoduje, či dostupný kontext podporuje kladnou nebo zápornou odpověď na polaritu otázky. Některé datasety povolují i stav neznámé, neurčité nebo nedostatečné důkazy. Úloha vyžaduje identifikaci tvrzení, práce s negací, kvantifikátormi, časem a často i kombinování více vět. Při generativních modelech se hodnotí nejen token ano nebo ne, ale i soulad odůvodnení se zdrojem, kalibrace istoty a odolnost vůči sugestívnej formulaci otázky.

Srozumitelné vysvětlení

Otázka typu Je zmluva podpísaná? vypadá jednoduše, ale odpověď může záviset od dodatku, dátumu, identity podpisujúcej osoby nebo od toho, či dokument pouze uvádí plán podpisu. Model musí nejprve najít relevantní důkaz a rozlíšit ho od podobné, ale neplatnej zmienky. Pokud podklad odpověď neobsahuje, bezpečný systém nemá hádať ano nebo ne. V praxi proto bývá užitečná tretia možnost neviem a citace věty, která rozhodnutí podporuje nebo vysvětluje jeho nemožnost.

Časté otázky

Je tato úloha pouze binární klasifikace?

Může být implementovaná binární, ale kvalitní systém často potřebuje i třídu bez důkazu. Jinak je nútený zvolit odpověď při neúplnom kontextu.

Proč jsou negace náročné?

Model musí rozlíšit, co je negované, v akom rozsahu a či jde o citaci, podmínku nebo minulost. Povrchová shoda slov nestačí.

Jak se hodnotí vysvětlení odpovědi?

Samostatně se ověřuje správnost polarity, podpora citovaným kontextem a úplnost odůvodnení. Dobrá odpověď nesmí přidat tvrzení, které zdroj neobsahuje.

Co je yes bias?

Tendence modelu volit kladnou odpověď častěji, než odpovídá datům. Může vzniknout z nevyváženého datasetu nebo sugestívneho promptu.

Kde se úloha používá?

V právním review, medicínském triage, kontrole pravidel, technickej podpoře a při overování podmínek v dokumentech, vždy s přiměřenou ludskou kontrolou.

Související pojmy

Zdroje a redakční stopa

BoolQ dataset paper

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.