Natural language inference | AI slovník

Odborná definice

Natural language inference, zkráceně NLI, je úloha, při které model určuje logický vztah mezi premisou a hypotézou. Typické třídy jsou entailment, když hypotéza z premisy vyplývá, contradiction, když je s ňou nezlučitelná, a neutral, když premisa neposkytuje dostatek informací. NLI datasety testují lexikálne, syntaktické a kontextové uvažování, ale model může využívat i anotátorské zkratky. V aplikacích se NLI používá při kontrole konzistence, filtrování tvrzení a hodnocení podpory odpovědi zdrojem.

Srozumitelné vysvětlení

Pokud premisa zní „Všetci účastníci podpísali smlouvu“ a hypotéza „Jana podpísala smlouvu“, výsledek závisí na toho, či vieme, že Jana byla účastníčkou. Bez této informace je vztah neutrálny, ne automaticky pravdivý. NLI núti systém rozlišovat mezi tím, co text skutečně tvrdí, co popiera a co vůbec neurčuje. Při kontrole odpovědí může odhadnout, či citovaný odsek podporuje výrok, ale jeho verdikt není formálny důkaz a může selhat při číslach, negaci nebo doménové terminológii.

Časté otázky

Čím se NLI liší od sentiment analýzy?

Sentiment určuje postoj nebo emocionálnu polaritu textu. NLI porovnává dva výroky a hodnotí, či mezi nimi existuje vztah vyplývání, rozporu nebo neurčitosti.

Proč neutral neznamená, že hypotéza je nepravdivá?

Neutrálna třída hovoří pouze to, že premisa neposkytuje dostatečný důkaz. Hypotéza může být v skutečném svete pravdivá, ale z daného textu ji nelze odvodit.

Jak se NLI využívá při RAG systéme?

Model může porovnat tvrzení odpovědi s vyhladanými pasážami a označit nepodporené nebo protirečivé části. Takový kontrolní model však je třeba kalibrovat na konkrétní jazyk, doménu a délku textu.

Jaké chyby způsobuje negace?

Model může přehlédnout slova jako „ne“, „nikdy“ nebo výnimkové podmínky a zaměnit podobné věty za entailment. Proto je třeba mít testy s explicitní i implicitní negací.

Je vysoké skóre na SNLI nebo MNLI zárukou logického uvažování?

Ne. Benchmarky obsahují jazykové vzory, které může model využit bez obecné logiky. Přenos do práva, medicíny nebo slovenčiny vyžaduje samostatnou evaluaci.

Související pojmy

Zdroje a redakční stopa

Stanford Natural Language Inference Corpus MultiNLI

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.