Odborná definice
Odborná definice
Question answering je úloha, při které systém prijme otázku a vytvoří nebo vybere odpověď z dodaného kontextu, indexu, databáze nebo naučených parametrů. Systém může být extraktívny, generativní, open-domain, closed-domain nebo multimodální. Důvěryhodná implementace oddeluje nájdení důkazů od formulace odpovědi, podporuje abstenci a uchovává provenance. Jazyková plynulosť nepreukazuje, že odpověď vyplývá ze zdroje nebo že otázka byla zodpovedatelná.
Srozumitelné vysvětlení
Srozumitelné vysvětlení
Uživatel se opýta, dokedy lze odstúpit od smlouvy. Systém může najít relevantní odsek, vybrat přesnou větu a vysvetlit ji. Pokud dokument neobsahuje datum nebo platí pro jinou jurisdikci, správným výsledkem může být odmítnutí odpovědi. Generativní model má tendenci prázdne místo doplnit. Proto se při důležitých otázkach kontroluje, či každý podstatný údaj má oporu v konkrétním zdroji.
Časté otázky
Časté otázky
Jaký je rozdíl mezi extractive a generative QA?
Extraktívny systém vybírá úsek z kontextu. Generativní formuluje novou větu a může kombinovat více důkazů.
Jak se hodnotí krátka odpověď?
Exact match a tokenové F1 porovnávají s referencí, ale nepostačují při více správných formulacích a faktickom zdůvodnení.
Co je unanswerable question?
Otázka, na kterou dostupný kontext neposkytuje dostatočnou odpověď. Model má rozpoznat nedostatok důkazu, ne hádať.
Jak se omezuje halucinace?
Retrievalem, citacemi, kontrolou entailmentu, validací čísel a možností odpověď neposkytnúť.
Je QA vhodné na vysokorizikové rozhodnutí?
Může podporit vyhladání informace, ale potřebuje doménovou validaci, aktuálně zdroje a jasné ponechání rozhodovací zodpovednosti člověku.
Související pojmy
Související pojmy
Zdroje a redakční stopa
Zdroje a redakční stopa
- Rajpurkar et al., SQuAD, 2016
Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.