Odborná definícia
Odborná definícia
Rank fusion spája dve alebo viac zoradených množín výsledkov do jedného konsenzuálneho poradia. Vstupné zoznamy môžu pochádzať z lexikálneho, vektorového, multimodálneho alebo pravidlového vyhľadávania. Metódy pracujú so skóre, poradovou pozíciou alebo párovými preferenciami. Reciprocal Rank Fusion priraďuje dokumentu súčet príspevkov nepriamo úmerných jeho pozícii v jednotlivých zoznamoch. Fúzia zvyšuje robustnosť voči slabine jedného retrievera, sama však nevytvára nové kandidáty.
Zrozumiteľné vysvetlenie
Zrozumiteľné vysvetlenie
Jeden vyhľadávač môže výborne nájsť presný názov produktu, druhý zase významovo podobnú formuláciu. Rank fusion vezme ich samostatné rebríčky a zostaví spoločné poradie, v ktorom dostávajú výhodu položky umiestnené vysoko vo viacerých zdrojoch. Pri RRF netreba porovnávať nekompatibilné skóre, rozhoduje najmä pozícia. Ak však relevantný dokument chýba vo všetkých vstupných zoznamoch, fúzia ho nedokáže zachrániť, pretože kombinuje iba dodaných kandidátov.
Časté otázky
Časté otázky
Kedy je rank fusion užitočná v RAG?
Keď sa kombinuje BM25, dense retrieval, knowledge graph alebo viac formulácií dopytu. Fúzia môže zvýšiť šancu, že správny kontext zostane medzi kandidátmi pre ďalšie radenie.
Čo robí konštanta k v Reciprocal Rank Fusion?
Tlmi rozdiel medzi úplným vrcholom a nižšími pozíciami. Vyššie k zjemňuje dominanciu prvých miest, ale optimálna hodnota sa má overiť na vlastných relevance judgments.
Treba pred fúziou normalizovať skóre?
Pri metódach založených iba na poradí, napríklad RRF, nie. Pri lineárnom spájaní skóre je kalibrácia alebo normalizácia nevyhnutná, inak môže jeden retriever dominovať mierkou.
Ako sa riešia duplicity dokumentov?
Systém potrebuje stabilný identifikátor dokumentu alebo kanonickú mapu. Rovnaký obsah z viacerých indexov sa zlúči skôr, než sa vypočíta spoločné skóre.
Ako sa hodnotí kvalita fúzie?
Porovnáva sa s jednotlivými retrievermi na rovnakých dopytoch, napríklad pomocou Recall@k, MRR alebo nDCG. Dôležité je sledovať aj latenciu a diverzitu zdrojov.
Súvisiace pojmy
Súvisiace pojmy
Zdroje a redakčná stopa
Zdroje a redakčná stopa
- Cormack, Clarke and Buettcher, Reciprocal Rank Fusion, SIGIR, 2009
Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.