AI用語集
リランキング
リランキングとは、速い検索の上位結果を、遅いがより丁寧なモデルで並べ直し、最も良い部分が先頭に来るようにすることです。
最初の検索で、たとえば五十件の候補を安く取り出します。リランカーは検索語と各候補を一緒に読み、その部分がその質問にどれだけ答えているかを採点します。
組にして読むので、別々の埋め込みを比べるよりずっと正確ですが、全件に使うには遅すぎます。そのため候補の絞り込み後にだけ使います。
最初の検索で出てこなかった部分は救えません。正しいチャンクが候補にないなら、最初の検索を広げるか、チャンク分割を見直します。