AI用語集
ハイブリッド検索
ハイブリッド検索とは、同じ検索語でキーワード検索とベクトル検索を行い、二つの結果を統合して、互いの弱点を補う方法です。
BM25などのキーワード検索は「ERR_42」のような正確な語に強く、ベクトル検索は「アプリが起動しない」のような言い換えに強い方法です。両方を使えば、片方だけでは見逃す文書も見つかります。
よく使う統合方法はReciprocal Rank Fusionで、各リストでの順位から点を付けるため、性質の違う二つのスコアを直接比べずに済みます。
前後で測りましょう。たいてい効果はありますが、どれだけ良くなるかは質問の内容次第で、実際の検索語のテストセットでしか分かりません。