← 概念解説に戻る

Concept Fable

ハイブリッド検索

先に結論:ハイブリッド検索(Hybrid Search)は、キーワード/スパース検索(BM25など)とベクトル/セマンティック検索を組み合わせた検索方法です。キーワード検索は固有名詞、番号、コード、法規条項の正確なマッチングが得意で、ベクトル検索は字面は異なるが意味が近い内容を見つけるのが得意です。企業RAGでは両者の組み合わせがよく必要で、マージ、重複排除、重み融合、reranker再ランクを通じて召回品質を高めます。

ハイブリッド検索 · 検索手法

まず物語を読む。ここでは急いで定義を示さず、まず問題そのものを立ち上がらせる。

寓話

二人の書物探しはついに一緒に外出することを学んだ

書楼には二人の館吏がいた。一人は字で本を探すのが得意で、読者が書名、著者、独特な語句を言えばすぐにめくって見つけられた。もう一人は意図を聞くのが得意で、読者が曖昧に言っても、解決したい問題を推測できた。

当初、館長は字別館の吏に一人で当直させた。『南堤水患記』を探す人がいれば、彼はすぐに見つけた。しかし農夫が「田んぼのそばにいつも水が溜まるのはどうすればいいか」と尋ねると、彼は題名を隅々まで調べても良い本を何冊も見つけられなかった。

館長はさらに、意図を聞き取る館吏に当直を命じた。農夫は満足したが、学者は慌てた。学者は明らかに珍しい地名を含むある古い文を求めていたのに、館吏は意味の近い水利書を勧め、その一篇ではなかった。

最初の修正は、二人に交代で応対させることだった。その結果、読者はまず自分がどの類の問題に属するかを推測しなければならず、間違えればやはり無駄足になった。館長はここで初めて気づいた。問題は誰がより強いかではなく、異なる手がかりにはそれぞれ盲点があることだ。

後に、二人の館吏が同じ机に座った。読者が要求を述べると、一方は字面通りに正確な一致を探し、もう一方は意味に基づいて近い資料を探し、二つの候補を合わせて並べ替える。珍しい語が埋もれることもなく、曖昧な意図が見落とされることもない。

時に二人の意見が衝突すると、館長は場面を見る。法条文の原文を探すなら字面の重みが高く、解決策を探すなら意図の重みが高く、原文と背景の両方が必要なら二つの手がかりを互いに補完させる。

館長は統合結果に再確認も設けた。文字通りの一致した書と意図に一致した書が同時に現れたら、両者の重なりを優先して見る。完全に分かれている場合は、単純に足し合わせるのではなく、読者の目的に応じて順位を調整する。館長はまた、二人の館吏の結果を単純に半分ずつにできないことにも気づいた。読者が番号を持って来る場合、文字通りの一致がほぼ成否を決める。読者が問題を説明するだけなら、意味の近さがより重要になる。良い統合は状況を理解していなければならない。さもなければ、二つの手がかりを足しても新たなノイズになる。書楼は後に誤例を掲げて新人を訓練した。どの誤りが文字だけを見たことによるものか、どの誤りが意図だけを推測したことによるものか、一目で区別できる。館長は言った。手がかりが多いほど、この瞬間にどの手がかりがより信頼できるかを知る必要がある。

書楼はそのため苦情がずっと減った。人々は、良い探索は単一の方法に賭ける必要がないと理解した。正確な語は門札のようであり、意味は街区のようである。門札と街区を一緒に使ってこそ、人を本当に必要な書物の前へ連れて行きやすい。

明らかにする

この物語が語っているのは:ハイブリッド検索

ハイブリッド検索(Hybrid Search)は、キーワード/スパース検索(BM25など)とベクトル/セマンティック検索を組み合わせた検索方法です。キーワード検索は固有名詞、番号、コード、法規条項の正確なマッチングが得意で、ベクトル検索は字面は異なるが意味が近い内容を見つけるのが得意です。企業RAGでは両者の組み合わせがよく必要で、マージ、重複排除、重み融合、reranker再ランクを通じて召回品質を高めます。

重要なのは、それが単なる用語ではなく、実際のAI/Agentシステムで繰り返し現れる構造的な問題だという点だ。これを理解して初めて、いつモデルを足すべきか、いつプロセスを変えるべきか、いつガバナンスを補うべきかを判断できる。

メタファーのマッピング

  • 目がとても鋭い本探し人:キーワード検索、BM25、転置インデックス
  • 精度が高いと評判の書籍探索者:ベクトル検索、embedding、セマンティック検索
  • BM25 のような明確な語:字面の正確一致が強みとなる場面
  • キーワードの重みで資料を探す従来の方法:同義表現によりキーワード検索が漏れ召回する
  • 契約第 7.2 条:ベクトル検索は正確な番号や記号のマッチングが苦手な場合がある
  • 二人が同時に外出:ハイブリッド検索は疎検索と密検索を同時に使う
  • 統合、重複排除、再並べ替え:結果融合、dedup、score normalization、reranking
  • 中国語の新規則と英語の旧通知が同時に現れる:ハイブリッド検索は、言語をまたぎ、固有名詞や同義表現が混在する企業ナレッジベースに適している

Andy(任旭)判断

この概念の実戦的価値は、「賢く見えるAI機能」を納品可能、検収可能、ガバナンス可能な作業単位に分解する手助けをすることです。

BM25sparse retrievaldense retrievalembeddings再ランキングsemantic search

関連する識別

この概念は隣接概念と混用されやすいので、対比ページを続けて見ることをおすすめする。

京ICP备2026014272号