← 概念辨析に戻る

Concept Contrast Fable

密な検索とセマンティック検索

先に結論:Dense Retrievalは技術である——ベクトルで類似度マッチングを行い、関連文書を見つける。Semantic Searchは製品能力である——ユーザーが自然言語を入力すると、システムが意図を理解して結果を返す。Dense RetrievalはSemantic Searchで最もよく使われる検索パイプラインの一つだが、Semantic Searchは他のパイプラインも使える。

Dense Retrievalは技術である——ベクトルで類似度マッチングを行い、関連文書を見つける。Semantic Searchは製品能力である——ユーザーが自然言語を入力すると、システムが意図を理解して結果を返す。Dense RetrievalはSemantic Searchで最もよく使われる検索パイプラインの一つだが、Semantic Searchは他のパイプラインも使える。

寓話

顕微鏡と健康診断センター

市に新しい健診センターが開業し、「顕微鏡技術で精密スクリーニング」と宣伝した。広告を出すと来院者は多かったが、苦情も来た。胃の検査をしたい人が、健診センターで採血して顕微鏡で細胞を見てもらった——確かにいくつかの指標はわかるが、胃の問題は胃カメラが必要だ。骨密度を調べたい人もいたが、顕微鏡はまったく使えない。

健康診断センターの主任、老彭は問題に気づいた。彼のチームはある核心技術と健康診断サービス全体を同一視していた。顕微鏡は確かに先進的で多くの検査ができるが、それは健康診断ツールボックスの中の一つの道具にすぎない。健康診断センターの責務は、顧客が何を調べたいのかを明確にし、適切なツールを選び、分析レポートを出すことだ。

老彭は健康診断センターの能力マトリクスを再定義した。第一層は問診——顧客が何を心配し、何を調べたいのかを聞き取る。第二層はツール選択——ある問題は顕微鏡、あるものは超音波、あるものは生化学分析、あるものは組み合わせて使う。第三層は解釈——複数のツールの検査結果をまとめ、顧客に完全な判断を提供する。

調整後、老彭は各健康診断パッケージの背景に明確に記載するよう求めた。今回の健康診断でどの技術を使い、どの検査がどの技術に対応し、どの項目が使用技術の能力範囲を超えているか。顕微鏡は引き続き主力だが、唯一のラベルではなくなった。

後に同業者も健診をやりたくて、老彭に尋ねに来た。あなたたちの成功は顕微鏡が特に良いからですか。老彭は言った。顕微鏡は一つのベクトルマッチングツールにすぎず、サンプルライブラリの中で最も似たサンプルを見つけるのを助ける。しかし私たちが受け取る健診費は、問診から解釈までの全プロセスに対するものであり、あの一瞬の照合だけではない。

老彭はチームに両者を区別する図を描いた。顕微鏡ワークフロー:サンプルをステージに置き、類似度を計算し、最も近いマッチをいくつか返す。健康診断センターワークフロー:顧客が症状を述べ、受付が分類し、複数のツールが合同で検査し、医師が総合判断し、報告書を出す。顕微鏡は中間のごく一部にしか現れない。

年末の総括会で、老彭はチームが覚える一言を残した。顧客が金を払って買うのは健康診断の結果であり、顕微鏡は君の手にある道具にすぎない。顕微鏡を買う人には収集のためもあれば研究のためもあるが、我々の顧客が顕微鏡を買うのは、我々がそれで問題を見つけたからだ。道具を目的にすれば、君の健康診断センターはただの顕微鏡レンタル部屋になる。

新入社員研修の最後のスライドにはこう書かれていた。概念辨析第一問——密集検索は技術、セマンティック検索は能力。技術は置き換え、アップグレード、組み合わせができる。能力はユーザー需求に向けて完全なチェーンを設計する必要がある。

密検索

ベクトル埋め込みを用いた意味的類似度マッチングの検索技術。クエリと文書の両方をベクトルに符号化し、ベクトル空間の距離によって最も関連する文書を見つける。具体的な検索実装手法の一つである。

セマンティック検索

ユーザーの自然言語クエリの意図を理解し、関連する結果を返す製品能力。密な検索、疎な検索、ハイブリッド検索、クエリ書き換え、意図分類など多様な技術コンポーネントを含む可能性があり、完全な検索システム能力である。

物語の対応

  • 顕微鏡:密検索——ベクトル類似度に基づく具体的なマッチング技術。
  • 健診センター:セマンティック検索——意図理解から結果返却までの完全な製品チェーン。
  • 胃病は顕微鏡では見つからない:異なるクエリタイプには異なる検索戦略が必要で、密検索は万能ツールではない。
  • ケイパビリティ・マトリクス三層アーキテクチャ:セマンティック検索の本番システムは意図分析、マルチパス検索、結果集約を含む。
  • 顕微鏡を貸家にする比喩:ある技術を完全な製品として提供すると、能力の境界が合わなくなる。

プロジェクトに落とし込む

検索システムを構築するときは、まずセマンティック検索の製品境界を定義する——どのクエリタイプをサポートし、どの形式の結果を返し、レイテンシとスループットの要件は何か。密集検索はその中の一つのデータ経路にすぎない。実際の本番システムでは通常、密集検索に加えてクエリ書き換え、疎検索のフォールバック、ハイブリッドランキング、結果の重複排除も必要である。ベクトルDBを導入したからといって「セマンティック検索ができた」と対外に宣言してはならない。

京ICP备2026014272号