メインコンテンツまでスキップ

Weighted Ranker

Weighted Ranker は、各検索パスに異なる重要度の重みを割り当てることで、複数の検索パスから得られた結果をインテリジェントに統合して優先順位を付けます。熟練したシェフが複数の材料を調整して完璧な料理を作るのと同じように、Weighted Ranker は異なる検索結果のバランスを取り、最も関連性の高い統合結果を実現します。このアプローチは、複数のベクトルフィールドやモダリティを横断して検索し、特定のフィールドを最終順位で他のフィールドよりも大きく貢献させる必要がある場合に最適です。

Weighted Ranker を使用する場合​

Weighted Ranker は、複数のベクトル検索パスから得られた結果を統合する必要があるハイブリッド検索シナリオ向けに特別に設計されています。特に次のような場合に効果的です。

ユースケース例Weighted Ranker が効果を発揮する理由
E コマース検索画像の類似性とテキスト説明を組み合わせた商品検索小売業者は、ファッション商品では視覚的な類似性を優先し、技術製品ではテキスト説明を重視できます。
メディアコンテンツ検索視覚的特徴と音声文字起こしの両方を使用した動画検索クエリの意図に基づいて、視覚コンテンツと会話音声の重要度をバランスできます。
ドキュメント検索異なるセクションに対して複数の埋め込みを使用する企業向けドキュメント検索タイトルと要約の埋め込みにより高い重みを与えながら、全文の埋め込みも考慮します。

ハイブリッド検索アプリケーションで、複数の検索パスを組み合わせつつ、それらの相対的な重要度を制御する必要がある場合は、Weighted Ranker が理想的な選択肢です。

Weighted Ranker の仕組み​

WeightedRanker 戦略の主なワークフローは次のとおりです。

  1. 検索スコアの収集: ベクトル検索の各パスから結果とスコア（score_1、score_2）を収集します。

  2. スコアの正規化: 各検索では異なる類似度メトリックを使用する可能性があるため、スコア分布が異なります。たとえば、類似度タイプとして内積（IP）を使用するとスコアの範囲が [−∞,+∞] になる可能性がある一方、ユークリッド距離（L2）を使用するとスコアの範囲は [0,+∞] になります。異なる検索のスコア範囲は異なり、直接比較できないため、各検索パスのスコアを正規化する必要があります。通常は arctan 関数を適用してスコアを [0, 1] の範囲に変換します（score_1_normalized、score_2_normalized）。1 に近いスコアほど、類似度が高いことを示します。

  3. 重みの割り当て: 異なるベクトルフィールドに割り当てられた重要度に基づいて、正規化されたスコア（score_1_normalized、score_2_normalized）に重み（wi）を割り当てます。各パスの重みは [0,1] の範囲にする必要があります。得られる重み付きスコアは score_1_weighted と score_2_weighted です。

  4. スコアの統合: 重み付きスコア（score_1_weighted、score_2_weighted）を高い順にランク付けし、最終的なスコアセット（score_final）を生成します。

GdmNwbkN8haZO8bpQkOc2NIWnqF

Weighted Ranker の例​

この例では、画像とテキストを対象とするマルチモーダルハイブリッド検索（topK=5）を示し、WeightedRanker 戦略が 2 つの ANN 検索の結果をどのように再ランキングするかを説明します。

  • 画像に対する ANN 検索の結果（topK=5）：

    IDスコア（画像）
    1010.92
    2030.88
    1500.85
    1980.83
    1750.8

  • テキストに対する ANN 検索の結果（topK=5）：

    IDスコア（テキスト）
    1980.91
    1010.87
    1100.85
    1750.82
    2500.78

  • WeightedRanker を使用して、画像検索とテキスト検索の結果に重みを割り当てます。画像 ANN 検索の重みを 0.6、テキスト検索の重みを 0.4 とします。

    IDスコア（画像）スコア（テキスト）重み付きスコア
    1010.920.870.6×0.92+0.4×0.87=0.90
    2030.88N/A0.6×0.88+0.4×0=0.528
    1500.85N/A0.6×0.85+0.4×0=0.51
    1980.830.910.6×0.83+0.4×0.91=0.86
    1750.800.820.6×0.80+0.4×0.82=0.81
    110画像に含まれない0.850.6×0+0.4×0.85=0.34
    250画像に含まれない0.780.6×0+0.4×0.78=0.312

  • 再ランキング後の最終結果（topK=5）：

    ランクID最終スコア
    11010.90
    21980.86
    31750.81
    42030.528
    51500.51

Weighted Ranker の使用方法​

WeightedRanker 戦略を使用する場合、重みの値を入力する必要があります。入力する重みの値の数は、ハイブリッド検索の基本 ANN 検索リクエストの数に対応している必要があります。入力する重みの値は [0,1] の範囲内である必要があり、1 に近い値ほど重要度が高いことを示します。

Weighted Ranker の作成​

たとえば、ハイブリッド検索にテキスト検索と画像検索という 2 つの基本 ANN 検索リクエストがあるとします。テキスト検索の重要度が高いと見なされる場合は、より大きな重みを割り当てる必要があります。

python
from pymilvus import Function, FunctionType

rerank = Function(
    name="weight",
    input_field_names=[], # Must be an empty list
    function_type=FunctionType.RERANK,
    params={
        "reranker": "weighted", 
        "weights": [0.1, 0.9],
        "norm_score": True  # Optional
    }
)
パラメーター必須説明値/Example
nameはいこの Function の一意な識別子です。"weight"
input_field_namesはい関数を適用するベクトルフィールドのリストです（Weighted Ranker の場合は空にする必要があります）。[]
function_typeはい呼び出す Function のタイプです。再ランキング戦略を指定するには RERANK を使用します。FunctionType.RERANK
params.rerankerはい使用する再ランキング手法を指定します。
Weighted Ranker を使用するには weighted に設定する必要があります。		"weighted"
params.weightsはい各検索パスに対応する重みの配列です。値 ∈ [0,1]。
詳細については、Weighted Ranker の仕組み を参照してください。		[0.1, 0.9]
params.norm_scoreいいえ重み付けの前に生のスコアを正規化するかどうかです（arctan を使用）。
詳細については、Weighted Ranker の仕組み を参照してください。		True

Weighted Ranker は、複数のベクトルフィールドを組み合わせるハイブリッド検索操作向けに特別に設計されています。ハイブリッド検索を実行する際は、各検索パスの重みを指定する必要があります：

python
from pymilvus import MilvusClient, AnnSearchRequest

# Connect to Milvus server
milvus_client = MilvusClient(
    uri="YOUR_CLUSTER_ENDPOINT",
    token="YOUR_CLUSTER_TOKEN"
)

# Assume you have a collection setup

# Define text vector search request
text_search = AnnSearchRequest(
    data=["modern dining table"],
    anns_field="text_vector",
    param={},
    limit=10
)

# Define image vector search request
image_search = AnnSearchRequest(
    data=[image_embedding],  # Image embedding vector
    anns_field="image_vector",
    param={},
    limit=10
)

# Apply Weighted Ranker to product hybrid search
# Text search has 0.8 weight, image search has 0.3 weight
hybrid_results = milvus_client.hybrid_search(
    collection_name,
    [text_search, image_search],  # Multiple search requests
    ranker=rerank,  # Apply the weighted ranker
    limit=10,
    output_fields=["product_name", "price", "category"]
)

ハイブリッド検索の詳細については、マルチベクトルハイブリッド検索 を参照してください。

このページは役に立ちましたか？
Ctrl I