LS-Labs

搜尋與 AI

候選召回是什麼?

Candidate Retrieval

發布於

候選召回是從較大的內容或工具集合中,取回可能相關項目的階段。正確工具必須先進入模型可用的候選範圍,才有機會被選用;被召回、被首選與執行成功,分屬不同觀測。

召回不是最後選擇

系統可能使用 BM25 字面檢索、Embedding 語意檢索或混合方法找候選,再進行重排序或交給模型選擇。也有應用直接載入完整工具清單,沒有獨立的檢索階段。

因此,「沒有呼叫」不能直接解讀成模型比較後不喜歡某個工具。應先保存實際載入給模型的候選清單,再檢查選擇。

Recall@5 的分母要先定義

一般資訊檢索中的召回率,是取回的相關項目占全部相關項目的比例。Recall@5 只檢查前五個結果。

若每道題只有一支指定目標工具,便可逐題記錄它是否進入前五名,再統計命中題數占全部題數的比例。如果一題有多支相關工具,或分母改用全部相關文件,就必須另行交代,不能混成同一指標。

參考資料

最近查核:

← 返回名詞解釋