検索の関連性

Outcome：Complete the task with 検索の関連性 (Retrieval Relevance)。 User context：検索レビュアーは100問の質問をチェックし、見つかった各パッセージに評価を付けます。チームは設定された結果数と質問の種類ごとにランキングを測定します。ベクトル類似度の数値だけでは関連性の判断にはなりません。 AI method or concept：検索の関連性 (Retrieval Relevance)。 Why it fits：検索結果や回答が明確な情報ニーズを満たしているかどうかを判断するときにこの用語を使用します。 Do not use it when：関連性を正確さ、人気、類似性、またはビジネス価値と同じものとして扱わないでください。 AI requirements: Define the input and source evidence. Set model and tool permissions. Use versioned evaluation data and measures. Define failure, decline-to-answer, privacy, speed, and cost limits. Operational safeguards: Keep a clear trace and hide sensitive log data. Show users a safe fallback. Mark steps that need human review. Define how to roll back the model or prompt. Acceptance criteria: Record baseline and target measures on a versioned evaluation set. Test edge cases and hostile inputs. Verify fallback, monitoring, permissions, and rollback. Evidence and limits (evidence boundary)：単一の公式標準が全体の用語を管理するわけではありません。その意味はチーム、プラットフォーム、またはフレームワークによって変わる可能性があります。 Unknowns to confirm: Target task, model and version, evaluation owner, source data, risk limit, tool permissions, and production fallback.