Retrieval Relevance
Pertinence de récupération
La pertinence de la récupération indique dans quelle mesure un résultat de recherche ou une réponse satisfait le besoin exprimé de l'utilisateur selon des règles de notation claires.
Un autre exemple
Un réviseur de recherche vérifie 100 questions et attribue une note à chaque passage trouvé. L'équipe mesure le classement selon un nombre défini de résultats et par type de question. Un simple chiffre de similarité vectorielle n'est pas un jugement de pertinence.
Parties principales
- 01besoin d'information
- 02élément candidat
- 03jugement gradué
Utilisez-le lorsque
Utilisez ce terme lorsque vous jugez si les résultats de recherche ou une réponse satisfont un besoin d'information clair.
Ne l'utilisez pas lorsque
Ne considérez pas la pertinence comme équivalente à l’exactitude, à la popularité, à la similarité ou à la valeur commerciale.
Nom utilisé dans le code
query × item → graded judgment Avant d'expédier
Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback.
Outcome: Complete the task with Pertinence de récupération (Retrieval Relevance). User context: Un réviseur de recherche vérifie 100 questions et attribue une note à chaque passage trouvé. L'équipe mesure le classement selon un nombre défini de résultats et par type de question. Un simple chiffre de similarité vectorielle n'est pas un jugement de pertinence. AI method or concept: Pertinence de récupération (Retrieval Relevance). Why it fits: Utilisez ce terme lorsque vous jugez si les résultats de recherche ou une réponse satisfont un besoin d'information clair. Do not use it when: Ne considérez pas la pertinence comme équivalente à l’exactitude, à la popularité, à la similarité ou à la valeur commerciale. AI requirements: Define the input and source evidence. Set model and tool permissions. Use versioned evaluation data and measures. Define failure, decline-to-answer, privacy, speed, and cost limits. Operational safeguards: Keep a clear trace and hide sensitive log data. Show users a safe fallback. Mark steps that need human review. Define how to roll back the model or prompt. Acceptance criteria: Record baseline and target measures on a versioned evaluation set. Test edge cases and hostile inputs. Verify fallback, monitoring, permissions, and rollback. Evidence and limits (evidence boundary): Aucun standard officiel unique ne régit l’ensemble du terme. Sa signification peut varier selon les équipes, plateformes ou frameworks. Unknowns to confirm: Target task, model and version, evaluation owner, source data, risk limit, tool permissions, and production fallback.
Vérifiez cette demande
Review how Pertinence de récupération (Retrieval Relevance) is used now. Definition: La pertinence de la récupération indique dans quelle mesure un résultat de recherche ou une réponse satisfait le besoin exprimé de l'utilisateur selon des règles de notation claires. Release checks: Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback. Before changing code, list the evidence, gaps, severity, and the smallest safe fix.