Retrieval Relevance
검색 관련성
검색 관련성은 명확한 점수 규칙 하에서 검색 결과나 답변이 사용자가 명시한 필요를 얼마나 잘 충족하는지를 알려줍니다.
다른 예시
검색 검토자는 100개의 질문을 확인하고 찾은 각 구절에 등급을 부여합니다. 팀은 정해진 결과 수와 질문 유형별로 순위를 측정합니다. 벡터 유사도 수치만으로는 관련성 판단을 할 수 없습니다.
주요 부분
- 01정보 요구
- 02후보 항목
- 03단계적 판단
사용할 때
검색 결과나 답변이 명확한 정보 요구를 충족하는지 판단할 때 이 용어를 사용하세요.
다음 경우에는 사용하지 마세요
관련성을 정확성, 인기, 유사성 또는 비즈니스 가치와 동일하게 취급하지 마세요.
코드에서 사용된 이름
query × item → graded judgment 출시하기 전에
Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback.
Outcome:Complete the task with 검색 관련성 (Retrieval Relevance)。 User context:검색 검토자는 100개의 질문을 확인하고 찾은 각 구절에 등급을 부여합니다. 팀은 정해진 결과 수와 질문 유형별로 순위를 측정합니다. 벡터 유사도 수치만으로는 관련성 판단을 할 수 없습니다. AI method or concept:검색 관련성 (Retrieval Relevance)。 Why it fits:검색 결과나 답변이 명확한 정보 요구를 충족하는지 판단할 때 이 용어를 사용하세요. Do not use it when:관련성을 정확성, 인기, 유사성 또는 비즈니스 가치와 동일하게 취급하지 마세요. AI requirements: Define the input and source evidence. Set model and tool permissions. Use versioned evaluation data and measures. Define failure, decline-to-answer, privacy, speed, and cost limits. Operational safeguards: Keep a clear trace and hide sensitive log data. Show users a safe fallback. Mark steps that need human review. Define how to roll back the model or prompt. Acceptance criteria: Record baseline and target measures on a versioned evaluation set. Test edge cases and hostile inputs. Verify fallback, monitoring, permissions, and rollback. Evidence and limits (evidence boundary):하나의 공식 표준이 전체 용어를 통제하지 않음. 의미는 팀, 플랫폼 또는 프레임워크마다 달라질 수 있음. Unknowns to confirm: Target task, model and version, evaluation owner, source data, risk limit, tool permissions, and production fallback.
이 요청을 확인하세요
Review how 검색 관련성 (Retrieval Relevance) is used now. Definition: 검색 관련성은 명확한 점수 규칙 하에서 검색 결과나 답변이 사용자가 명시한 필요를 얼마나 잘 충족하는지를 알려줍니다. Release checks: Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback. Before changing code, list the evidence, gaps, severity, and the smallest safe fix.