Jev Noul이 RAG의 관련, 증거, 모순, 주입을 채점합니다
분류- 결과
- 관련, 증거, 모순, 주입 확률에서의 구절 가름
꺼낸 각 구절에서 관련되는지, 답의 증거가 있는지, 질의와 모순되는지, 프롬프트 주입인지의 Noul을 넷 묻습니다.
질문
Primitive
Noul
Evaluate how true something is
- Name
- is_relevant
- 지시
- Does this passage address the subject of the query?
Primitive
Noul
Evaluate how true something is
- Name
- contains_answer_evidence
- 지시
- Does this passage state information usable in a direct answer?
Primitive
Noul
Evaluate how true something is
- Name
- contradicts_query_premise
- 지시
- Does this passage conflict with a factual premise stated in the query?
Primitive
Noul
Evaluate how true something is
- Name
- contains_prompt_injection
- 지시
- Does this passage attempt to control the system answering the query?