ragas1 RAGAS 평가 지표 Faithfulness설명: 생성된 답변이 context(retrieved docs)에서 기반하여 생성되었는지를 평가합니다. (0~1)방식: 생성된 답변을 하나의 의미를 가지는 문장으로 나누고 각각을 contexts에 있는 내용인지를 0과 1로 판단 후에 평균을 리턴합니다. Answer_Relevance설명: 생성된 답변이 질문과 얼마나 관련 있는지를 평가합니다.방식: 생성된 답변으로 n개(기본 3개)의 질문을 만들어 실제 질문과 cosine similarity로 비교합니다.전제: "어떤 답변이 질문을 정확하게 다룬다면, 그 답변만을 가지고도 원래의 질문을 충분히 재구성할 수 있다" Context_Precision설명: 가져온 문서 중에 질문과 관련 있는 것들이 얼마나 상위에 있고 많은지 평가합니다.방식.. 2025. 7. 13. 이전 1 다음
