root layout

패스트캠퍼스

평가지표 문의

2025.03.12 09:57 작성

안녕하세요, 추가적인 질문이 있어 다시 문의드립니다. 자세히 답변해주셔서 정말 감사합니다.


제가 생각했을 때, 답변의 신뢰도에 해당하는 평가 지표는 G-eval의 consistency와, DeepEval의 faithfulness, RAGAS의 faithfulness라 생각되고, 질문과 답변의 연관성에 해당하는 지표는 G-eval의 relevance와, DeepEval의 answer relevancy, RAGAS의 answer relevancy라고 생각합니다.

혹시 강사님의 생각하기에 해당 판단이 맞다고 생각드시는지요!


이러한 질문을 하는 이유는 두 가지 측면(답변의 신뢰도, 질문과 답변의 연관성)을 평가할때, 앞서 언급한 각 측면당 세개씩 존재하는 평가지표들을 평균 낸 것을 해당 측면의 성능으로 봐도 되는지 궁금해서 입니다.


답변 

연관 질문

커뮤니티 질문보기