root layout

패스트캠퍼스

평가 방식 문의

2025.03.08 20:17 작성

안녕하세요! 평가 방식에 대해 궁금한 점이 있어 문의드리게 되었습니다. 유익한 강의 덕에 많은 도움을 받고 있습니다.


다름이 아니라, G-eval, DeepEval, RAGAS 각각의 평가는 서로 다른 관점에서 점수를 도출하고 있는데, 이 방식들의 점수를 평균 내는 것이 각각의 점수보다 신뢰성 있는 결과를 도출하는데 의미가 있을까요? 예를들어, 답변의 신뢰도를 측정할때, 하나의 답변에 대해 G-eval의 consistency와, DeepEval의 faithfulness, RAGAS의 faithfulness를 모두 구한 후 이 3가지 점수를 평균을 계산하는겁니다. 마찬가지로, 질문과 답변의 연관성을 측정할 때도 G-eval의 relevance와, DeepEval의 answer relevancy, RAGAS의 answer relevancy를 평균을 계산하구요.


답변 

연관 질문

커뮤니티 질문보기