검색 증강 생성(Retrieval Augmented Generation, RAG)의 평가는 검색 단계와 답변 생성 단계를 나누어 수행한다. 검색에서는 필요한 근거를 찾았는지, 생성에서는 그 근거를 올바르게 사용했는지 확인한다. 자체 RAG 애플리케이션에서 만든 응답 데이터도 평가에 사용할 수 있다. 답을 만드는 생성 모델(generator model)과 답을 채점하는 평가 모델(evaluator model)은 역할과 지원 조건이 다르다. 생성 모델 하나에 접근할 수 있다는 이유만으로 평가 작업에 필요한 모든 모델과 리전에 접근할 수 있다고 가정하지 않는다.
적용 범위: 생성기와 평가자의 지원 모델·리전·접근 조건을 각각 확인한다.