> ## Documentation Index
> Fetch the complete documentation index at: https://docs.cloosphere.ai/llms.txt
> Use this file to discover all available pages before exploring further.
# 평가 개요
> 피드백·아레나·리더보드·자동 평가로 품질을 측정하고, 추적으로 원인을 진단해 개선
관리자 › 평가
평가 기능은 AI 응답의 품질을 **피드백(수동) · 아레나·리더보드 · 자동 평가** 세 가지 방식으로 측정합니다.
* 사용자의 직접 피드백, 모델 간 블라인드 비교, LLM 기반 자동 채점을 결합하여 체계적인 품질 관리 체계를 구축할 수 있습니다.
* 측정에서 문제가 드러나면 \*\*추적(Tracing)\*\*으로 그 요청의 처리 과정을 단계별로 들여다보며 원인을 진단합니다.
```mermaid theme={null}
flowchart TB
subgraph 수동_평가
A[사용자 응답 확인] --> B[좋아요/싫어요]
B --> C[코멘트 입력]
C --> D[피드백 데이터]
end
subgraph 아레나_리더보드
K[두 모델 블라인드 비교] --> L[사용자 선택]
L --> M[Elo 순위 산출]
end
subgraph 자동_평가
E[에이전트 응답] --> F[샘플링]
F --> G[심판 LLM 평가]
G --> H[점수 기록]
end
D --> I[평가 대시보드]
M --> I
H --> I
I --> N[추적·원인 진단]
N --> J[품질 개선]
```
***
## 평가 방식
품질을 **측정**하는 세 방식과, 드러난 문제의 **원인을 진단**하는 추적으로 구성됩니다.
* 측정은 무엇이 나쁜지를, 추적은 왜 그런지를 알려줍니다.
| 구분 | 방식 | 신호 | 언제 쓰나 |
| ------ | -------------------------------------------- | ---------------- | ------------- |
| **측정** | [피드백](/ko/monitoring/feedback) | 좋아요/싫어요·코멘트 | 일상 품질 신호 수집 |
| **측정** | [아레나·리더보드](/ko/monitoring/arena-leaderboard) | 블라인드 선택 → Elo | 모델 간 우열 비교 |
| **측정** | [자동 평가](/ko/monitoring/auto-evaluations) | 심판 LLM 점수 (0\~1) | 대량·지속 품질 모니터링 |
| **진단** | [추적](/ko/monitoring/tracing) | 처리 과정 트레이스 | 낮은 점수의 원인 분석 |
***
## 세부 가이드
목적에 맞는 페이지로 이동하세요.
좋아요·싫어요·코멘트 수집, 조회, 관리
블라인드 비교 · Elo 기반 모델 랭킹
심판 LLM 자동 채점 — 켜기·결과·통계·내보내기
낮은 평가 점수의 원인을 트레이스에서 추적