Skip to main content
LLM 기반 애플리케이션의 Trace를 분석하고, Scorer를 활용하여 자동 평가하는 방법을 다룹니다.

​
하위 페이지

  • Trace 검색과 분석 패턴 — Trace 분석의 필요성, search_traces() API, 태그/상태/시간 필터링, Latency 병목 분석, 토큰 사용량, 에러 패턴 분석
  • LLM 평가와 프로덕션 모니터링 — mlflow.genai.evaluate(), 기본/커스텀 Scorer, 평가 데이터셋 구축, 프로덕션 모니터링, Flywheel 효과