에비던틀리AI

에비던틀리AI

Evidently AI

머신러닝과 LLM 모델의 성능을 평가하고 데이터 변화를 모니터링하는 오픈소스 파이썬 플랫폼

부분 무료WebAPI오픈소스
웹사이트 방문하기evidentlyai.com

검증된 사실

최신 버전
0.7.212026-03-10
최근 변경
2026-03-10 v0.7.21 릴리스 — API 문서 로고 표시 및 리포트 테이블 페이지네이션 기능 추가 소스: https://github.com/evidentlyai/evidently/releases 2025-

2026-06-15 직접 확인 · 자동 검증 데이터

제품 화면

에비던틀리AI 제품 화면

2026-06-15 확인

가격 정보

부분 무료시작 가격: 월 80달러 (팀 플랜 기준, 오픈소스 및 개인용 클라우드 무료)

오픈소스 ML 모니터링 도구로, 무료 플랜(Developer)에서 월 1만 행의 데이터를 처리할 수 있다. Pro 플랜은 월 $80부터 시작하며 월 10만 행 처리와 10개의 프로젝트를 지원한다. 대규모 기업을 위한 맞춤형 엔터프라이즈 플랜도 제공된다.

가격표 확인하기

최근 업데이트와 소식

소개AI 요약

Evidently AI는 ML 모델과 LLM 시스템의 성능을 평가·테스트·모니터링하는 오픈소스 파이썬 플랫폼입니다. 100개 이상의 내장 지표로 데이터 드리프트, 환각, 데이터 유출, 탈옥 시도 등을 탐지하며, RAG 파이프라인 평가와 에이전트 워크플로우 신뢰성 검증까지 AI 수명 주기 전반의 품질 관리를 지원합니다. 자체 호스팅과 관리형 클라우드 배포를 모두 지원합니다.

활용 워크플로우

입력

훈련 및 추론 데이터셋 (CSV, Parquet)LLM 입력 및 출력 로그 (Traces)기준 데이터 (Reference Dataset)PostgreSQL/S3 실시간 데이터 스트림

에비던틀리AI

데이터 및 타겟 드리프트(Drift) 통계 분석LLM-as-a-Judge 기반 응답 품질 스코어링RAG 파이프라인의 검색 관련성 및 충실도 검증100개 이상의 지표 기반 커스텀 테스트 스위트 실행

출력

인터랙티브 HTML 분석 리포트JSON/Pydantic 기반 검사 결과 스냅샷Grafana/Evidently Cloud 대시보드 시각화CI/CD 파이프라인 Pass/Fail 신호

지속적 모니터링 (Production)

실시간 데이터 드리프트 및 모델 성능 저하를 감지하여 알림 발송

RAG 시스템 평가 (Development)

환각 현상 탐지 및 검색 엔진 정확도 최적화를 위한 정밀 분석

적대적 테스트 (Security)

프롬프트 인젝션 및 유해 콘텐츠 유출 방지를 위한 레드팀 테스트

핵심 차별점: 기존 ML 모델의 통계적 드리프트 탐지와 최신 LLM의 비정형 응답 평가를 단일 파이프라인에서 통합 관리하는 AI 신뢰성 통합 플랫폼입니다.

주요 기능AI 요약

  • 100개 이상의 내장 평가 지표 (드리프트·데이터 품질·타겟 드리프트)
  • LLM 추적(Tracing) 및 데이터셋 관리
  • RAG 파이프라인 환각·데이터 유출·탈옥 탐지
  • 에이전트 워크플로우 신뢰성 자동 검증
  • LLM-as-a-Judge 평가 체계 구축 지원
  • 자동 프롬프트 최적화(Prompt Optimization)

활용 사례AI 요약

  • RAG 파이프라인 환각 및 응답 품질 자동 탐지
  • 프로덕션 ML 모델 데이터 드리프트 실시간 모니터링
  • LLM 에이전트의 안전성·신뢰성 검증 파이프라인 구축
  • 데이터 사이언스팀 AI 시스템 품질 보고서 자동 생성
  • ML 모델 A/B 테스트 및 성능 비교 분석

사용자 리뷰

리뷰를 불러오는 중...

대안 도구

이 도구 대신 사용할 수 있는 대안