
에비던틀리AI
Evidently AI
머신러닝과 LLM 모델의 성능을 평가하고 데이터 변화를 모니터링하는 오픈소스 파이썬 플랫폼
검증된 사실
- 최신 버전
- 0.7.212026-03-10
- 최근 변경
- 2026-03-10 v0.7.21 릴리스 — API 문서 로고 표시 및 리포트 테이블 페이지네이션 기능 추가 소스: https://github.com/evidentlyai/evidently/releases 2025-
2026-06-15 직접 확인 · 자동 검증 데이터
제품 화면

2026-06-15 확인
가격 정보
오픈소스 ML 모니터링 도구로, 무료 플랜(Developer)에서 월 1만 행의 데이터를 처리할 수 있다. Pro 플랜은 월 $80부터 시작하며 월 10만 행 처리와 10개의 프로젝트를 지원한다. 대규모 기업을 위한 맞춤형 엔터프라이즈 플랜도 제공된다.
최근 업데이트와 소식
- 소식오픈소스에 데이터 스토리지 백엔드·원시 데이터셋 관리·LLM 트레이싱 스토리지 및 뷰어 기능 추가(이전 클라우드 전용 기능 개방).
오픈소스에 데이터 스토리지 백엔드·원시 데이터셋 관리·LLM 트레이싱 스토리지 및 뷰어 기능 추가(이전 클라우드 전용 기능 개방).
- 버전 업데이트litellm 지원 확장으로 Gemini·Anthropic 등 다양한 LLM 공급자를 평가에 활용 가능.
litellm 지원 확장으로 Gemini·Anthropic 등 다양한 LLM 공급자를 평가에 활용 가능.
- 소식v0.7.21 릴리스 — API 문서 로고 표시 및 리포트 테이블 페이지네이션 기능 추가
v0.7.21 릴리스 — API 문서 로고 표시 및 리포트 테이블 페이지네이션 기능 추가
소개AI 요약
활용 워크플로우
입력
에비던틀리AI
출력
지속적 모니터링 (Production)
실시간 데이터 드리프트 및 모델 성능 저하를 감지하여 알림 발송
RAG 시스템 평가 (Development)
환각 현상 탐지 및 검색 엔진 정확도 최적화를 위한 정밀 분석
적대적 테스트 (Security)
프롬프트 인젝션 및 유해 콘텐츠 유출 방지를 위한 레드팀 테스트
핵심 차별점: 기존 ML 모델의 통계적 드리프트 탐지와 최신 LLM의 비정형 응답 평가를 단일 파이프라인에서 통합 관리하는 AI 신뢰성 통합 플랫폼입니다.
주요 기능AI 요약
- 100개 이상의 내장 평가 지표 (드리프트·데이터 품질·타겟 드리프트)
- LLM 추적(Tracing) 및 데이터셋 관리
- RAG 파이프라인 환각·데이터 유출·탈옥 탐지
- 에이전트 워크플로우 신뢰성 자동 검증
- LLM-as-a-Judge 평가 체계 구축 지원
- 자동 프롬프트 최적화(Prompt Optimization)
활용 사례AI 요약
- RAG 파이프라인 환각 및 응답 품질 자동 탐지
- 프로덕션 ML 모델 데이터 드리프트 실시간 모니터링
- LLM 에이전트의 안전성·신뢰성 검증 파이프라인 구축
- 데이터 사이언스팀 AI 시스템 품질 보고서 자동 생성
- ML 모델 A/B 테스트 및 성능 비교 분석
사용자 리뷰
리뷰를 불러오는 중...
대안 도구
이 도구 대신 사용할 수 있는 대안
클로바 AI
Naver
한국어와 국내 맥락에 최적화된 하이퍼클로바 X로 AI 서비스를 개발·배포하는 통합 플랫폼
애스크코디
코드 생성부터 테스트, 문서화까지 개발 전 과정을 지원하는 멀티 모델 기반 AI 코딩 어시스턴트
컨티뉴
IDE 안에서 원하는 LLM을 선택해 코드 맥락을 제어하는 오픈소스 AI 코딩 어시스턴트
세레브라스
세계 최대 크기의 AI 전용 칩으로 기존 GPU보다 수십 배 빠른 초고속 LLM 추론 환경을 제공하는 API 플랫폼
블랙박스 AI
여러 AI 모델을 골라 쓰고 2억 개 이상의 저장소를 검색하며 실시간 자동완성까지 제공하는 AI 코딩 어시스턴트
그록
자체 LPU 칩으로 오픈소스 모델을 빠르게 돌리는 추론 전용 클라우드 플랫폼입니다. GPU 기반 서비스보다 초당 토큰 생성량이 높고 첫 응답까지의 지연이 짧은 점이 핵심입니다.