Evidently AI
機械学習とLLMモデルの性能を評価し、データの変化を監視するオープンソースのPythonプラットフォーム
無料＋有料WebAPIオープンソース
公式サイトへevidentlyai.com
book-to-skill と比較Evidently AI の代替ツールを見る概要
Evidently AIは、MLモデルとLLMシステムの性能を評価・テスト・監視するオープンソースのPythonプラットフォームです。100以上の組み込み指標で、データドリフト、ハルシネーション（幻覚）、データ漏洩、ジェイルブレイク（脱獄）の試みなどを検知し、RAGパイプラインの評価からエージェントワークフローの信頼性検証まで、AIライフサイクル全体の品質管理をサポートします。セルフホストと管理型クラウドデプロイの両方に対応しています。
差別化ポイント
- DeepchecksやWhyLabsと同じ監視領域で、ローカルで使えるオープンソース評価とクラウド運用を両方提供し、伝統MLからLLMまで幅広いメトリクスを一つのAPIで扱う点が特徴です。
主な機能
- 100以上の組み込み評価指標（ドリフト、データ品質、ターゲットドリフト）
- LLMトレーシング（Tracing）およびデータセット管理
- RAGパイプラインのハルシネーション（幻覚）・データ漏洩・ジェイルブレイク（脱獄）検知
- エージェントワークフローの信頼性の自動検証
- LLM-as-a-Judge評価体系の構築サポート
- 自動プロンプト最適化（Prompt Optimization）
メリット・デメリット
ウェブ検索で収集したユーザーの声をまとめたものです
料金
無料＋有料開始価格: US$80/月
オープンソース版は無料。クラウドは無料Developer枠と有料プランがあり、過去の公開価格ではProが月$80から。現行の処理行数・プロジェクト上限は公式価格ページで確認が必要です。
情報更新日: · 検証ソースの確認が必要
活用事例
- RAGパイプラインのハルシネーション（幻覚）および回答品質の自動検知
- 本番（プロプロダクション）MLモデルのデータドリフトのリアルタイム監視
- LLMエージェントの安全性・信頼性検証パイプラインの構築
- データサイエンスチームのAIシステム品質レポートの自動生成
- MLモデルのA/Bテストおよび性能比較分析
対象ユーザー
データサイエンスチームMLOpsエンジニアLLMアプリ開発者AIスタートアップ
検証の根拠
会社・料金・機能の情報は、以下の一次情報と直近の検証記録に基づいて表示しています。出典が食い違う場合は、公式の一次情報と最新の検証結果を優先します。
最終検証 2026/06/15
代替ツール
この代わりに使えるツール
