Promptfoo vs book-to-skill

2つのAIツールの機能・価格・特徴を詳しく比較します。

Promptfoo

プロンプトとモデルのパフォーマンスを体系的に比較分析する開発者向けテストフレームワーク

詳細レビューを見る

book-to-skill

技術書籍やドキュメントをAIコーディングエージェント用のオンデマンドスキルに変換するオープンソースツール

詳細レビューを見る
項目Promptfoobook-to-skill
料金タイプ無料+有料(月額 $20 から)無料
韓国語対応部分対応非対応
プラットフォームWeb, CLI, APIGitHub Copilot CLI, Amp, Claude Code
オープンソース対応対応
API 提供提供-
SDK提供-
LLMベース対応-
マルチモーダル対応-
AIモデル--
GitHub Stars-28.8K
開発元Promptfoo-
カテゴリ開発ツール開発ツール
詳細見る 見る

Promptfoo の主な機能

  • GPT, Claude, Gemini, DeepSeek 등 멀티 모델 동시 성능 벤치마킹
  • 프롬프트 인젝션·PII 유출 등 50가지 이상 취약점 레드팀 스캐닝
  • GitHub Actions·GitLab CI 연동 자동 회귀 테스트
  • LLM-as-judge 방식 AI 기반 출력 품질 평가
  • JSON 스키마·비용·지연 시간 임계값 단언(Assertion) 설정
  • 에이전트 및 RAG 파이프라인 테스트 지원

book-to-skill の主な機能

  • 기술 서적과 문서 폴더를 구조화된 에이전트 스킬로 변환
  • 장별 문서, 용어집, 패턴, 치트시트 자동 생성
  • 필요한 장만 불러오는 온디맨드 로딩
  • PDF, EPUB, DOCX, HTML, RTF, Markdown 등 지원
  • GitHub Copilot CLI, Amp, Claude Code 호환
  • 문서와 추출 과정을 로컬에서 처리