Promptfoo vs book-to-skill
2つのAIツールの機能・価格・特徴を詳しく比較します。
| 項目 | Promptfoo | book-to-skill |
|---|---|---|
| 料金タイプ | 無料+有料(月額 $20 から) | 無料 |
| 韓国語対応 | 部分対応 | 非対応 |
| プラットフォーム | Web, CLI, API | GitHub Copilot CLI, Amp, Claude Code |
| オープンソース | 対応 | 対応 |
| API 提供 | 提供 | - |
| SDK | 提供 | - |
| LLMベース | 対応 | - |
| マルチモーダル | 対応 | - |
| AIモデル | - | - |
| GitHub Stars | - | 28.8K |
| 開発元 | Promptfoo | - |
| カテゴリ | 開発ツール | 開発ツール |
| 詳細 | 見る | 見る |
Promptfoo の主な機能
- GPT, Claude, Gemini, DeepSeek 등 멀티 모델 동시 성능 벤치마킹
- 프롬프트 인젝션·PII 유출 등 50가지 이상 취약점 레드팀 스캐닝
- GitHub Actions·GitLab CI 연동 자동 회귀 테스트
- LLM-as-judge 방식 AI 기반 출력 품질 평가
- JSON 스키마·비용·지연 시간 임계값 단언(Assertion) 설정
- 에이전트 및 RAG 파이프라인 테스트 지원
book-to-skill の主な機能
- 기술 서적과 문서 폴더를 구조화된 에이전트 스킬로 변환
- 장별 문서, 용어집, 패턴, 치트시트 자동 생성
- 필요한 장만 불러오는 온디맨드 로딩
- PDF, EPUB, DOCX, HTML, RTF, Markdown 등 지원
- GitHub Copilot CLI, Amp, Claude Code 호환
- 문서와 추출 과정을 로컬에서 처리