概要
Evretは、推薦システム、RAG (Retrieval Augmented Generation)、検索システムにおけるリトリーバーの評価に特化した軽量なPythonフレームワークです。
Hit Rate、Recall、Precision、MRR、NDCGなどの標準的な情報検索メトリクスを用いて、リトリーバーの性能を効率的に測定できます。
トークンオーバーラップ、セマンティック、LLMを用いた判定機能や、Qdrantのようなベクトルデータベース、LangChainやLlamaIndexなどの主要なAIフレームワークとのシームレスな統合が特徴です。
AI/ML開発者や情報検索システムの研究者が、リトリーバーの精度を向上させるために活用することを想定しています。
互換性・特徴
- Python
- CLI
- LangChain対応
- LlamaIndex対応
- ベクトルデータベース対応
- IRメトリクス
基本情報
| ライセンス | MIT |
| Stars | 18 |
| Forks | 3 |
| カテゴリ | LLM |
| アクティビティ | low |
最新のissue
- feat: AutoDatasetGeneration のサポート (更新: 2026-06-15 / feat: support for AutoDatasetGeneration)
最新リリース: v0.0.2 (2026-05-10)