概要
MemTestは、AIメモリシステムの評価に特化したユニバーサルなベンチマーク生成ツールです。
手続き型生成により依存性なく迅速にデータベースを生成できるほか、LLMを活用してより自然な記憶やクエリを生成したり、既存のテキストから知識を抽出してベンチマークを構築したりできます。
6次元の評価軸を持ち、データ品質検証機能や効率的なバッチLLM処理も特徴です。
AIメモリシステムの研究者や開発者が、システム性能を客観的に評価し、改善するための高品質な評価データベースを効率的に作成することを目的としています。
互換性・特徴
- Python
- CLI
- LLM連携
- 日本語対応
基本情報
| ライセンス | MIT |
| Stars | 2 |
| カテゴリ | LLM |
| アクティビティ | low |
最新リリース: v1.0.0 (2026-05-28)