1,738 repos · 11 categories · GitHub上のAI関連OSSを日本語で早見 · 毎日自動更新

TokenPack

★ 7 NOASSERTION 更新: 2026-05-14 GitHubで見る →

概要

TokenPack-RAGは、長文のドキュメント、コードベース、PDF、フォルダなどのコンテンツを、証拠密度の高いコンパクトなLLMコンテキストに変換するツールです。

ローカルの埋め込み、証拠スコアリング、予算を考慮した選択により、LLM呼び出しなしで関連性の高い情報を抽出し、Markdown形式のコンテキストファイルを出力します。

これにより、LLMへの入力トークンを削減し、コストとレイテンシを最適化します。

大規模なワークスペースを扱うAIエージェントや、効率的なRAGシステムを構築したい開発者に適しています。

互換性・特徴

  • Python
  • CLI
  • LLM関連
  • ローカル実行
  • ドキュメント処理

基本情報

ライセンスNOASSERTION
Stars7
カテゴリLLM
アクティビティlow

GitHub: https://github.com/mo-tunn/TokenPack