概要
本ツールは、「都市センチメント認識のためのLLMエージェントにおけるペルソナの妥当性」に関する研究の公式実装です。
LLMエージェントが都市景観画像からセンチメントを認識する際の挙動の安定性と限定的な多様性を評価します。
LangGraphとOllamaを活用したアノテーションパイプラインを通じて、Qwen3-VL:8bなどのビジョンLLMを用いて画像にペルソナに基づいたアノテーションを付与し、その結果を詳細に分析することが特徴です。
想定ユーザーは、LLMエージェントのペルソナ研究者、多モーダルLLMの評価手法を探している研究者、および都市センチメント分析に関心のある開発者です。
Python 3.11+環境で動作し、実験の再現と分析にJupyter Notebooksを提供します。
互換性・特徴
- Python
- CLI
- Ollama対応
- LangGraph
- Jupyter Notebooks
- 研究ツール
基本情報
| ライセンス | CC-BY-4.0 |
| Stars | 1 |
| カテゴリ | マルチモーダル |
| アクティビティ | low |
GitHub: https://github.com/neemiasbsilva/mllm-persona-evaluation
