概要
OmniShowは、ByteDanceが開発した人間とオブジェクトのインタラクションビデオ生成(HOIVG)のための統合モデルです。
テキスト、参照画像、音声、ポーズなど多様なマルチモーダル入力を条件として、高品質なビデオを生成します。
単一モデルで複数の生成タスク(R2V, RA2V, RP2V, RAP2V)を柔軟にこなし、オーディオ駆動アバターやオブジェクト交換などの幅広いアプリケーションに応用可能です。
独自の条件付け技術と学習手法を採用しており、HOIVG評価のための専用ベンチマーク「HOIVG-Bench」も提供します。
HOIVGの研究者やAIビデオ生成開発者、クリエイターを主な想定ユーザーとしています。
互換性・特徴
- Python
- GPU必須
- 研究プロジェクト
- GitHub
基本情報
| ライセンス | Apache-2.0 |
| Stars | 449 |
| Forks | 24 |
| カテゴリ | 動画生成 |
| アクティビティ | mid |
最新のissue
- evaluate code (更新: 2026-07-02)
- プロジェクト内の依存関係の競合を特定し、解決する必要があります (更新: 2026-06-09 / 依赖冲突)
