Repo-lab
クリエイティブ

LingBot-World v2実装ガイド:画像1枚から無限インタラクティブ動画を生成するワールドモデル

⭐ 1,293 stars GitHub →

Ant Group傘下Robbyantが公開した「LingBot-World 2.0」は、1枚の画像とアクション入力からリアルタイムに操作可能な動画世界を生成するワールドモデル。720p/60fpsのリアルタイム応答を実現するdistillモデルと、LLMエージェントを組み合わせた「Agentic Harness」が特徴。スター数1,293で急上昇中。

LingBot-World v2とは?無限インタラクティブ世界を生成するAIモデル

LingBot-World 2.0GitHub)は、Ant Group傘下の体具身AI企業Robbyantが2026年7月9日に公開したワールドモデルです。論文「Infinite Worlds with Versatile Interactions」(arXiv:2607.07534)のリファレンス実装として公開されました。

最大の特徴は「無限インタラクション」と「リアルタイム応答」の両立です。従来のビデオ生成モデルは固定長の動画を生成するのみでしたが、LingBot-World v2はユーザーのアクション入力に応じてリアルタイムで動画世界を継続生成できます。

LingBot-World v1からのアップグレード内容

LingBot-World 2.0(LingBot-World-Infinityとも呼称)は初代から4つの大きな改善があります:

  1. 無限インタラクション: 安定した品質を保ちながら無限長のインタラクションに対応
  2. リアルタイム応答: causal_fastモデルにより720p/60fpsを実現
  3. 多様なインタラクション要素: 攻撃・弓矢・魔法詠唱・射撃など豊富なアクション
  4. Agentic Harness: PilotエージェントとDirectorエージェントによる自律制御

インストールと実行手順:ワールドモデル インタラクティブ 動画生成の始め方

環境セットアップ

git clone https://github.com/Robbyant/lingbot-world-v2
cd lingbot-world-v2
pip install -r requirements.txt

モデルのダウンロード

HuggingFaceからモデルウェイトをダウンロードします:

# causal_fastモデル(リアルタイム応答用・推奨)
huggingface-cli download robbyant/lingbot-world-v2-14b-causal-fast   --local-dir lingbot-world-v2-14b-causal-fast

シングルGPUでの実行

# 提供スクリプトで簡単実行
bash run_fast.sh lingbot-world-v2-14b-causal-fast 361

マルチGPU(480P・8GPU)実行

torchrun --nproc_per_node=8 generate.py \
  --task i2v-A14B \
  --size 480*832 \
  --ckpt_dir lingbot-world-v2-14b-causal-fast \
  --image examples/03/image.jpg \
  --action_path examples/03 \
  --dit_fsdp --t5_fsdp --ulysses_size 8 \
  --frame_num 361 \
  --prompt "A serene lakeside scene..."

LingBot-World v2 使い方 実装:技術的な仕組み

Causal Pretraining Paradigm

LingBot-World v2がリアルタイム応答を実現できる理由は、因果的事前学習パラダイムにあります。通常の動画生成モデルと異なり、LingBot-World v2は各フレームの生成が前フレームの情報のみに依存するよう設計されており、ストリーミング生成が可能です。

通常の動画生成:  全フレームを同時生成(非リアルタイム)
LingBot-World:  前フレームから次フレームを逐次生成(リアルタイム可能)

Agentic Harness:LLMエージェントによる世界制御

LingBot-World v2はワールドモデル単体だけでなく、2つのエージェントを統合したシステムです:

  • Pilot Agent: キャラクターの行動計画と実行を担当
  • Director Agent: 新しい環境要素(イベント・敵・地形)の合成を担当

テキスト指示を入力するだけで、エージェントが自律的にキャラクターを動かしながら世界を拡張していきます。

既存ワールドモデルとの違い:なぜ今このツールか

Sora・GameNGen・OASISとの比較

モデル リアルタイム アクション制御 無限長 オープンソース
Sora (OpenAI) 限定的
GameNGen ゲームパッド
OASIS (Decart) 限定的 部分公開
LingBot-World v2 ✓ (720p/60fps) テキスト+コントローラー ✓ (研究用)

LingBot-World v2が他のモデルと大きく異なるのは「インタラクティビティのリアルタイム性」と「オープンソース実装の公開」です。Soraのような非リアルタイムモデルとは根本的にユースケースが異なります。

Wan Teamとの関係

LingBot-World v2はWan Teamのオープンソースコードとモデルを基盤として開発されています。Wan Teamのコントリビューションへの謝辞がREADMEに記されており、研究コミュニティ内でのコラボレーションが伺えます。

こんな人に向いている:実務活用シナリオ

研究者・ゲーム開発者・VRエンジニアが主なターゲットです。

  • ゲーム開発者(インディー・スタジオ): プロトタイプ段階で実際のゲームアセットを少量用意し、LingBot-World v2でゲームシーンを自動拡張。ゲームデザインの初期探索に活用する
  • VR/ARエンジニア: 実写映像をベース画像として入力し、ユーザーのコントローラー操作に応じたインタラクティブな仮想空間をリアルタイム生成するシステムを構築する
  • AI研究者(シミュレーション系): ロボティクス・自動運転のシミュレーション環境として活用。テキスト指示で多様なシナリオを自動生成する

使う前に知っておきたいこと:制限・注意点

ライセンス(非常に重要)

CC BY-NC-SA 4.0(非商用限定)

  • 商用利用は完全禁止(研究・教育・個人利用のみ)
  • 派生物も同じCC BY-NC-SAで公開が必要
  • Ant Group/Robbyantが商用展開している独自サービスとは別物

ゲームや商業VRへの統合を検討する場合は、Robbyantへのライセンス問い合わせが必要です。

ハードウェア要件

  • シングルGPU: NVIDIA 80GB VRAM(A100 80GB等)が推奨
  • マルチGPU: 8×GPU構成での480P生成が標準オプション
  • RTX 3090や4090(24GB)では動作が困難: 非常に高い VRAM要求

デプロイメントコードは非公開

「We do NOT plan to release our deployment code.」と明記されています。本番サービス化にはSGLangやflashdreams等のサードパーティ実装を活用する必要があります。

まとめ:LingBot-World v2が切り拓くインタラクティブ動画生成の未来

LingBot-World v2は、ワールドモデルの研究実装として最高水準の品質を誇ります。Sora等の非インタラクティブな動画生成モデルとは根本的に異なるアプローチで、「操作できる動画世界」という新しいパラダイムを実装しています。

ただしCC BY-NC-SA 4.0ライセンスによる非商用限定・高VRAM要件という制約があるため、研究・プロトタイピング用途が現実的です。商用活用を検討する場合はRobbyantへの問い合わせが必要です。スター数1,293が示す通り、研究コミュニティからの関心は非常に高く、今後の進化が期待されるプロジェクトです。

関連ツール・おすすめサービス

  • DigitalOcean — 開発者向けクラウド・GPU Dropletsでモデルテストに最適
  • Vultr — GPU付きクラウドVMでLingBot-World v2の動作検証が可能

この技術を学ぶ

クリエイティブAIに興味を持った方には、Udemyのオンラインコースもおすすめです。

毎日更新のGitHubツール情報

LINEで受け取って最新情報をキャッチアップしよう

友達追加する(無料)

関連記事

この記事が役に立ったらシェアしてください