ComfyUIが、Alibaba PAIチームが開発した動画生成モデルWan2.2 Fun ControlおよびWan2.2 Fun InPをネイティブでサポートした。同時に、動画生成を高速化するLightX2V Wan2.2 Lightning LoRAも統合。両モデルはApache 2.0ライセンスでリリースされており、商用利用が可能。

  • Wan2.2 Fun InP: 最初と最後のフレームを指定し、その間を滑らかにつなぐ動画を生成するモデル。
  • Wan2.2 Fun Control: ポーズ、深度、Cannyエッジ、軌跡など、複数のモダリティで動画生成を精密に制御するモデル。
  • LightX2V 4 Steps LoRA: Wan2.2モデルに適用可能なLoRAで、動画生成を速くする。品質はわずかに下がるが、VRAMが少ないGPUでも使いやすい。

RTX 4090D (24GB) 環境で640x640px、81フレームの動画を生成した場合、LoRAの使用により生成時間は177.3秒から48.7秒へと短縮される。

利用方法は、ComfyUIをダウンロードまたはアップデート後、WorkflowsメニューのBrowse TemplatesからVideoセクションに進み、Wan2.2 14B Fun InPまたはWan2.2 14B Fun Controlのテンプレートを選択する。プロンプトに従い、必要なモデルファイルをダウンロードして使用できる。

参考:

#参考文献