エロ話を垂れ流すブログ。18歳未満閲覧禁止。
当サイトの記事にはアフィリエイト広告のリンクが含まれる場合があります

Wan2.2 VACE Prepでクリップ間の結合をスムーズにする

コメント欄で VACE CLIP Joiner というワークフローを教えてもらったので今回はそれを使った動画の結合テストです。

動画クリップの接続時に発生する色や明るさの不具合については、WAN VACE Clip Joinerを試してみるのも一案かもしれません。 https://civitai.com/models/2024299?modelVersionId=2677624

VACEって、Wan2.2 Animateみたいにリファレンス動画を基に、同じ動きのWanVideoを生成する技術だと思い込んでたんですけど、複数の動画の結合をスムーズにする仕組みとしても使えるらしいんですね。
(つまり、これは色や明るさを修正する仕組みではありませんが、普通に興味深いワークフローだったので使ってみた、というお話です)

具体的には ComfyUI-Wan-VACE-Prep というカスタムノードを使うのですが、専用のワークフローを公開してくださっている方がいるので、ありがたくお借りすることにしました。

尚、noteの「Wan VACE Prepで滑らかに動画をつなぐ」という記事で配布されているワークフローがコンパクトで見やすかったのでてっとり早く試したい方はこちらのほうがオススメ。

Civitaiにある WAN VACE Clip Joiner は特定のディレクトリにある動画をまとめて処理することが前提のワークフローだったりするので、慣れていない方にはちょっと面倒くさく感じるかも。ループ動画用のワークフローなども入っていて高機能ではあるんですけどね。

普通に動画クリップを繋げると繋げた部分でカクつきが発生する

まずはWan2.2 I2Vで、4秒動画を2つ生成し、4+4=8秒の動画にした例です。

4秒あたりで、女の子の頭がカクっと上に移動するのがわかると思います。

I2Vは元となる静止画から動画を作るので、同じ絵から2つのクリップを生成したらこうなるのは当たり前の話。

だから、通常はピンポンループ(順再生+逆再生)にしてスムーズに繋げるか、あるいは1クリップ目はI2V、2クリップ目は1クリップ目の最終フレーム画像からFLF2Vで、元画像に戻してあげるという処理をします。

しかし、VACE Prepを使うとそんなこと気にせずに多少強引にクリップ間の結合をスムーズにしてしまえるというのです。

VACE Prepで4秒+4秒の動画を繋げた例

VECE Prepを使うと、このようにカクつきが一切ありません。

どうやら、1クリップ目の最後から8フレーム分をリファレンス動画として扱い、2クリップ目の前半8フレームを再生成しているようなのです。

この8フレームという部分は通常、ワークフローで好きに指定できます。8でもカクつきが気になる場合は16とかにするとより自然に繋がるらしい。

イメージ的にはクリップの繋ぎ目から前後8フレームずつ切り取って、FLF2Vみたいな挙動しているように思えるけど、単にそれだけではトリッキーな動きをする場合もあるだろうから、vaceモデルでうまいこと調整してる感じなんですかね。詳細はわからん。

NormalとVACE Prepの繋ぎ目を比較

並べて見たほうがわかりやすいかもなので比較動画にしてみました。

今回は元画像の動きが少ないからちょっとわかりづらかったかな?

女の子の頭の動きを見ていればわかりやすいんだけど、つい股間に目がいってしまってわかりづらいかもしれないw

元絵

SDXL:

Illustrious系を適当にマージしてたら、レシピわからんくなった。

生成時間メモ

  • 環境:RTX4070 VRAM:12GB Mem:64GB
    ComfyUI 0.15.1 pytorch version: 2.10.0+cu130
    sageattention 2.2.0
  • Wan 2.2 I2V
    fp8モデル lightx2v(rank64)
    1152x768px 65F (約4秒) Step 4 CFG 1
    生成時間: 初回 191.70s 2回目 173.92s
  • VACE Prep
    fp8モデル lightx2v(rank64)
    context_frames:8 replace_frames:8
    生成時間: 初回 161.40s 2回目 119.80s

謝辞

オープンソースおよび生成モデルの制作者の皆さまに感謝します。

元絵生成
ComfyUI
Workflow:公式テンプレート
SDXL Model: 適当マージモデル
LoRA: IL_cotton_panties
動画生成
Workflow: ComfyUI 公式テンプレート
Workflow: 20260104_comfyui-wan-vace-prep.json
Workflow: WAN VACE Clip Joiner
動画編集
Shotcut
ffmpeg

PR

関連記事

LTX2.3-10Eros v1.2とWan2.2蒸留モデルとの比較

LTXなのにエロ動画が生成できるぞー!と噂の(?) LTX2.3-10Eros で動画生成したので、Wan2.2蒸留モデルとの比較をしてみました。 生成環境はメインメモリ64GB、GPUはRTX

LTX2.3とIrodori-TTSでリップシンクテスト

先日、コメント欄でLTX2.3やIrodori-TTSの話題があり、久しぶりに音声生成したくなったので、LTX2.3でパンチラ動画作りつつ、音声も入れてみました。 LTX2.3で変な音声のまま動

ACE-Step 1.5で電波ソングを作ってみた

友人にACE-Step 1.5というローカルで動作する音楽生成AIがあると聞いて面白そうだったのでさっそく試してみました。 ACE-Step 1.5で電波ソングを生成し、Wan2.2でMV化

Z-Image Truboでも反射パンツは難しかった

たまたま開いたXで、反射パンツ(磨かれた床に写ったパンツ)の絵が目に入ったので唐突に作りたくなったのですが、相変わらず面倒でした。 Z-Image / SDXL / Wan2.2を使った反射パン

コメント

新しいコメントを投稿する

[新規投稿]
 
TOP