ComfyUI.Tokyo
SD15_AnimateDiff_No2 video(Open Pose) 2 video
走る動画を作ってみましょう。
無料動画サイトからいただいてopenposeにまとめたものです。
Image Data
作り方は、DWPose Estimatorが参考になればいいですね。
今回は、フレームレート変換をかけています。
- フレームレート変換
- ffmpeg -i input.mp4 -r 10 video.mp4
「input.mp4」が入力の動画を示します。
「-r ○」が出力動画のフレームレートを表します。「-r 10」は出力動画のフレームレートを10fpsに設定します。任意のフレームレート、名前に変更できます。
- ffmpeg -i input.mp4 -r 10 video.mp4
- 動画→静止画
- .\ffmpeg.exe -i .\video.mp4 -q:v 1 .\img\%04d.png
Workflow
ランニングが9コマ動画ですので、背景は動きません。
ランニングが繰り返し再生されます。
IPAdapter画像。イメージプロンプトですので、全体としてこんなイメージの設定として用いました。
上の画像は、SD1.5 Standard 画像生成を用いて作りました。
【結果動画】
1秒のランニング・ビデオを連続再生していますので、それと別に背景画像を生成して合成しなければなりません。
当site管理人は、ComfyUI初心者ですので、残念ながらそのような技術を持ち合わせておりません。
できたらうれしいですね。
生成した動画をもう一度KSamplerで処理し鮮明化しています。