ComfyUI Video Stabilizer：動画の手ブレ補正ノード

ComfyUI Video Stabilizer

ComfyUI Video Stabilizer は、ComfyUI 上で動画の手ブレ補正を行うための custom node です。

主に以下の3つの機能があります。

手ブレ補正には、Video Stabilizer Classic または Video Stabilizer Flow を使います。

機能としては全く同じで、処理方法が違います。

Flow の方が少し重いですが、性能は大分良いので、基本的には Flow をオススメします。

video_stabilizer_flow.json

Video Stabilizer Classic と Video Stabilizer Flow のパラメータは共通です。

Parameter	説明
`frame_rate`	入力動画の FPS。時間方向の smoothing の基準になります。
🎞️ `framing_mode`	手ブレ補正で生じる画面端の欠けをどう扱うか。動画で差が分かりやすい重要パラメータです。
`transform_mode`	カメラの動きをどの変換として推定するか。
🔒 `camera_lock`	三脚で撮ったような、かなり固定された映像に寄せます。
`strength`	推定したカメラの動きをどれくらい取り除くか。`0.0` はほぼ元の動きのまま、`1.0` は強く補正します。
`smooth`	カメラの動きをどれくらいなめらかにするか。値を上げるほど急な揺れが抑えられます。
`keep_fov`	`framing_mode` が `crop` のときだけ有効。画角をどれくらい維持するかを指定します。`1.0` はズーム少なめ、`0.0` は画角を犠牲にして余白を消します。
`padding_color`	padding が出る部分の色。後段で inpaint / outpaint する場合は `padding_mask` を使うので、色そのものはあまり重要ではありません。

元動画

crop

crop_and_pad

expand

crop
- 余白が見えないように、映像を少しズーム / クロップします。
- 揺れが大きいほど画角が狭くなります。
crop_and_pad
- なるべく元の画角を保持し、足りない部分を padding で埋めます。
- padding 部分は padding_mask として出力されます。
expand
- 全くクロップせず、必要な分だけキャンバスを広げます。

一般的な編集ソフトでは crop に近い処理しか使いませんが、動画生成モデルを使うと padding 部分をマスクとして outpainting する、といった面白い使い方ができます。

camera_lock を有効にすると、完璧ではありませんが、三脚で撮ったような固定カメラ寄りの動画に調整します。

通常の手ブレ補正は、カメラの動きを「なめらかにする」だけですが、camera_lock は、カメラの動きをできるだけ止めにいきます。

動画編集では、手ブレを消してから処理したほうが安定することがありますが、そのままだと最初の臨場感が消えます。

Video Stabilizer Motion Apply を使うと、一度 Video Stabilizer で消した手ブレを、逆に適用して復元することができます。

video_stabilizer_to_motion_apply.json

crop や crop_and_pad で補正した場合、すでに切り落とした画素は戻せません。復元まで考える場合は、最初の手ブレ補正で expand を使うのがおすすめです。