Stable Diffusionで動画生成を行う際に使用できるリンク集です。この記事ではComfyUIを使用した方法について扱っています。
AnimateDiff
Stable Diffusionに時間軸の学習ができるように層を追加したモデルです。
[https://blog.otama-playground.com/entry/20240525/1716582870]
Stable Video Diffusion
現状image2videoしか対応してませんが、動画の精度的には良いです
(AnimateDiffのようなちらつきがない)。
[https://blog.otama-playground.com/entry/20240520/1716132597]
AnimateDiff-Lightning
AnimateDiffのノイズ除去効率を上げることで数ステップで動画を生成できるようにした軽量化モデルです。2~3ステップでも良い精度で生成できます。
[https://blog.otama-playground.com/entry/20240519/1716121235]