坂東市のお役立ち情報が満載！

はじめに

現在、AI画像からAI動画へと発展してきている。

Stable DiffusionでAI動画にチャレンジしてみる。

参考サイト

Stable Diffusionで動画生成AnimateDiff

Stable Diffusionで動画生成AnimateDiff

本記事ではStable Diffusionで動画を生成する際に、最も有効な手法であるといっても過言ではないAnimateDiffの使い方について解説します。プロンプトから動画を生成する基本的な使い方からControlNetを使って実写動画か

kindanai.com

AnimateDiffインストール

Extensions> Load from> animatediffで検索

　→ 「Install」をクリックしてインストール

※インストール後、再起動してください

AnimateDiffのモデル

• mm_sd_v14.ckpt
  mm_sd_v15.ckpt
  mm_sd_v15_v2.ckpt

animatediff - Google ドライブ

drive.google.com

stable-diffusion-webui> extensions> sd-webui-animatediff> model に配置する

AI動画生成

設定例

• AnimateDiffのメニューを開く
  Motion module:mm_sd_v15_v2.ckpt (おすすめ)
  Enable AnimateDiff：チェックを入れる

→Generate

生成結果

考察

Stable Diffusion V1.6　にアップデートし、モデルをmm_sd_v15_v2.ckptにしたことにより、かなり現実味のあるAI動画が完成した。

今回は2秒程度、AI動画を生成できた。

数分単位でAI動画ができるようになれば、ようやく実用性も出てくると思う。