AIで写真を加工して動画にしてみる

撮影した映像をAIでVFX加工できるのか?
その方法はどうすれば良いのか?を調べていて
試したことをここでまとめておきます。

GeminiのVeo3.1で映像を加工できるか

今回は下記の動画素材を使用して
天候を変更したり、山を火山に変えてみたりしたいと思いましたが
結果は動画からはうまくいかなかったので
最終的には画像を加工してそれを映像に変換してみたので

その方法をまとめておきます。

Genspark AIを契約して
様々なAIツールが一つで使用できるようになっていて
これでまずはGeminiのVeo3.1を使い

そのままプロンプトで加工ができるかをやってみました。

下記のようなプロンプトで一度生成してみました。

【カメラはそのまま固定で、人物の奥にある山を火山に変更し

噴火してマグマが流れている。空は曇っていて、波は荒れている。】

結果はうまくいかずでした。。

なぜかCGアニメーションのようになってしまいました。
設定の仕方が悪かったのか、別の方法を試してみたいと思います。

Nano Banana Proで画像を加工する

動画から直接加工するのは一旦諦めて
画像の加工から行いました。

こちらの画像をNano Bananaに入れて

下記のようなプロンプトで加工してみました。

【人物の奥にある山を火山に変更し、噴火してマグマが流れている。

空は曇っていて、波は荒れている。雨が降っていて、人物の服は濡れて、汚れている。】

これで生成するとこんな感じの画像ができました。

ある程度イメージ通りになっていますが
山の形状が大幅に変わってしまっているので
山の形はそのままでありながら
火山のようにしたかったので

下記のように修正指示を出してみました。

【山の形はそのままで今の感じに変更できますか?】

このように指示を出して

このような感じになりました。

狙った通り良い感じです。

これをそのままの映像素材の人物の動きで
やりたかったのですが
単純にVeoのプロンプトだけではうまくいかなかったので

他の手法を考える必要がありそうです。

今回はこの作成した画像を
動画にしてみることにしました。

Gemini Veo3.1で動画化

Gemini Veo3.1のReferenceを使って
画像から動画を作成してみます。

下記のようなプロンプトで生成してみます。

【火山が噴火していて、雨が降っていて、波が荒れている。人物はそれを見ている。】

完成した動画はこちら

このように元の画像は活かしつつ

AIを使用してVFXをすることができました。

次回も様々なAIツールや制作ソフトを使用しながら
どのようにVFXを行うか
試してレポートしたいと思います。

お問い合わせ

IEMON.TVでは映像制作を承っております。
案件のご相談はお問い合わせボタンから
お気軽にご連絡くださいませ。