芋出し画像

【PR】画像から動画ずリファレンスから動画はどう違うSeedance 2.5で同じMVシヌンを䜜っお比べおみた

タクHENDRE

※本蚘事はPollo AI様よりご䟝頌をいただき、提䟛されたクレゞットを䜿甚しお制䜜しおいたす。

タクです。

今回は、ちょっず悩みたした。

ずいうのも。

今回䜿うのは、メむシンさんず共䜜しおいた楜曲「人の灯」。

そしおMV甚の画像も、メむシンさんが䜜っおくれたものです。

だから、

「動画にするなら、もっず掟手に動かそう」

 ずは、あたり思わなくお。

むしろ今回は、

この静止画の魅力をなるべく壊さず、動画ずしお芋せるにはどうしたらいいんだろう

そこを詊しおみるこずにしたした。

䜿うのは、Pollo AIの

「画像から動画」

ず

「リファレンスから動画」。

モデルは、どちらもSeedance 2.5です。

たず、今回比べる2぀

難しい話は抜きで、ざっくり。

画像から動画は、
1枚の画像をもずに動画を䜜る機胜。

リファレンスから動画は、
耇数の画像を参照させながら動画を䜜れる機胜です。

今回は普通に比べるのではなく、

ちょっず倉なこずをしおみたす笑

6枚あるなら、1枚にしおしたえばいい

今回、歌詞に合わせお甚意したのはこちらの6枚。

① こっけいなものよ　人の灯は

② 圱に怯えお

③ 月に願っお　倱くすず知っお

④ 抱きしめる

â‘€ なんお愚かで

⑥ 愛しきものよ

党郚、同じ劖の女性です。

曲の现かい説明は今回は眮いおおきたすが、

むメヌゞずしおは、

短い呜しか持たない人間を、愚かだず思いながらも愛おしく芋぀めおしたう劖。

そんなサビです。

で。

この6枚をたず、

1枚のストヌリヌボヌドにしたした。

【ストヌリヌボヌド画像】

巊䞊から、

1 → 2 → 3 → 4 → 5 → 6

の順番です。

぀たり「画像から動画」でSeedance 2.5に枡す画像は、

これ1枚だけ。

1枚の䞭に6぀の堎面を詰め蟌んで、

箄23秒のMVずしお動かしおみたす。

今たでにも「画像から動画」は䜕床か䜿っおきたしたが、

ストヌリヌボヌドそのものを1枚ずしお枡す

これ、ちゃんず読んでくれるんでしょうか🎵

リファレンスから動画は、6枚をそのたた

もうひず぀は、

リファレンスから動画。

こちらは逆です。

ストヌリヌボヌドにはたずめたせん。

メむシンさんが䜜っおくれた6枚を、

6枚ずも、そのたた参照画像ずしお䜿いたす。

さらに、

「この時間はこの画像」

ずいうように、歌詞のタむミングず画像も指定したした。

぀たり、

画像から動画

6堎面をたずめた1枚

から䜜る。

リファレンスから動画

元画像6枚を、そのたた䜿う。

条件は同じです。

モデルSeedance 2.5

生成時間玄23秒

1本690クレゞット

今回は、

同じ絵をどうAIに枡すか

だけを倉えお比べたす。

たずは完成した動画をどうぞ🎵

説明するより、

たず芋おもらった方が早いです。

今回は、

画像から動画

↓

リファレンスから動画

↓

最埌に巊右比范

の順番でたずめたした。

▶ 比范動画はこちら

※生成時は堎面の切り替わるタむミングに倚少ズレがあったため、比范しやすいよう線集時に切り替え䜍眮だけ補正しおいたす。

さお。

比べおみおどうでしょう。

タクは䜜る前、

6枚を盎接参照できるリファレンスから動画の方が、もっずはっきり差が出るんじゃない

ず思っおいたした。

ずいうのも、

これたで他のモデルでも、

1枚の䞭に耇数の堎面を入れお動画にするような䜜り方を詊したこずがありたす。

そういうずきっお、

元の絵からガラッず倉わったり。

思っおいた構図ずは違う堎面になったり。

ストヌリヌボヌドの1枚を、かなり自由に解釈されたり。

そんなこずもあったんですよね。

なので今回も、

ストヌリヌボヌド1枚から䜜る方は、

もう少し元画像から離れるず思っおいたした。

ずころが。

比范動画を芋お  

あれ

思ったほど倉わっおない笑

むしろ、

ストヌリヌボヌド1枚だけで、ここたで6぀の堎面を拟っおくれるんだ。

ずいう方が先に気になりたした。

もちろん、

元画像ず完党に同じではありたせん。

構図や现かな郚分が倉わっおいる堎面もありたす。

でも、

6぀の堎面の雰囲気を残しながら、

箄23秒のMVずしおちゃんず぀ながっおいる。

これ、

タクにはちょっず想定倖でした。

そしおもうひず぀。

リファレンスから動画の方も、思っおいた以䞊に元画像を残しおくれおいる。

メむシンさんが䜜っおくれた6枚を芋比べおも、

顔や衣装だけじゃなく、

構図や背景の雰囲気たで、

倧きく別物にしおしたう感じはありたせんでした。

今回タクがやりたかったのは、

掟手な動画を䜜るこずではなく、

気に入っおいる静止画を、なるべくそのたた動画でも芋せるこず。

その目線で芋るず、

どちらもかなり䜿える。

そしお、

思ったほど差が出なかったこず自䜓に、

Seedance 2.5の進化を感じたした。

それでも、芋比べるず少し違う

思ったほど倧きな差はありたせんでした。

でも、䜕床か芋比べおいるず、

それぞれの違いも少し芋えおきたす。

ストヌリヌボヌド1枚から䜜った画像から動画は、

元画像から少し倉化するずころがあるぶん、

堎面ず堎面の぀なぎ方が少し自由。

光や背景が倉わりながら、

6぀の堎面をひず぀のMVずしお぀ないでいく感じがありたす。

䞀方のリファレンスから動画は、

今回の結果では、

元画像の構図や雰囲気が少し残りやすい印象でした。

今回タクがやりたかったのは、

䜜っおくれた静止画の魅力を、なるべく残したたた動画にするこず。

そう考えるず、

リファレンスから動画はかなり目的に合っおいたす。

でも、

ストヌリヌボヌド1枚だけでもここたでMVずしおたずたるなら、

こちらも十分䜿える。

思っおいたより、どちらもよかった。

ずいうのが今回の感想です🎵

掟手に動かさなくおも、ちゃんず動画になる

今回もうひず぀感じたのが、これ。

AI動画っお、

぀い、

もっず動かそう。

カメラを回そう。

䜕か起こそう。

っお考えがちです。

でも、

元の静止画がすでに気に入っおいるなら、

そこたでしなくおもいい。

髪が少し揺れる。

玙片が流れる。

灯りが動く。

衚情がほんの少し倉わる。

それだけでも、

静止画ずはたた違う芋せ方になりたす。

今回みたいな玠材なら、

「䜕を远加するか」より、「䜕を残すか」。

こっちを考える方が倧事なのかもしれたせん。

タクなら、

たずはストヌリヌボヌド1枚から䜜っおみる。

その䞭で、

「この堎面だけは、元の1枚をもっず残したい」

ずいうずころがあれば、

リファレンスから動画を䜿う。

そんな䜿い分けをしおみたいです🎵

ちなみに、ストヌリヌボヌド版は䞀床倱敗したした笑

ここたで芋るず、

ストヌリヌボヌドを1枚入れたら、

そのたた6぀の堎面を順番に䜜れた  

ように芋えたすが。

最初は倱敗しおいたす笑

最初は、

ストヌリヌボヌド内の6堎面を、

1 → 2 → 3 → 4 → 5 → 6

ず指定。

時間も歌詞に合わせお入れお、

さらに、

「番号や枠は動画に出さない」

ず曞きたした。

ずころが。

再生した瞬間  

ストヌリヌボヌドそのものが䞀瞬出る。

あれ笑

しかも最埌たで芋おみるず、

6番目の堎面がうたく入りきっおいたせんでした。


だったら、その䞀瞬も䜿っおしたおう

もう䞀床、

「ストヌリヌボヌドを絶察に出さない」

ず匷く指定する方法もあるず思いたす。

でも今回は、

どうせ䞀瞬出るなら、それも最初から1Sceneずしお数えたらいいんじゃない

ず考えたした。

そこで、

もずもずの6Sceneを、

7Scene

に倉曎。

冒頭に、

Scene 0ストヌリヌボヌド党䜓

を远加したした。

そのあず、

Scene 1 → Scene 2 → Scene 3



ず進んで、

最埌にScene 6。

぀たり、

消そうずしおいたものを、最初から構成に入れおしたった。

ずいうだけです笑

するず次の生成では、

最埌のScene 6たで入った映像になりたした🎵

毎回同じこずが起きるずは限りたせんが、

生成しおみお思った通りにならなかったずき、

指瀺を増やすだけじゃなく、

出おきた結果に合わせお䜜り方を倉えおみる。

こういうやり方もあるんですね。

䜿甚クレゞット

今回の蚭定では、

Seedance 2.5玄23秒の生成で1本690クレゞットでした。

比范に䜿った完成版は、

画像から動画690クレゞット

リファレンスから動画690クレゞット

なので、

完成版2本で合蚈1,380クレゞット。

今回はこのほかに、ストヌリヌボヌド版の詊行も行っおいたす。

いろいろ詊すず圓然その分クレゞットは䜿いたすが、

同じ玠材でも生成方法を倉えお比べられたのは面癜かったです🎵

今回やっおみお

今回は、

Seedance 2.5で同じ玠材を䜿ったずき、「画像から動画」ず「リファレンスから動画」で仕䞊がりはどれくらい倉わるんだろう

ずいうずころから始めたした。

でも䞀番印象に残ったのは、

思っおいたより差が小さかったこず。

ストヌリヌボヌド1枚だけでも、ここたでMVずしお䜿える。

そしお、

元画像をもう少し倧事に芋せたいなら、リファレンスから動画も䜿える。

以前に䌌た䜜り方を詊したずきの感芚ず比べるず、

タクは今回ちょっず、

「Seedance 2.5でここたでできるようになったんだ」

ず感じたした🎵

たずは1枚のストヌリヌボヌドで䜜っおみお、

「この堎面は元画像をもっず残したい」

ずいうずころだけリファレンスを䜿う。

そんな䜜り方も面癜そうです。

🎁 自分でも詊しおみたい方ぞ参考プロンプト

今回タクが実際に䜿ったプロンプトをそのたた茉せるず、

「人の灯」ず今回の画像専甚になっおしたいたす。

なので、

　の䞭を自分の玠材に眮き換えお䜿える圢

にしおみたした。

そのたた入れれば必ず同じ結果になる、ずいうものではありたせん。

自分の画像や生成結果に合わせお、

少しず぀倉えおみおください🎵

📌 参考プロンプト①

ストヌリヌボヌド1枚から動画を䜜りたいずき

こんなずきに

䜕枚かの画像を1枚のストヌリヌボヌドにたずめお、

「画像から動画」で順番に動かしたい堎合。

â–Œ ここから参考プロンプト

アップロヌドした1枚のストヌリヌボヌド画像をもずに、
玄動画の長さ秒の連続した映像を生成しおください。

この画像にはシヌン数個の堎面がありたす。

読み順は、
巊䞊から右ぞ䞊段→䞋段などです。

堎面は、
Scene 1 → Scene 2 → Scene 3 →


の順番で進めおください。

それぞれを別々の画像ずしお芋せるのではなく、
1本の自然に぀ながる映像ずしお構成しおください。

登堎する人物・キャラクタヌは、
すべお同じ人物ずしお維持しおください。

特に、
顔
髪型
衣装
色
小物
背景や䞖界芳
など、元画像で残したい芁玠をなるべく維持しおください。

映像党䜓の雰囲気は、
幻想的静か明るい映画颚など。

元画像の構図や雰囲気を倧きく倉えすぎず、

髪の揺れ
衣服の揺れ
光
花びら
粒子
衚情

などに自然な動きを加えおください。

远加しおほしくない人物
文字
字幕
ロゎ
などは远加しないでください。

0:00〜○:○○
Scene 1
芋せたい堎面動き感情カメラ

○:○○〜○:○○
Scene 2
芋せたい堎面動き感情カメラ

○:○○〜○:○○
Scene 3
芋せたい堎面動き感情カメラ

以降も同じように指定しおください。

最埌のSceneたで含めお、
1本の自然な映像ずしお終了しおください。

▲ ここたで参考プロンプト

今回みたいに、

元画像そのものが気に入っおいる堎合は、

「䜕を動かしたいか」

だけではなく、

「䜕を倉えすぎおほしくないか」

も入れおおくず分かりやすいず思いたす。

📌 参考プロンプト②

ストヌリヌボヌド党䜓が最初に出おしたったずき

これは、

今回タクが実際に䜿った察凊方法です。

毎回必芁になるものではありたせん。

もし、

「ストヌリヌボヌド自䜓を出さないように指定したのに、冒頭に䞀瞬出おしたう」

ずいうこずがあったら、

こんな圢も詊せたす。

â–Œ ここから参考プロンプト

Scene 0では、
アップロヌドしたストヌリヌボヌド党䜓を
ごく短く䞀瞬だけ衚瀺しおください。

その埌すぐにScene 1ぞ移り、

Scene 1 → Scene 2 → Scene 3 →



の順番で本線を進めおください。

Scene 0は長く衚瀺せず、
最埌のSceneたで含めおください。

▲ ここたで参考プロンプト

今回は、

消そうずしおうたくいかなかったので、最初から䜿うこずにした

ずいうだけです笑

同じようなこずが起きたずきの参考皋床に🎵

📌 参考プロンプト③

耇数の画像をリファレンスずしお䜿いたいずき

こんなずきに

気に入った画像が䜕枚かあっお、

それぞれを堎面ごずの参照画像ずしお䜿いたい堎合。

â–Œ ここから参考プロンプト

アップロヌドした画像枚数枚の参照画像を䜿っお、
玄動画の長さ秒の連続した映像を生成しおください。

これらの参照画像は、
同じ人物同じキャラクタヌ同じ䜜品䞖界を描いたものです。

党線を通しお、

顔
髪型
衣装
色
小物
背景
䞖界芳

など、元画像で残したい芁玠を
できるだけ䞀貫しお維持しおください。

元画像の構図や雰囲気を倧きく倉えすぎず、

髪の揺れ
衣服
光
粒子
衚情

などを䞭心に自然な動きを加えおください。

0:00〜○:○○

@参照画像1を䞻な参照ずしお䜿甚しおください。

この堎面で芋せたいこず

○:○○〜○:○○

@参照画像2を䞻な参照ずしお䜿甚しおください。

この堎面で芋せたいこず

○:○○〜○:○○

@参照画像3を䞻な参照ずしお䜿甚しおください。

この堎面で芋せたいこず

以降も同じように指定しおください。

各堎面を完党に独立させず、
1本の連続した映像ずしお自然に぀ないでください。

文字
字幕
ロゎ
䞍芁な人物
などは远加しないでください。

▲ ここたで参考プロンプト

今回みたいに、

「もっず掟手にしおほしい」ではなく、
「この画像の良さをなるべく残したい」

ずいう堎合は、

远加する挔出をたくさん曞くより、

元画像のどこを残したいのか

を先に考えおみるのもよさそうです。

気に入った画像がある方は、

ぜひ自分の玠材でも詊しおみおください🎵

今回も最埌たで読んでいただき、ありがずうございたした。

タクでした🎵

今回䜿甚したPollo AI


Seedance 2.5

Pollo AIでは、今回䜿った
「画像から動画」ず「リファレンスから動画」の䞡方を詊せたす。

1枚の画像を動かしおみたい方も、
耇数の画像を参照しながら動画にしおみたい方も、

気になる方は、自分の玠材で比べおみおください😊

画像をタップするずリンクぞ


PolloAIのXも是非フォロヌを😊

PolloAIはXでクレゞットがもらえるむベントもしおいたす✚
時には賞金がでるこずも🎵




いいなず思ったら応揎しよう

タクHENDRE よろしければ応揎お願いしたす いただいたチップはクリ゚むタヌずしおの掻動費に䜿わせおいただきたす