
最新AI【SkyReels V2】登場💖Runway Gen4級の実力と無限生成ができるオープンソース動画生成AIがヤバいので動かす方法を解説します👍✨
どうも皆さん!「今日髪洗うか、明日でいいか」問題、人類永遠のテーマですよね、 葉加瀬あい(ハカセアイ) です!
今回の記事の内容を動画でみたい方は、こちらからどうぞ!
https://note.com/ai_hakase/n/n1bd825548f58

今回ご紹介する内容
今回は、テキストや画像から驚くほど高品質な動画を「 無限に 」作り出せる最新AIモデル「SkyReels V2」について、その魅力と使い方を徹底解説します!

みなさんは「動画生成AIって、設定が複雑そうで、使いこなせるか不安…」「長い動画を作ろうとすると、途中でキャラクターの顔や形が崩れたりしない?」――そんな風に感じていませんか?
でも、ご安心ください!今回ご紹介するSkyReels V2は、そんな悩みを解決してくれる可能性を秘めた、まさに"怪物級"のAIなんです。

さらに、今回は初心者の方でも簡単に扱えるように、ComfyUIを使った具体的な手順や、便利な自動化ツールについても詳しくご紹介します!

今回のポイント3つ
ということで、今回お話しする内容はこんな感じです!
① 理論上は"無限"の長さも可能!? SkyReels V2の革新的な技術「Diffusion Forcing」とは?その実力と可能性に迫ります!
② 高性能PCは不要!ComfyUIと便利な自動化ツールを使って、誰でも簡単に高品質な動画を生成する具体的な方法をステップバイステップで解説!
③ たった1枚の画像が動き出す!魅力的なI2V(Image to Video)機能の使い方から、生成した動画をどんどん長くしていく「無限動画生成AIメソッド」まで、応用テクニックもご紹介!

ちなみに、Youtube では、Note記事を動画にして公開しています!私のNoteメンバーシップ あいらぼ(Ai-Lab)だけで配信している 限定パートも、公開後、先着数名さまに限定公開しておりますので チャンネル登録 にしておくと見逃しませんよ!
https://www.youtube.com/@AI-Hakase

それと、X (旧Twitter) でも、 AI・トレンドの速報 を発信しておりますので、最新技術やお得情報を見逃したくない方は、こちらのフォローもお願いします!

それでは、本日もよろしくお願いします!
WAN 2.1の進化版? ゼロからの再学習モデル
このSkyReels V2は、 テキストや画像を入力するだけで、そこから動画を作り出してくれる AIモデルなんです!
でも、「あー、よくあるやつね!」片付けちゃうと本当にもったいないぐらい凄まじいんです!

実はこのSkyReels V2、既存の有力なモデルである「WAN 2.1」と同じアーキテクチャ、つまり基本的な設計構造を採用しているんですって。
でも、ただ同じだけじゃないんです! ゼロから新しく学習し直した 、いわば WAN 2.1の進化版 とも言えるモデルだと思ってください!
ちなみに、 WAN用のLoRA(追加学習データのようなもの)も使える みたいなんです!

それだけではありません!SkyReels V2が特にすごいのは、「 Diffusion Forcing 」という画期的な技術を使っている点なんです!
この技術のおかげで、理論上は 無限の長さの動画を生成できる可能性 があるんです!

もう少し詳しく! 高品質・高一貫性を実現する仕組み
「Diffusion Forcing」って、一体どんな技術なのでしょうか?
これは、動画を生成する際の 品質 や、 フレームとフレームの間の繋がり(一貫性) を高めるための、とっても重要な技術なんです。
より滑らかで、途中で映像が破綻しにくい、きれいな動画を作るための工夫⋯と言えるかもしれません!
この技術の核心は、「Diffusionモデル」とChatGPTの画像生成で有名な「自己回帰的手法」という、2つの異なる技術を 巧みに組み合わせている 点にあります。
具体的には、生成した動画の「続き」となるフレームを、AIがどんどん予測して繋げていく⋯というアプローチを取っています。
つまり、この技術のおかげで、 きれいで品質が高く、まるで映画のような長い動画 も、AIで作れるようになったんです!

SkyReels V2の実力:高品質な動画生成例をチェック!
実際にSkyReels V2で作られた動画を見てみましょう!
こんな感じで、 30秒くらいの長さの動画 も、かなり高いクオリティで作れているのが分かります!

こちらの動画も、その良い例だと思います!

品質もかなり高いです!AIが動画を作る時って、時間が経つにつれて、人物の顔や服装が微妙に変わってしまったり、手や足の形が不自然になったり⋯といった「 崩れ 」が起きやすいのが、これまでの課題でした⋯。
でも、このSkyReels V2は、その 課題をかなり克服している んです! 長い動画でも、安定した品質を保ちやすいんです!

キーフレーム指定で感情表現も自由自在?!
さらにすごいのが、長い動画の中で「 キーフレーム 」を指定できる点です!
例えば、「この部分では楽しんでいる表情」「ここでは悲しんでいる様子」「ここで花が咲く」といった 感情表現や特定のイベント を、プロンプト(指示テキスト)で指定できるみたいなんです!
ここは後で実際のやり方を説明します!

SkyReels V2の注意点と性能比較
もちろん、素晴らしいSkyReels V2にも、少し苦手な部分はあるようです。
どうやら、 動きの激しい「運動」 のようなシーンを描写するのは、まだ少し苦手みたいですね⋯。
ただ、これはSkyReels V2に限った話ではなく、他の多くの動画生成AIにも共通して言える課題点ではありますね!

ベンチマーク:なんとRunway Gen4レベルの高品質!
気になる性能ですが、ベンチマーク(性能評価)の結果を見ると⋯なんと!あの有名な「 Runway Gen4 」に匹敵するレベルの品質を持っていることが示されています! これは本当にすごいことです!

モーション性能:他のモデルと比較して
ただし、先ほどもお伝えした通り、 モーション(動き)の部分 、特に運動のような複雑な動きに関しては、まだ改善の余地がありそうです。
それでも、比較されている「WAN」や「HunyuanVideo」といった他のモデルよりは 高い数値を記録している んですけどね!

実装中!Element to Video機能とは?
ちなみに、これは現在実装中の機能になるんですけど⋯ Element to Video という、とっても興味深い機能もあるみたいなんです!
これは、動画にしたい 主題やモノ、背景などを指定 して、それら 全てを含んだ動画を生成 してくれる、というものなんです!
こちらの画像をご覧いただくと、イメージが湧きやすいかもしれません!

SkyReels V2のすごいところ まとめ
ここで、SkyReels V2の特にすごいところを、改めてまとめてみます!

プロンプトへの忠実度 : 入力したテキスト(プロンプト)の指示に、かなりしっかり従ってくれるそうです!✍️ これなら、イメージ通りの動画を作りやすいですよね!

画像のディテール保持 : 元にした画像の細かい部分、ディテールも、ちゃんと動画に反映してくれるみたいです!

🖼️➡️🎞️ 静止画の魅力が、そのまま動き出す感じでしょうか⋯!

フレームレートと必要なPCスペックについて
ちなみに、動画の滑らかさに関わる フレームレート についてですが⋯ SkyReels V2は、 秒間24フレーム(24fps) で動画を生成します。
これは、比較対象として挙げられていた「WAN」というモデルが16fpsなのに比べて、 かなり滑らかな映像 が期待できるということなんです! カクカクしない、自然な動きが表現できそうですよね!

ただし⋯!ここで少し注意点があります。
このSkyReels V2を動かすには、 VRAM(ビデオメモリ)が24GB以上搭載されたPCが必要 になるみたいなんです⋯。

このスペックのPCを用意しようとすると、だいたい50万円とか60万円とか、かなり高価になってしまうのが現実です⋯。 ちょっとハードルが高いな、と感じる方もいらっしゃるかもしれません。
でも、 この点については解決方法がある ので、心配しないでください! 後ほど、その方法について詳しく解説していきます!

1枚の画像から動画を生成!I2V機能を徹底解説
さて、ここからは、SkyReels V2の画期的なI2V機能について、もう少し掘り下げて、詳しく解説していきたいと思いますが、「とにかく早く試してみたい!」という、せっかちな皆さんへ!(笑)
こちらのSkyReels公式サイトから、 比較的気軽に試すことができる ようになっています!
https://www.skyreels.ai/home?utm_campaign=huggingface_skyreels_v2

ただし、こちらは クレジットを消費する方式 になっているため、動画を生成するには 費用がかかってしまう 点にご注意ください!
まずはどんな感じか体験してみたい、という方には良いかもしれません!

無料で試したいならComfyUI!
「やっぱり無料がいい!」「自分のPCやクラウド環境でじっくり試したい!」
そうお考えの方には、 ComfyUI を使うのが断然おすすめです!
ComfyUIを使えば、 無料で、しかもご自身のPC(ローカル環境)やクラウド環境でSkyReels V2の動画生成 を楽しむことができるんです!

ただ⋯ ComfyUIって、なんとなく設定とか操作が難しそう⋯、ちょっと取っつきにくいイメージもありますよね⋯?
でも、ご安心ください!
今回も、 初心者の方でもとっても簡単に使えるものを、いつものように特別に作っておきました ので、心配ご無用です!
今回ご紹介するツールを使えば、皆さんがすることは本当にシンプルなんです!

1. ちょっとした 設定の確認作業
2. 動画にしたい 元画像のアップロード
3. 「こんな感じで画像を動かした動画にしたいな⋯」という、 簡単なイメージ(プロンプト)の入力
これだけです! 本当に、ふわっとした感じで、難しく考えずに大丈夫です!

たったそれだけで、こんな風に AIが自動で、動画生成に適した詳細なプロンプトを作成 してくれるんです! すごいですよね!

そして、その生成されたプロンプトをもとに、先ほどアップロードした画像が、まるで魔法のように動き出して、 素敵な動画として生成される わけですね! 感動的です⋯!

「でも、動画生成って、画像のサイズ変更とか、他にも色々やることがあるんでしょ?」
そうなんです、本当は画像のリサイズとか、いくつか事前準備が必要で、ちょっと面倒だったりするんですけど⋯
なんと! そこら辺の面倒な作業も、全部まるっと自動化 しちゃいました!

さらに!動画生成に必要な モデルファイルのインストール も、心配いりません!
いつものように、 たったワンクリックで、必要なものが全部自動でダウンロードされるように してありますからね!

今回ご紹介する方法を使えば、 たったワンクリック操作だけで、とっても可愛いイラストが滑らかに動く、大体30秒くらいの素敵な動画 も簡単に作れちゃいます!

皆さんもぜひ、この便利な自動化ツールを活用して、面倒なことはAIにお任せして、楽々動画作成を楽しんでください!

セットアップも自動化でラクラク!
でも、「そもそも、ComfyUIを動かす環境を整えるのが大変そう⋯」ですよね。
こんな、まるで 呪文か暗号のように見えるノード(処理の流れを図示したもの) の画面を見るだけで、ちょっと抵抗を感じてしまう⋯っていう方も、きっと多いんじゃないでしょうか?

そこで!今回もまたまた、皆さんのために頑張っちゃいました!
なんと、 ComfyUIのセットアップ自体を自動化するツール も作成したんです!

この自動化ツール、具体的に何がすごいかというと、セットアップに必要な、ちょっと面倒に感じてしまう 依存関係やパッケージのインストール ⋯ これらが、なんと ボタンを1クリックするだけ で、全部完了しちゃうんです!

クラウド環境「Paperspace」で誰でも安心!
しかも!今回は クラウド環境「Paperspace」 を利用していくんです!
これなら、 初心者の方 や、お使いの パソコンのスペックにちょっと自信がないな⋯という方 でも、安心してチャレンジできちゃいます!
です!

もちろん、ご自身のPC、つまり ローカル環境 でComfyUIを使いたい!という方もご安心ください!
ワークフローをお配りするので、同じように進めることができます!

ComfyUIの学習もサポート!
初心者向けコンテンツもご用意!
ちなみに今回は、複雑なノード操作はほとんど必要ないのですが⋯ もし「 ComfyUIの使い方 、まだちょっと不安だな⋯」という方がいらっしゃいましたら、ぜひこちらのマガジンをチェックしてみてください!
https://note.com/ai_hakase/m/ma5812eb86d3b

こんな感じで、ComfyUIについて、記事とYouTube動画でサクッと学べるコンテンツもご用意しているんです!
https://note.com/ai_hakase/n/n5486e3a98997?magazine_key=ma5812eb86d3b&from=membership-magazine

ハンズオンで楽しく学ぼう!
ここからは、 ハンズオン形式 で、一緒に手を動かしながら解説を進めていきます!最新のAI動画生成技術の世界を、ぜひぜひ楽しんでいってください!

さらに詳しい解説は「あいらぼ(Ai-Lab)」で!
ということで、ここからは私のNoteメンバーシップ「あいらぼ(Ai-Lab)」にご参加の皆さん向けに、さらに詳しい解説をしていきたいと思います!
「あいらぼ(Ai-Lab)」には、現在なんと 400人を超えるAIクリエイターさん が参加されていて、最新のトレンドAI情報はもちろん、公式LINEとの連携でAIに関するお悩み解決なども行っている、とっても活気のあるコミュニティなんです!

ただし! 人数制限 を設けているので、ご興味のある方は、ぜひお早めにこちらのリンクから入門して、続きをご覧ください! お待ちしています!
はいっ!「あいらぼ(Ai-Lab)」にご参加の皆さん、お待たせいたしました! 早速、続きをやっていきましょう!
まずはPaperspaceのノートブックのご案内からです!
ローカル環境を使う方は、ここはスキップしていただいて大丈夫です!
- #副業
- #AI
- #生成AI
- #ChatGPT
- #AI活用
- #マーケティング
- #AIとやってみた
- #SNS
- #AIイラスト
- #画像生成AI
- #在宅
- #マネタイズ
- #プロンプトエンジニアリング
- #aiart
- #StableDiffusion
- #ai動画
- #ComfyUI
- #AI動画生成
- #動画生成
- #LoRa
- #動画作成
- #deeplearning
- #PromptEngineering
- #ArtificialIntelligence
- #AiTuber
- #colab
- #AIvideo
- #machinelearning
- #CreativeAI
- #葉加瀬あい
- #ハカセアイ
- #paperspace
- #ComfyUIワークフロー
- #クラウドAI
- #AI使い方
- #aitools
- #ImagetoVideo
- #AI実践
- #I2V
- #ComfyUI使い方
- #texttovideo
- #contentcreation
- #クラウドGPU
- #TechTrends
- #AIcommunity
- #VideoGeneration
- #コンフィUI
- #aiworkflow
- #t2v
- #VideoAI
- #Skyreels
- #ディフュージョン
- #ComfyUI入門
- #高品質動画
- #ComfyUI設定
- #LoRA使い方
- #ペーパースペース
- #テキスト動画生成
- #AIビデオ生成
- #コンフィーUI
- #InfiniteVideo
- #SkyReelsV2
- #ポーズ制御
- #LoRA活用
- #画像動画生成
- #こんふぃUI
- #FutureOfVideo
- #HighQualityVideo
- #WANLoRA
- #DiffusionForcing
- #フレーム一貫性
- #LoRAン
- #スカイリール
- #MotionTrace
- #動きトレース
- #PoseControl
- #VACEPoseControl
- #動画生成Tips
- #FrameConsistency
- #無限動画生成
- #ディフュージョンフォーシング
- #スカイリールズV2