メインコンテンツへスキップ
見出し画像

【Fluxの次世代となるか? 】Google提携で動画も画像もできるぞ、Lumina Image 2.0 & Video🔥! 生成AIにシステムプロンプト…?無料&商用可&高品質の三拍子!💖

    どうも皆さん!スマホの充電器を忘れて1日が終わる直前に充電残量2%を切る緊張感、 葉加瀬あい(ハカセアイ) です!

    今回は、画像生成AI「Lumina Image 2.0」と動画生成AI「Lumina-Video」について解説します!

    画像

    ちなみにこちらが実践編になります!

    「AIで画像生成って、なんだか難しそう…」「動画生成なんて、もっとハードルが高い!」って思っていませんか?高品質な画像や動画を作ろうとすると、専門的な知識が必要だったり、高性能なPCが必要だったり…。でも、「もっと気軽に、色々な画像や動画を作ってみたい!」というのが本音ですよね。

    実は、「Lumina」を使えば、そんな悩みも一気に解決!プロ顔負けのクオリティの画像や動画が、誰でも簡単に作れちゃうんです!しかも、嬉しいことに商用利用もOK!
    ▶

    画像

    ということで今回お話しする内容はこんな感じです!

    • ① まるでプロの作品!?Lumina Image 2.0で、3D、イラスト、アニメ、写真… あらゆるジャンルの高品質な画像を生成する方法とは?

    • ② 日本語プロンプトもOK!多言語対応&システムプロンプトで、思い通りの画像を自由自在に生み出す秘訣を大公開!

    • ③ テキストだけで滑らかな動画が作れる!?Lumina-Videoの驚きの性能と、ComfyUIでの使い方を徹底解説!

    画像

    それで、私の メンバーシップ に入門されている方は、いつものように記事内容を 『動画』 で見ることができます!

    https://tinyurl.com/28bukotz

    動画版は、こちらのURLからご覧ください!

    https://note.com/ai_hakase/n/ndaa2e323bcbf

    画像

    それから、Noteのメンバーシップ の入門者さんには 質問対応 なども行っていますので、感想や質問などありましたら、できれば Xのリプライ で教えてください!

    XのDM や Noteのコメント でも構いません🙆‍♀️

    画像

    ※ 質疑応答の際は 『NoteのID + 質問したいNote記事のURL』 を添えてください。

    https://x.com/ai_hakase_

    画像

    それでは、本日もよろしくお願いします!

    ✨🎥 すごい時代が来た!画像も動画も自由自在!「Lumina」って知ってる!?🎥✨

    Lumina Image 2.0⋯!すごいですよね!画像生成AIなんですけど、もう本当にクオリティが高くてびっくりしちゃいます!😳

    画像

    🖼️ プロ顔負けのクオリティ!Lumina Image 2.0のここがすごい!

    まずはこちらの公式動画をご覧ください!

    どうですか!?3D、手描き風イラスト、アニメ、リアルな写真⋯、もう何でもござれ!っていう感じですよね!✨ まるでプロのアーティストが作成したみたいです!
    ▶

    画像

    Alpha-VLLMによる「Lumina Image 2.0」は、 テキストプロンプトから信じられないほど高品質な画像を生成 できるんです!本当に、あっという間にできちゃうんです!

    画像

    🔍 Googleの最先端技術も活用!Gemma 2のテキストエンコーダー!

    さらに、Lumina Image 2.0は、GoogleのGemma 2のテキストエンコーダーも使用しているとのこと!最先端技術の融合⋯、なんだかワクワクしちゃいます!😊

    ソースURL

    画像

    🌍 日本語でもOK!多言語対応で可能性は無限大!🌏

    そしてそして!今まで英語のプロンプトしか対応していなかった画像生成AIも多かったのですが、Lumina Image 2.0はなんと! 多言語テキストエンコーダーをサポート しているんです!

    ソースURL

    画像

    つまり、日本語や中国語のプロンプトでも、様々な画像を生成できちゃうんです!これは嬉しいですね!🥰

    ソースURL

    画像

    ⚙️ 小さなモデルなのに高性能!2Bパラメータの秘密!😲

    さらに驚きなのが、Lumina Image 2.0は、 2Bパラメータという比較的小さなモデル でありながら、FLUX[dev] 8Bに匹敵する性能を発揮するということ!

    小さいのにパワフル!まるで小さな巨人ですね…!✨

    画像

    🎨 スタイルも自由自在!システムプロンプトで思い通りの表現を!🖼️

    Lumina Image 2.0は、 システムプロンプトをサポート している点も大きな特徴です!

    システムプロンプトって何?って思われる方もいらっしゃるかもしれません!簡単に言うと、「〇〇みたいな雰囲気で」という指示を最初に出すことなんです。

    例えば⋯

    • システムプロンプト:「プロの写真家」

    • 通常プロンプト:「タピオカミルクティーを飲む猫」

    → まるでプロが撮影したような、リアルな猫の写真が生成されます!📸

    • システムプロンプト:「印象派の画家」

    • 通常プロンプト:「タピオカミルクティーを飲む猫」

    画像

    → モネの絵画のような、アーティスティックな猫の絵が生成されます!🎨

    ね、すごいでしょ!?🥰 これを使えば、ユーザーの詳細な指示で、生成画像を細かく制御できるんです。「プロの写真家」風や「印象派の画家」風など、スタイルも自由自在に操れちゃいます!

    ソースURL

    画像

    🖼️✨ 画像を言葉で表現!詩的な説明文も自動生成!🌟

    そして、Lumina Image 2.0は、 画像説明モデル としても優れているんです!システムプロンプトなどをきちんと理解できる、高いプロンプト理解力のおかげですね!✨

    与えられたプロンプトを元に、説明文を美しく再現して生成してくれるんです!素敵ですよね…!😌

    画像

    例えば、Lumina Image 2.0は、まるで歌のように…!✨

    夕日がキラキラ 水面に反射
    美しい風景 Luminaが描く

    のような、まるで詩のような 説明文もこんなにきちんと生成してくれるんです! すごいよね!😌

    画像

    ただオブジェクトを認識するだけでなく、写真全体の 雰囲気 、 構図 、 光の加減 まで詳細に言葉で表現してくれるんです! まるで写真の中に物語があるかのようです…!

    画像

    🖼️🎨 Lumina Image 2.0の驚くべき生成能力!人物も風景も、思いのまま!🌟

    ここまでご説明したように、Lumina Image 2.0は、本当に 高品質な画像 を生成できるんです!人物、風景、さらには宇宙飛行士まで…!✨ あらゆるものを、驚くほど美しく描き出せるんです!

    画像

    こちらのベンチマークをご覧いただくと、その実力がよく分かります!👀

    画像

    実際に生成された画像を見ても、その品質の高さは明らかです!✨ 抽象的でアーティスティックな表現 も得意としているようですね…!これは、創作意欲を掻き立てられます!

    画像

    🆚🌟 他の画像生成モデルとの比較!Lumina Image 2.0の優位性は…!?👀

    他の画像生成モデルとの比較については、こちら(ソースURL)に詳しくまとめられていますので、ぜひご覧ください!

    https://is.gd/Fr3FP4

    Lumina Image 2.0と、他のモデル(SDXL, Flux dev, SD 3.5 large)の生成結果を比較した画像がこちらです!

    画像

    Lumina Image 2.0は、 細部まで詳細 で、本当に 高品質 なのが一目瞭然ですね!✨ まるでプロのアーティストが描いたかのようです…!

    画像

    📜🎉 商用利用もOK!Apache 2.0ライセンスの魅力!✨

    そして、なんと!Lumina Image 2.0は、 Apache 2.0ライセンス で公開されているんです!つまり、 商用利用もOK !これは嬉しいニュースですよね!😊

    こんなに素晴らしい機能を無料で使えるだけでなく、商用利用までできるなんて…!本当に驚きです!

    Lumina Image 2.0は、オープンソースのApache 2.0プロトコルを採用していますので、 誰でも自由に利用・改変 できます!重みとファインチューニングコードを含むワンタイムリリースとのことです!

    画像

    詳細については、こちらのモデルページをご覧ください!: 関連リンク

    https://tinyurl.com/2azmjps2

    画像

    ちなみに、GitHubページはこちらになります。詳細な情報や、モデルの使い方、ダウンロードリンクなどが掲載されています!

    https://is.gd/8htWDr

    画像

    ⚙️🤔 パラメータ調整で、さらにイメージ通りの画像へ!✨

    デモページはこちらになりますので、ぜひ、ご自身で試してみてください!

    https://tinyurl.com/24vu83d3

    画像

    Lumina Image 2.0のデモでは、 解像度 や サンプリングステップ など、様々なパラメータを細かく調整できます!✨ これによって、皆さんのイメージに、よりピッタリ合った画像を生成できるかもしれません…!これは試してみる価値があります!

    ソースURL

    画像

    Lumina-Video:テキストから動画を生成!😲

    さらに、驚くべきことに、Text-to-Videoモデル「Lumina-Video」も登場しました!🎉 高性能な画像だけでなく、動画まで生成できるなんて、本当にすごいですよね!
    ▶

    画像