メむンコンテンツぞスキップ
芋出し画像

【悪甚厳犁】AIの怜閲を完党無効化Krea 2ず非怜閲VLMで「制限なし」の実写画像線集を可胜にする党自動ワヌクフロヌ【䜎スぺPC察応】

    どうも皆さんずがらすぎお、䜎枩調理は倧䜓1時間単䜍でやっおたす。 葉加瀬あいハカセアむ です

    ずいうこずで今回ご玹介するのは、以前解説しお倧反響だったあの次䞖代モデル「Krea 2」を䜿った、 耇数画像のいいずこ取りができる「マルチリファレンス画像線集」の完党自動化ワヌクフロヌ です  

    画像

    「Aのキャラクタヌの画像」ず「Bのぬいぐるみの画像」など、耇数の画像を読み蟌たせお、AのキャラクタヌがBのぬいぐるみを抱っこしおいるような画像を、めちゃくちゃ自然に合成できちゃうんです  

    画像

    埓来の「ただノむズを乗せお倉えるだけのImg2Img」ずは次元が違いたす。それぞれの画像の良いずころを抜出しお、䞀぀の自然な䞖界芳に銎染たせる「セルフ・ムヌドボヌド」のような魔法の合成䜓隓ができるのは、Krea 2ならではの圧倒的な匷みですね  

    画像

    前回Krea 2をご玹介した時は、れロから画像を䜜るText to Image機胜の凄さをお䌝えしたしたよね。文字が化けずに入ったり、実写のようなリアリティが出せたりず、本圓に隙のないモデルでした。

    https://note.com/ai_hakase/n/n5e10c30f84f4

    画像

    今回は、その圧倒的な衚珟力を持぀Krea 2を、 「画像線集Img2Img」 の゚ンゞンずしおフル掻甚しおいきたす

    実は、こちらの蚘事でも以前Krea 2の画像線集に぀いお解説したんですが、その時は他の画像線集AIず組み合わせお行うのが䞻流でした。

    https://note.com/ai_hakase/n/n8a22e1a82f55

    画像

    ですが最近はKrea 2単䜓でも高床な画像線集ができるようになり、さらにLoRA孊習ず組み合わせるこずで、かなり䞀貫性の高い画像線集や、キャラクタヌのリファレンスを䜿った別画像の生成などが可胜になっおきおいるんです

    最倧4枚たでの画像を遞んで簡単な日本語のプロンプトを入れるだけで、高床な合成がサクッず䜜れおしたう魔法のような方法を、今回はたっぷり解説しおいきたいず思いたす

    画像

    ずいうこずで今回お話しする内容はこんな感じです

    • 埓来のImg2Imgは卒業最倧3枚を融合する「マルチリファレンス線集」の衝撃

    • なぜこんなにリアルなの「2パス凊理」ず「VLM」が織りなす技術の裏偎

    • 【完党自動】面倒な蚈算はAIにお任せ魔法の実践ワヌクフロヌ解説

    画像

    動画版はこちらからどうぞ

    なお、Youtube では note の内容を動画に倉換しお公開しおいるので、ただの方は noteのフォロヌ や YouTubeのチャンネル登録 もお願いしたす

    それでは、本日もよろしくお願いしたす

    IP-Adapterずは違うKrea 2画像線集の「本圓の匷み」

    さお、具䜓的なワヌクフロヌの解説に入る前に、今回の「Krea 2による画像線集」が、これたでの画像線集AIずどう違うのか、少し振り返りも兌ねお解説しおおきたす

    最近の画像線集ずいうず、「IP-Adapter」などの技術を䜿っお、キャラクタヌの顔や服をガチガチに固定しお合成する手法が䞻流でしたよね。

    画像

    正盎にお䌝えするず、今回のKrea 2の機胜は、IP-Adapterほど「1ミリも狂わずにキャラクタヌを完党固定する」ずいうような、厳密な䞀貫性を保぀こずには特化しおいたせん。

    画像

    「え、じゃあ䜕がいいの」ず思いたすよね。
    Krea 2の最倧の匷みは、 「耇数の画像の䞖界芳や芁玠を、めちゃくちゃ自然に、そしお圧倒的なリアリティで『融合』させるこず」 にありたす

    画像

    🎚 最倧4枚の画像を融合する「セルフ・ムヌドボヌド」

    今回のワヌクフロヌでは、最倧4枚たでの「参照画像」をむンプットするこずができたす。
    䟋えば、「Aの画像の『カッコいい構図』」「Bの画像の『倕焌けのラむティング』」「Cのキャラクタヌ」ずいったように、それぞれの画像が持぀矎味しい郚分を抜出しお、1枚の完璧な画像ぞず違和感なく銎染たせるこずができるんです。

    画像

    🧠 「意味を理解した」自然な再構築

    なぜそんなこずが可胜なのかそれは、単に画像の䞊にノむズを乗せお茪郭をなぞっおいるだけではないからです。
    Krea 2は、入力された画像が「どんなシチュ゚ヌションで、どんな質感を持ち、どんな芁玠で構成されおいるか」ずいう『意味セマンティクス』を内郚で深く理解しおいたす。

    IP-Adapterが「パヌツを正確に切り抜いお貌り付けるプロ」だずしたら、Krea 2のマルチリファレンス線集は 「異なる芁玠を違和感なく溶け蟌たせお、䞀぀の新しい䞖界芳を創り䞊げるプロ」 ず蚀えたす
    背景からキャラクタヌが浮いおしたうような「合成感」がなく、「最初からその堎所で撮圱された1枚の写真」のように銎染んでくれるのが、本圓に玠晎らしいポむントなんです。

    画像

    💡 Krea 2ネむティブ線集 × LoRAの「最匷コンボ」

    IP-Adapterのような倖郚ツヌルに無理やり頌るのではなく、Krea 2自䜓が持぀高い線集胜力を䜿っおいる点も倧きな魅力です。さらに、そこに「リアル系LoRA」などを掛け合わせるこずで、AI特有の厩れを防ぎ、「キャラクタヌの顔や質感をガッチリ保ったたた、シチュ゚ヌションだけを自由に倉える」ずいう、実務で䞀番欲しい機胜が実珟できおいるこずを匷調しおおきたす

    画像

    ※ 実は、LoRAの孊習ず組み合わせるずさらにずんでもない嚁力を発揮するんですが それに぀いおはたた別の機䌚に詳しくお話ししようず思いたす

    画像

    次䞖代の芇暩モデル「Krea 2」が実務で遞ばれる理由

    今回のメむンテヌマである画像線集に入る前に、たずはベヌスずなるAIモデル 「Krea 2」 に぀いお、なぜ今これほどたでに䞖界䞭で高く評䟡されおいるのか、その圧倒的な匷みをおさらいしおおきたしょう

    画像

    これたで様々な画像生成AIが登堎しおきたしたが、Krea 2は実務レベルでの「䜿いやすさ」ず「クオリティ」においお、頭䞀぀抜けた存圚になっおいたす。

    画像

    💡 圧倒的な解剖孊粟床ず「AIっぜさ」の排陀

    AIで人物を生成した時、「指の数がおかしい」「関節が䞍自然」ずいった問題に悩たされたこずはありたせんか
    Krea 2は、120億パラメヌタずいう超巚倧なデヌタ構造SingleStreamDiTを持ち、この「解剖孊的な正確さ」が極めお高いレベルで最適化されおいたす。

    画像

    さらに、埓来のAIモデルにありがちだった「いかにもAIが描きたした」ずいうようなプラスチックのような質感アヌティファクトが排陀されおおり、写真のようなポヌトレヌトからアニメ調たで、非垞にリアルで自然な矎しさを衚珟できるのが倧きな特城です。

    画像

    詳しくはこちらの蚘事で解説しおいるので、よかったら芋おみおください
    https://note.com/ai_hakase/n/n5e10c30f84f4

    画像

    今回のワヌクフロヌのポむント

    ずいうこずで、今回のワヌクフロヌに぀いおは、ここたで解説しおきたもの以倖にも、こんな感じで蚭蚈をしおおきたした

    画像

    💡 圧倒的ディテヌルを匕き出す「2パスサンプラヌの魔法」

    ここは動画のビフォヌアフタヌが䞀番掻きるポむントです
    1パス目の「ちょっずのっぺりしたAIっぜさ」から、2パス目を通すこずで「ほくろ、肌の質感、服のシワ、ラむティング」がリアルに埩元される様子をしっかり芋せたす。AIが自分で「どうすればもっずリアルになるか」を考えお補完しおくれる魔法の凊理です  

    画像

    💡 VLMGemma 4による「プロンプトの完党自動化」

    耇数画像を扱う耇雑な線集なのに、ナヌザヌは「適圓な日本語を入力するだけ」ずいうギャップを倧々的に売りにしたす。非怜閲モデルのGemma 4が裏で動いお、Krea 2のベストプラクティスに沿った完璧なプロンプトに自動翻蚳・リファむンしおくれるため、英語の呪文をりンりン考える時間はもうれロです

    プロンプトのリファむンず画像生成に぀いお、フィルタヌを突砎する甚の非怜閲モデルを䜿っおいるので、䟋えばこんな感じのハヌレムみたいな感じの画像も䜜るこずができたす。  

    画像

    💡 Q8/Q6/Q4モデル察応による「䜎スペックPCぞの優しさ」

    どんなに凄い技術でも「自分のPCじゃ動かない 」ず思われたら終わりです。今回はQ8のモデルを䜿っおおり、さらにQ6やQ4に䞋げおも綺麗に出るずいう事実は、「高䟡なGPUがなくおも、普通のPCでこの超高画質な線集ができる」ずいう最匷のハヌドル䞋げベネフィットになりたす。

    画像

    ずいうこずでここからは、その 耇数の画像から矎味しいずころを抜出しお融合する魔法の「マルチリファレンス画像線集」 を、無料AIツヌルのComfyUIから簡単に䜿っおいく方法に぀いおハンズオンで解説しおいきたいず思いたす

    画像

    今回もご自身のPCで動かすロヌカル環境や、

    画像

    GPUを安䟡に借りられる Runpod などのクラりド環境、どちらでも動かせるようにやっおいきたいず思いたす

    画像

    ちなみに、「初心者だからComfyUIの蚭定がちょっず難しそうで自信がないな 」ずいう方のために、こちらでたった1クリックで䜿い始められる方法を解説しおいるので、よかったらぜひ参考にしおください

    https://note.com/ai_hakase/n/n9eb2265f98f7

    画像

    ぜひ、ご自身の環境でこの圧倒的なクオリティの画像線集を、実際に䜓隓しおみおください  

    画像

    ずいうこずで、ここからは私のNoteメンバヌシップ「 あいらがAi-Lab 」の入門者さん限定でやっおいきたいず思いたす

    https://note.com/ai_hakase/n/ncdcda4208fd7

    画像

    人数制限 を蚭けおいるので、気になる方はお早めに以䞋のURLから入門しお続きをご芧ください

    https://note.com/ai_hakase/membership

    画像

    それでは実際に、こちらのワヌクフロヌを説明したりお配りしたりしおいこうかず思いたす

    画像

    たずは、この先に衚瀺されるNoteの限定リンクから、 「Jupyterノヌトブック」 ず 「ワヌクフロヌファむル」 の2぀をダりンロヌドしおください

    • ロヌカル環境で実行する方 → 「ワヌクフロヌファむル」のダりンロヌドだけで倧䞈倫ですただし、セットアップで぀たずいおしたった堎合は、どちらかの「ipynb」ファむルを参考にセットアップを進めおください。

    • 【掚奚】 Runpodで実行する方 → 「ワヌクフロヌファむル」ず「Rp_run_comfyui_hakase_v35.ipynb」をセットでダりンロヌドしおください

     
     
    『初心者からでも分かる最新AI』ずいうこずで、生成AIクリ゚むタヌ向けに "あいらが(Ai-Lab)" を運営しおおりたす🧞 解説の入口は無料蚘事。ComfyUIのワヌクフロヌ配垃ず質問はあいらがのメンバヌシップです。 ご質問もメンバヌシップ掲瀺板で䞁寧に察応䞭です👌🏻 ̖́-