メインコンテンツへスキップ
見出し画像

Skyreelsのimg2video:Loraをつけるといい感じになった話@ComfyUI

    前回記事で作成したSkyreelsのimg2videoフローを若干修正してみました。
    Skyreelsのimg2vidフローでポジティブプロンプトだけにする試み@ComfyUI|shiba*2
    この記事にある動画を比べてもらえれば分かりますが、Loraを加えて、SD3サンプリングシフトを7にすることで安定するようになりました。
    この効果はLoraのmove enhancerの影響があるのかなという感想です。
    PaperspaceのFree A4000で101フレームまでは生成出来ることが分かりました。
    以下が今回使用したフローです。

    ※以下のは前回記事に紹介した修正したカスタムノードになります。
    ウェイトを1.1にしているのも安定感が出ている一因かも。

    画像

    以下の画像を元にしました。シード値によってかなり結果が変わります。
    前回と比較して、感情表現的なプロンプトを追記しています。

    画像
    画像
    画像
    画像
    画像
    画像
    画像

    ということで、設定次第でかなりimg2vidの表現力が変わることがわかりました。
    まだ、img2vid用のプロンプトについて調整していませんので、そのあたりでもさらに質の高いものが生成出来る可能性があります。

    取り合えず、オープンソースモデルでここまで出来れば上出来のような気がします。他のを試していませんが・・・・・

    この記事と並行してSkyreelsのGGUF化について検討していますが、結構難航しています。
    エラーなくフローを完走したかと思えば生成画像が全然ダメだったり・・・・。





     
     
    Stablediffusionで、Ai画像を作成するのを趣味にしています。ComfyUI、paperspace絡みの記事などを興味のある範囲で作成しています。

    あなたへのおすすめ