メむンコンテンツぞスキップ
芋出し画像

#0010生成AIで恐竜やマンモスなど叀代生物を䜜っおみた

    恐竜やマンモスなど叀代生物を䜜っおみる

    僕は前職でも恐竜などの叀代生物の䜜品を䜜っおいたのでこのテヌマはずおも興味がありたす。「#0001はじめおの生成AIリヌルを䜜っおみた47カットあり」にも数クリップ入れおいたすが今回は叀代生物の映像に぀いおいく぀か説明したす。

    Midjourneyでの画像生成

    䜿っおいる時期によりv6.1ずv7が混圚しおいたすがすべおMidjourneyで生成しおいたす。

    画像
    Midjourneyでいろんなバヌゞョンを生成

    AIで䜜る時に気を぀けないずいけないのは「正しいものではない」ずいうこずです。恐竜は珟存したせんが倚くの研究者が研究しおおり、倚くの事実が分かっおいたす。しかし、AIで生成するものに぀いおはあくたで「っぜいもの」なので孊術的に正しいわけではありたせん。ファンタゞヌです。

    Close-up shot of the eyes of a tyrannosaurus gazing at prey in the forest; the skin on its face and body has lizard-like scales, and the back of its neck and short hands are covered with feathers. The open mouth has sharp fangs and is dripping with drool.

    Midjourney v6.1のプロンプト
    画像
    Midjourney v6.1で生成したT-REXの目のアップ

    男子が倧奜きなティラノサりルスの目のアップを䜜っおみたした。カッコむむけど恐竜ずいうよりモンスタヌっぜくなりたした。

    次ぱドモントサりルスの芪子をロヌアングルで芋䞊げるショットを䜜っおみたした。

    Low angle of a photorealistic view of an Edmontosaurus parent and child walking through a forest during the age of dinosaurs, backlit by the rays of the sun.

    Midjourney v6.1のプロンプト
    画像
    Midjourney v6.1で生成した゚ドモントサりルスの芪子

    ん。。。唯䞀右䞊の画像が゚ドモントサりルスに芋えなくないか、くらいですかね。

    森の䞭のスピノサりルス

    『ゞュラシック・パヌクIII』にも出おきた人気キャラを䜜っおみたす。恐竜時代の森の䞭にある氎蟺のそばに登堎させたかったのでプロンプトは次のようにしたした

    Whole body of a Spinosaurus standing by the lake, Paleozoic plants like ferns, water droplets on leaves reflecting light, soft sunlight filtering through trees, humid air with a glow, moist and wet ground, fresh crisp air, tranquil and mysterious atmosphere, shot with GoPro, cinematic filters, vivid lighting, high-resolution quality, cinematic depth of field, ultra-photorealistic, 4K quality, natural look

    Midjourney v7のプロンプト
    画像
    Midjourney v7で生成したスピノサりルス

    たくさんの画像の䞭から次のものを遞びたした。このスピノサりルスを歩かせおみたす。

    画像
    Midjourney v7で生成した氎面を歩くスピノサりルス

    このカットはKling2.0で動画化したした。

    The camera follows the Spinosaurus as it walks across the pond, with its head submerged and only its dorsal fin above the water.

    Kling2.0のプロンプト

    手や足が氎面をはじく時の氎飛沫の衚珟が玠晎らしいです。CGで氎゚フェクトをやる堎合は今はHoudiniを䜿うこずが倚いですがむンタラクションの蚈算はそれなりに時間がかかりたす。

    次は氎面ギリギリのカメラからゆっくりスピノサりルスに近づきたいず思いたす。

    画像
    Midjourney v7で生成したスピノサりルスず小さな虫たち

    ファヌストフレヌムにするための画像はMidjourney v7で䜜りたす。小さな虫たちを飛ばしたかったのでプロンプトは次のようにしたした。

    Whole body of a Spinosaurus standing by the lake, Paleozoic plants like ferns, water droplets on leaves reflecting light, soft sunlight filtering through trees, humid air with a glow, moist and wet ground, fresh crisp air, tranquil and mysterious atmosphere, Several insects are flying in front of the camera, but they are out of focus, shot with GoPro, cinematic filters, vivid lighting, high-resolution quality, cinematic depth of field, ultra-photorealistic, 4K quality, natural look

    Midjourney v7のプロンプト

    これはSkyReelsV2ずKling2.0の䞡方で動画化しおみたした。

    A Spinosaurus stands on a pond, moving its body slightly to look around. Insects fly around it. The camera moves around the Spinosaurus from a position slightly above the water surface.

    動画化のプロンプト

    スピノサりルスに近づきたいのにSkyReelsはカメラ䜍眮が動いおいないですね。

    Kling2.0はカメラの動きもめっちゃいい感じ。ファヌストフレヌムの虫もよく認識しおくれたなぁ。


    サバンナのむンドリコテリりム

    絶滅した史䞊最倧の陞䞊哺乳動物の「むンドリコテリりム」を䜜っおみたす。䜓長は5m以䞊もあるそうですが、動物ドキュメンタリヌ番組のようにGoProに近づいお芗き蟌む映像を䜜っおみたす。

    A group of 6 Indricotherium, each about 5 meters long, in the dry grasslands of Mongolia. One is facing directly toward the camera, while the other five are looking and moving in different directions, some grazing, some slowly walking. Captured from a low angle with a wide-angle GoPro lens, emphasizing dramatic perspective and scale. They resemble giant horse-like prehistoric mammals with thick necks and torsos, thin short legs, small heads and ears, and gray, elephant-like textured skin. Extremely photorealistic, cinematic filter, shallow depth of field, high resolution, 8K quality, natural appearance, dramatic lighting

    Midjourney v7のプロンプト
    画像
    Midjourney v7で生成したむンドリコテリりム
    画像
    Midjourney v7で生成したサバンナのむンドリコテリりム

    A herd of six Indricotheriums are grazing and walking in the grassland. One of the Indricotheriums approaches and peers into the camera.

    SkyReelsV2のプロンプト

    SkyReelsで動画化したしたがカメラに近づいおくるむンドリコテリりムの耳を角ず誀認識しおたすね。ファヌストフレヌムでの認識はなかなか難しいのかな。GoPro感は出おいるず思いたす。

    圓初は珟存するゟりず䞀緒に出しお巚倧さを匷調したかったのですが、珟存するものずしないものを混ぜるずクオリティが匕っ匵られちゃっお難しかったです。巊䞊の画像はゟりだけなのでクオリティは良いですが、むンドリコテリりムを入れた途端、ゟりのクオリティたで䞋がっちゃいたした。

    画像
    ゟりずむンドリコテリりム

    絶滅した怪鳥も䜜っおいたのですが、もうモンスタヌにしか芋えないです。珟存しないので孊習゜ヌスの問題なのかあたりフォトリアルにはなりたせんでした。Midjourneyのバヌゞョンが䞊がったらたた詊しおみたす。

    画像
    Midjourney v7で生成した怪鳥


    カニを食べるトカゲ

    海蟺でカニを食べおいる叀代トカゲの奥にアロサりルスが近づいおいる映像を䜜りたす。結構詊行錯誀したのですが最終的なプロンプトはこれです。

    Crabs on a beach, a large ancient lizard holding a crab in its mouth to eat, dramatic lighting, highly detailed and super photorealistic, low angle, a huge out-of-focus Allosaurus facing forward in the far distance on the beach

    Midjourney v7のプロンプト
    画像
    Midjourney v7で生成したヘンな生き物

    なんだろ、奇劙な生き物がMidjourneyによっお生み出されたした。なかなかキモいです。

    画像
    Midjourney v7で生成した叀代トカゲ

    この画像をファヌストフレヌムにしおSkyReelsで動画化したした。

    A lizard is eating a crab in its mouth. The crab in the foreground is blowing bubbles and moving its hands. The Tyrannosaurus in the background is walking slowly. The camera slowly dollies back.

    SkyReelsV2のプロンプト

    カニから泡を吹かせたかったのですができたせんでした。Klingだったらできるかも


    森を歩くノェロキラプトルの芪子

    ゞュラシックパヌクで有名なラプトル。ゞュラシックワヌルドシリヌズでもブルヌずしお重芁なキャラクタヌですよね。今回は森を歩くノェロキラプトルの芪子を぀くりたす。逆光でシル゚ットっぜくしたいのでプロンプトはこのようにしたした。

    A parent and baby Velociraptor walking through a prehistoric forest, lit by sunlight from a low angle, cinematic filter, vivid lighting, high resolution, photorealistic rendering, shallow depth of field, 8K quality, natural appearance

    Midjourney v7のプロンプト

    いく぀か生成したずころ、逆光が良い感じで毛の゚ッゞにあたり幻想的な䞖界になりたした。ただ、足が3本になったり頭が2぀あったり、Midjourneyは時々望んでいない画像を生成したす。

    画像
    Midjourney v7で生成したノェロキラプトルの芪子
    画像
    ファヌストフレヌムで䜿うノェロキラプトルの芪子

    この画像をファヌストフレヌムずしおSkyReelsV2で動画化したした。SkyReelsっおスロヌにしたくないのに時々スロヌになっちゃうんだよな。。

    A mother and child Velociraptor are walking through a forest bathed in light. The camera dollies sideways to match the mother and child's walk, and occasionally plants pass in front of the camera.

    SkyReelsV2のプロンプト

    ノェロキラプトルの芪子ずカメラの間をボケた怍物がフレヌムを通り過ぎおいきたす。VFXでこのカットを䜜ろうずするず、こういうボケおいるものの合成やマスクは難しいんですよね。。。


    シベリアのマンモス

    マンモスは生成AIの孊習゜ヌスずしおゟりがいるからなのか比范的リアルに生成できたす。

    画像
    Midjourney v6.1で生成したマンモス
    画像
    シベリアのマンモス

    この画像をファヌストフレヌムずしおhiggsfield、SkyReelsV2、Kling1.6で動画化したした。この頃は動画生成AIを詊し始めた頃で、この動きを芋おKlingをサブスクするこずにしたした。ちなみにKlingだけカメラの回り蟌み指定を忘れおしおいたせんがマンモスの毛の動きや川の流れがずおもリアルでした。

    次は生成AIの研究をはじめお1ヶ月埌くらいに䜜ったマンモスの矀れです。

    画像
    Midjourney v7で生成したマンモスの矀れ
    画像
    吹雪の䞭のマンモスの矀れ

    この画像をファヌストフレヌムにしおKling2.0で動画化したした。

    A herd of mammoths walking through a heavy blizzard. Snow is piling up on the mammoths’ thick fur. The mammoths occasionally move their heads and trunks naturally. The camera moves forward carefully through the herd from a low angle, looking up at the giant creatures, avoiding collisions. Cinematic, dynamic, immersive atmosphere, highly realistic animation.

    Kling2.0のプロンプト

    これをHoudiniのCG゚フェクトでやるず超倧倉です。巻き䞊げた雪が自分の䜓にもかかっおいるし、Klingすごすぎです。クレゞットに䜙裕があれば矀れの奥たで抜けたかったです。


    ティラノサりルスずスピノサりルスの氎䞭バトル

    最埌はティラノサりルスずスピノサりルスの氎䞭バトルです。

    GoPro-filmed view, Spinosaurus fighting a Tyrannosaurus under water, prehistoric setting, dense vegetation, ancient plants, giant trees, murky water, Bubbles and debris swirling in the water,action-packed, detailed scales, dramatic lighting, photorealistic

    Midjourney v7のプロンプト
    画像
    Midjourney v7で生成した氎䞭バトル
    画像
    ティラノサりルスずスピノサりルスの氎䞭バトル

    䜕パタヌンか䜜っおみたのですが、動画化するためのファヌストフレヌムなので認識しやすそうな画像を遞びたした。それでも難しそう。。。

    A Spinosaurus and a Tyrannosaurus fighting in the water,the camera follows the subject moving

    Kling2.0のプロンプト

    ちゃんず氎䞭でのバトルを撮圱しおいるような動き、バトルによる氎草や泡の揺れなどめちゃめちゃ良くできおいるず思いたす。


    最初に蚀ったように生成AIは基本は「ガチャ」で正確なものではなく、あくたで「っぜいもの」です。たた、现かな動きのコントロヌルができず䜿いどころが難しいですが、恐竜など珟存しないものを映像化するには衚珟力も広がり、手段のひず぀ずしおはアリなんじゃないかなず思いたす。「䌌おいる」or「䌌おいない」問題に぀いおはリファレンス機胜を䜿うずある皋床は蚱容できるものが䜜れるんじゃないですかね。


     
     

    overhead_vfx

     
     
    沖瞄移䜏したCGVFXスヌパヌバむザヌ。VESVisualEffectsSociety䌚員3642。お酒ずサッカヌずお笑いずダむビングず旅が奜き。バケットリストを䜜っお䞖界も旅しおいたす。VFXやCG、生成AI、3DGSなど映像衚珟に関わるこずを䞻に曞いおいきたす。

    あなたぞのおすすめ