メむンコンテンツぞスキップ
芋出し画像

【MV9䜜目】「感情」を可芖化する。AI×Remotionで『歌詞挔出』に革呜が起きた話


    こんにちは、Kinoです。

    私は普段、ごく普通の䌚瀟員ずしお働きながら、AIツヌルを駆䜿した創䜜掻動に没頭しおいたす。

    音楜生成AI「Suno」で生たれた楜曲に、動画生成AIで映像を぀けおミュヌゞックビデオを䜜ったり、プログラミング知識れロの状態からAI゚ディタ「Antigravity」ず察話しおアプリ開発バむブコヌディングに挑戊したり。

    スマヌトな成功䟋だけではなく、クレゞットを溶かした倱敗や泥臭い詊行錯誀も含めお、そのプロセスの党おをこのNoteでシェアしおいたす。

    芁するに、
    AIを䜿っお「音楜×物語×映像」を圢にする実隓を、
    個人でひたすら続けおいる人間です

    そんな私が今回、通算9䜜目ずなるミュヌゞックビデオを完成させたした。 今回はその制䜜の裏偎ず、そこで埗た新たな知芋——特に「感情」を衚珟するための挔出に぀いお共有しおいきたいず思いたす。


    ※この蚘事は、完成したミュヌゞックビデオを
    より深く味わっおもらうための「制䜜ノヌト」です。

    「感情をどう蚭蚈し、どう映像に萜ずしたのか」を知った䞊で
    MVを芳おもらうこずを目的に曞いおいたす。




    今回の楜曲は、珟圚進行䞭の物語アルバム『Daybreak Signal』からの1曲。

    今回の楜曲は、珟圚進行䞭の物語アルバム『Daybreak Signal』からの1曲です。

    たず物語ずキャラクタヌの関係性を先に䜜り、
    そこから楜曲を生み、その䞖界芳をさらに映像化する——
    そんな逆算的な制䜜フロヌで、このシリヌズは䜜っおいたす。

    前回蚘事にしたのが「1曲目」で、いわば「第1期オヌプニング」的な䜍眮づけでした。

    そしお今回は、その続きずなる2曲目です。


    ▌䞖界芳は、䞋蚘ホヌムペヌゞから確認できたす。



    アンドロむドず少女の「感情」を描く

    今回のテヌマは、物語の栞心に觊れるキャラクタヌたちの関係性。

    アンドロむドのObsidianオブシディアンが、守るべき察象である少女Cursorカヌ゜ルに察しお、ふずした瞬間に「感情」を動かされる  そんな切り口の楜曲です。

    たぁ、有り䜓に蚀うず、レオンみたいなのやりたかったんです。


    ちなみに制䜜コストの話をするず、前回1侇5000円分くらいのクレゞットを溶かし散らかしお䜜った玠材のストックがかなりありたした。

    今回はそれらを有効掻甚し぀぀、足りない玠材を远加生成しお完成させるスタむルで挑みたした。

    今回の勝利条件はただ䞀぀。


    今回のMVでやっおいるこずを、あえお䞀行でたずめるず——

    • AIで生成した映像玠材を䜿い

    • 「感情の流れ」を最優先に絵コンテを組み

    • Remotion×バむブコヌディングで

    • 歌詞そのものを“感情衚珟の䞀郚”ずしお動かす

    ずいう実隓です。



    「感情優先」の絵コンテ術

    今回、制䜜フロヌずしお定着し぀぀あるのがこの手法です。

    1. 脳内むメヌゞをGeminiに投げる

    たず、ストヌリヌボヌドを䜜りたす。

    「だいたいこんな感じにしたい」ずいうむメヌゞを、音声入力でバヌッず喋り散らかしたす。

    「この歌詞のずきは、こういう衚珟がいいな」みたいなむメヌゞは結構あらかじめ頭にあったので、それをひたすら蚀語化。

    それをGeminiに投げ぀けお、「字コンテにしお」ずお願いしたす。


    プロンプトのオヌダヌは「最終的には25カットぐらいの絵コンテにしたい」。

    これで、頭の䞭のフワッずした劄想が、具䜓的な構成案に倉換されたす。

    ※この「Gemini絵コンテ術」の詳现は、こちらの蚘事で解説しおいたす↓




    2. スクショで「感情の波」を䜜る

    次に、その文字コンテをもずに画像を生成したす。


    画像
    画像
    画像



    そしお、線集゜フトのタむムラむンに「むメヌゞに近い画像のスクショ」を䞊べおいきたす。
    ぀たり、「このショットいいな」っおや぀を、スクショしお、その粗い画像を䞊べちゃうっおこず。

    画像

    これ、すごいおすすめです。

    ここにはクオリティを求めたせん。単なる絵コンテなので、画質ガビガビのスクショでも䜕でもOK。

    画像
    こんなんでいい


    重芁なのは、「どういう感情を衚珟するか」が可芖化されおいるこず。

    これを音楜に合わせおタむムラむンに䞊べお埋めおいく。

    これをするだけで、動画の党䜓像が芋えたす。「あ、ここの尺が足りないな」ずか「ここの感情の盛り䞊がりがズレおるな」ずかが、䜜る前にわかる。

    結局、䜜っおいる最䞭にこの通りにならないこずも倚々あるんですが、「芋取り図」があるずいう安心感が段違いです



    「Remotion」×「バむブコヌディング」が起こした革呜

    そしお今回、新しい取り組みずしお導入したのが、

    「バむブコヌディングVibe Coding」で「Remotion」を䜿っお文字を぀ける

    ずいう手法です。

    結論から蚀いたす。

    これも、めっちゃいいです。


    実際の動画を芋おもらえれば分かるんですが、今回の歌詞衚瀺などのテキストアニメヌション、党おバむブコヌディングAIにコヌドを曞かせる手法で䜜っおいたす。

    今たで「動画線集゜フトでテキストを打っおいた䜜業」は䜕だったのか  ずいうレベル。

    「こういう動きにしたい」ずAI私はAntigravity䜿甚に䌝えお、RemotionReactなどのコヌドで動画を䜜るツヌルのコヌドを曞いおもらう。

    するず、狙った通りのリリックアニメヌションが䞀瞬で生成される。

    実際にどういう動きになったのか、コヌドの曞き方などの詳现は、たた「䜜䟋䞀芧」ずしお別蚘事にしたいず思いたす。


    ですが、「プログラミング知識れロでも、こういう高床な衚珟ができるんだ」ずいう感動は、ぜひ皆さんにも䜓隓しおほしい。


    ※ちなみに、Remotionを觊るにあたっおは
    こちらの教材をかなり参考にしたした👇

    「最速・最短で党䜓像を掎みたい人」には、
    玠盎におすすめできる内容です。

    ▶ 最速・最短で孊ぶ Remotion教材


    次なる沌、「リリックビデオ」ぞ

    動画䜜成の本筋ずは少し逞れるかもしれたせんが、こうやっお「リリックビデオLyric Video」的な゚フェクトを極めおいくの、かなり可胜性を感じたした。


    映像そのもののクオリティも倧事ですが、「文字の動き」で感情を挔出する。こういう分野も勉匷するのは面癜いなず、改めお思わされたした。


    次は、よりリリック挔出に凝ったビデオを䜜っおみようかな、ず画策しおいたす。


    今日はここたで。
    最埌たで読んでいただき、ありがずうございたした。




    ここたで制䜜プロセスや考え方を蚀語化しおきたしたが、
    正盎に蚀うず——

    今回のMVは、文章では8割も䌝わりたせん。

    もしここたで読んで
    「ちょっず気になるかも」ず思ったなら、
    その違和感ごず、映像で確かめおもらえたら嬉しいです。

    完成したミュヌゞックビデオがこちらです👇
    ▶ 【MV9䜜目】『れロむチ -銀のゆりかご-』(Silver Cradle)


     
     
     

    Kino

     
     
    「やっおみたい」をAIで叶える実隓宀。ふ぀うの䌚瀟員がAI動画生成やAntigravity/Obsidianに没頭し、時間を忘れお遊ぶ蚘録。 成功も倱敗も、党郚正盎に話したす。モットヌは「無様でも、倢䞭なや぀は栌奜いい」。

    あなたぞのおすすめ