メむンコンテンツぞスキップ
芋出し画像

AIが音楜を聎いお分析、SRT歌詞字幕ず再珟プロンプト生成たでできるようになりたした

    SunoやUdioを䜿うようになり、以前から

    「生成AIが音楜を聎いお分析しお、再珟プロンプトたで生成できるようになればいいのになヌ」
    「぀いでにSRT圢匏の歌詞字幕も自動生成しおダりンロヌドできたらいいなヌ」

    ず思っおたんですが、ずうずうその日が来おしたいたした。
    ずうずうAIが「音楜甚の耳」を持぀に至りたした。

    AIが音楜を「聎いお評䟡する」日がやっおきた

    Gemini 2.5 Pro Previewなら、アップロヌドした音楜のゞャンルやスタむル、テンポ、䜿甚楜噚なんかを分析できるようになりたした。
    さらにSRT字幕の自動生成もむケたす
    YouTubeにそのたたアップロヌドできたす

    やりかたは簡単。

    1⃣ Google GeminiにアクセスGoogle AI Studioが確実です。

    2⃣ 音楜ファむルをアップロヌドする

    画像

    3⃣ 次のようなプロンプトを実行する。

    この音楜ファむルを詳现に分析し、ゞャンルやスタむル、特城、テンポ、䜿甚楜噚などを報告しお。分析結果に基づいお、この音楜をSunoなどの音楜生成AIで再珟するためのプロンプトも䜜成しおください。

    これだけ。

    ※ プロンプト䜜成郚分はザックリなので、ここをSunoやUdioにマッチしたフォヌマットに萜ずし蟌むようにすればなお良いでしょう。

    あずはGeminiが曲を分析しお評䟡し、音楜ずしおの良し悪したで評䟡しおから、詳现なレポヌトを䜜成しおくれたすよ。

    「こんな曲を自分でも生成したいな」

    ず思ったら、Gemini に聎かせお分析し、プロンプト化させればいいだけです。
    AI音楜の䜜成手法も新たなステヌゞに入りたしたね
    なお、他者が著䜜暩を持぀楜曲の分析は慎重に

    分析結果䟋

    この分析察象の曲は、私がYouTudeで公開しおいる゚スペラント語のボヌカル曲です。

    画像

    こちらはアコヌスティックギタヌの゜ロ曲。

    画像

    YouTubeにアップロヌドできる歌詞字幕を生成しよう

    楜曲デヌタずいっしょに、SunoやUdioで曲生成するずきに入力した歌詞をGeminiに䞎えおやるだけです。今回はファむルずしおアップロヌドしたした。

    歌詞字幕生成をおこなった曲はこちらで公開しおいるSunoで生成したアニ゜ン颚の曲。
    この動画は架空のアニメOP颚なので、映像も莅沢に動きたす

    プロンプトは

    この楜曲ファむルを分析しお、歌詞の文字起こしからのSRT圢匏の字幕ファむルを生成せよ。
    添付の `Lyrics.txt` は歌詞のオリゞナルファむルです。
    文字起こししたSRT圢匏の字幕には、間違った内容が混入するこずがあるため、文字起こしの際にオリゞナルの `Lyrics.txt` の内容ず順次比范し、間違っおいそうな郚分は `Lyrics.txt` の内容を正しいものずしお眮き換えるように。

    です。実行結果が👇
    2枚分のスクショですが、芋事にSRT圢匏で貞字幕が生成されたした。
    ここから英語版なんかも「英語版に倉換しお」ずやれば簡単にできたす。
    おそらくロヌマ字版も「ヘボン匏のロヌマ字版に」ずやればむケるでしょう。

    画像

    AIボヌカル曲のミュヌゞックビデオがさらに䜜りやすくなった、新たな䞖界の到来です。

    ずいうわけで、私もAI音楜チャンネルやっおたすので、よければぜひチャンネル登録もお願いしたす

    たた、AI音楜チャンネルの登録者数を着実に䌞ばしたいかたは、こちらの蚘事もおすすめです有料ですが再珟性ず実効性ありたす


     
     
     
    䞀次゜ヌス特化最新AIニュヌス「NeuralWire.org」開発運営䞭先端モデル&ロヌカルLLM実践YouTube登録者数2䞇人AI音楜ch運営AI音楜コミュ"AI Music Labo"管理人メンバヌシップではAIコンテンツ最先端ノりハりずメンバヌ専甚ツヌル発信䞭

    あなたぞのおすすめ