Top.Mail.Ru
リリックビデオをAIで作成、MP3から | ClipChat

リリックビデオ×AI:歌詞は読みますが、画面には出しません

10分までの音声ファイルをアップロードしてください。ClipChatが曲を聴き、歌詞を読み、1行あるいは1つの着想からシーンを起こしていく設計図を書きます。できあがるのは歌詞に形づくられたミュージックビデオであって、歌詞が上に書かれた映像ではありません。

音声ファイル → 歌詞の読み取りとセクションの地図 → タイムコードつきのシーンカード
曲をアップロード
無料の工程で得られるのは文章と絵コンテで、映像ではありません。所要はおよそ60秒、アカウントは不要です。映像の生成にはアカウントが必要で、生成は480p、9:16です。
Pipeline

曲が歌詞主導の映像になるまで

6ステップです。最初の4つは無料でアカウント不要。チャット、承認、生成は登録後になります。

01
音声ファイルをアップロード
MP3、WAV、M4A、AAC、OGGを10分まで。ファイルである必要があります。配信ページへのリンクは受け付けません。
02
曲が解析される
ジャンル、BPM、キー、歌の言語、主役の楽器、ムード。あわせてセクションの始まりと終わり(Aメロ、サビ、ブリッジ、ドロップ)にも印がつきます。
03
歌詞を意味として読む
言葉が画面上の出来事を決めます。曲の各部の主題、場所、ムード。字幕に変換されることはありません。
04
文章の読み取りとシーンカードが届く
曲の解釈を書いた文章、最大2つの世界観、タイムコードつきのシーンカード最大6枚。約60秒、アカウント不要です。
05
話し合って承認する
監督と話すように、チャットで読み取りを詰めます。クリップ全体が先に絵コンテになり、何かが生成される前にあなたが絵コンテを承認します。
06
シーンが生成され、曲に合わせて切られる
カットは等間隔のビートグリッドではなく、セクションの境目(Aメロからサビへ、ブリッジからドロップへ)に置かれます。
Difference

ClipChatと、従来のリリックビデオ作成ツールの比較

従来のリリックビデオ作成ツールClipChat
画面に出る歌詞出ます。それが主機能です。歌に合わせて1行ずつ、あるいは1語ずつ表示されます。出ません。ClipChatは歌詞を描画せず、カラオケのハイライトもありません。読める歌詞が画面に必要なら、従来型のツールが正解です。
解像度と形式多くは1080pで、16:9と9:16の両方に対応するのが普通です。480p、9:16のみ。今のリリックビデオ系ツールの多くより低い水準です。
映像を決めるもの選んだテンプレート。フォント、背景ループ、トランジションのプリセット。言葉はタイミングを決めるだけで、絵は決めません。曲の読み取りです。歌詞、ジャンル、ムード、セクションの地図が、各シーンに映るものを決めます。
カットのタイミングテキストのイベントをビートグリッドに置くか、タイムライン上で手作業で合わせます。カットは曲の構成(Aメロ、サビ、ブリッジ、ドロップ)に従います。
始め方テンプレートを選び、歌詞を貼り付け、タイミングを自分で直します。ファイルをアップするだけ。文章の読み取りとタイムコードつきのシーンカード最大6枚が、アカウントなしで約60秒で返ってきます。
FAQ

アップロード前によく聞かれること

ClipChatで歌詞を画面に出したリリックビデオは作れますか?

いいえ。ClipChatは歌詞を読み、その意味からシーンを組み立てますが、歌詞そのものは表示しません。カラオケ字幕も1語ずつのタイミング合わせもありません。画面上の文字が必要な場合は、従来型のリリックビデオ編集ツールをお使いください。

MP3から自動でリリックビデオを作るには?

MP3ファイルをアップロードしてください。ClipChatがジャンル、BPM、キー、歌の言語、主役の楽器、ムードを解析し、曲のセクションに印をつけ、約60秒で曲の読み取りを書いた文章とタイムコードつきのシーンカード最大6枚を返します。この部分は無料でアカウント不要ですが、映像の生成にはアカウントが必要です。インターフェースは17言語に対応しています。

ClipChatは無料で試せますか?

読み取りと絵コンテは無料で、登録も不要です。文章の解釈、最大2つの世界観、タイムコードつきのシーンカード最大6枚が得られます。映像はこの無料の工程には含まれません。アカウントを作ると、最初の短いクリップ用の初期枠がつきます。

アップできる音声ファイルと曲の長さは?

MP3、WAV、M4A、AAC、OGGを10分まで。配信ページへのリンクではなく、アップロードしたファイルである必要があります。長い曲はセクションごとに処理されます。

解像度と画面比はどうなりますか?

480pで、縦型9:16を前提に作られます。今のところ1080pの選択肢はありません。公開したい場所にこれで足りるか、始める前に確認してください。

同じ歌い手や同じ人物を、どのシーンでも保つには?

その人物の参照画像を1枚渡してください。1枚あれば全シーンを通せます。同じ人物の5方向を渡すと、さらに安定します。

Honesty

ClipChatがしないこと

なぜこの作りにしたか

リリックビデオ系のツールの多くは、タイポグラフィの問題を解いています。背景の上に、言葉を、正しいタイミングで出す。これは本物の仕事で、すでにうまくやっているツールもあります。私たちが気になったのは別の問いでした。この曲は何についての曲で、だから画面には何が映るべきなのか。そこでClipChatは歌詞を意味として読み、曲のセクションを地図にし、それを、何かが生成される前に読めるシーンに変えます。結果として、名前から想像されるより狭い道具になりました。字幕は出せません。出せるのは、先に読んで直せるプランです。

曲をアップして、まずプランを読む

音声ファイルから始める