音声から始めるAIミュージックビデオ生成
完成した曲をファイルでアップロードしてください。ClipChatがそれを聴き(ジャンル、BPM、キー、歌の言語、主役の楽器、ムード)、曲の各セクションがどこで始まりどこで終わるかに印をつけます。カット構成はその構造の上に組まれ、何かが生成される前にあなたが承認します。
使い方
手元のファイルから完成したシーンまでの6ステップです。
ClipChatと、プロンプト入力型の動画生成ツール
| プロンプト入力型ツール(Runway、Pika、Kaiber) | ClipChat | |
|---|---|---|
| 出発点 | テキストのプロンプト。ツールはあなたの曲を一度も聴きません。映像を言葉で説明して、合うことを願う形です。 | 音声ファイル。まずあなたの曲の解析があり、プロンプトはそこから書かれます。 |
| カットが落ちる場所 | 生成されたクリップが終わったところか、あとから編集ソフトで自分が引いた等間隔のグリッド上。 | 解析から得た、曲自身のセクションの境目(Aメロ、サビ、ブリッジ、ドロップ)。 |
| 映像全体の設計 | クリップ単位。構成は頭の中で持ち、結果はあとで自分で組み立てます。 | タイムコードつきの絵コンテ全体が先に書かれ、1シーンも生成されないうちにあなたに提示されます。 |
| 出力の質 | 解像度が高く、画面比も選べます。今のところこれが本当の強みです。 | 480p、9:16のみ。ここは負けており、隠すより言うほうを選びます。 |
| 支払う前に試せるか | たいていは、何かを見る前にアカウントとクレジットが必要です。 | 解釈、最大2つの世界観、最大6枚のシーンカードがアカウントなしで無料。映像そのものにはアカウントが必要です。 |
よく聞かれること
自分の曲のミュージックビデオを作るのに、いちばん良いAIツールは?
すでに何を持っているかによります。曲が録音済みなら、音声を読むツールのほうが、曲が実際に変わる場所にカットを置けます。プロンプト入力型はファイルを聴かないので、それができません。まだ音源がないなら、プロンプト入力型が正解です。ClipChatは音声ファイルがないとそもそも動きません。そして今すぐ1080pや横型が必要なら、別のツールをお使いください。ClipChatは480p、9:16で生成します。
音声ファイルからAIミュージックビデオを作れますか?
はい。ClipChatはその方法でしか動きません。MP3、WAV、M4A、AAC、OGGを10分までアップロードしてください。ジャンル、BPM、キー、歌の言語、主役の楽器、ムードが解析され、セクションの境目に印がつき、その上にカット構成が組まれます。長い曲はセクションごとに処理されます。
登録不要で使える無料のAIミュージックビデオ生成はありますか?
解析は無料でアカウントも不要です。曲の解釈を書いた文章、最大2つの世界観、タイムコードつきのシーンカード最大6枚が約60秒で届きます。それが何かは、はっきりさせておきます。文章と絵コンテであり、映像ファイルではありません。映像の生成にはアカウントが必要で、登録時に最初の短いクリップ用の初期枠がつきます。
ClipChatは音楽も作りますか?
いいえ。ClipChatはすでにお持ちの曲に映像をつけます。作曲も歌唱も制作も行いません。完成した音源はあなたが用意します。
映像は曲に沿いますか。それとも音の上にクリップを並べているだけですか?
カットは曲の構成(Aメロ、サビ、ブリッジ、ドロップの境目)に従い、ビートの等間隔グリッドには従いません。このセクションの地図はあなたのファイルの解析から得られるので、シーンの切り替えは音楽が変わる場所に落ちます。
出力の解像度と画面比は?
480p、縦型9:16です。これが現在の生成設定であり、プロンプト入力型ツールが私たちより先を行っている主な点です。リリースに今すぐ1080pや横型が必要なら、ClipChatは適したツールではありません。
まだできないこと
- 生成は480p、縦型9:16です。今のところ、より高い解像度も横型もありません。
- ClipChatは音楽を作りません。すでに完成した曲に映像をつけるだけです。
- 入力は10分までの音声ファイル(MP3、WAV、M4A、AAC、OGG)です。配信やホスティングのページへのリンクは受け付けません。
- 長い曲は一度に通すのではなく、セクションごとに扱われます。
この分野の多くのツールは、一文のテキストを求め、数秒の映像を返します。曲そのものは工程に一度も入らないので、音楽をやっている人が編集者に変わってしまいます。クリップを生成し、切り、サビにだいたい合うまでカットを動かす。私たちは順番を逆にしました。先に音声を読み、曲が変わる場所を見つけ、そのタイムコードに合わせてカット構成を書き、その曲を書いた本人にプランを見せ、承認されてはじめて生成する。出力解像度は今のところプロンプト入力型ツールより低く、そこははっきり言っておきます。難しかったのは構成のほうで、私たちはそれを先に解きました。