テキストから動画を生成するAI
見たい場面と、そこで鳴る音を書くだけで、テキストから動画AIが音声付きの動画に仕上げます。
プロンプトがわかる、テキストから動画の作例
どの動画も、言葉だけから生成しました。下にあるのは、その動画を作ったプロンプトの要約です。ボタンを押すとプロンプト全文が同じ設定のまま入力欄に入り、そこから言葉を書き換えられます。
砂嵐を駆ける騎手が、砂に埋もれた古代都市を見つける
プロンプトの要約
砂嵐の中、騎手が黒い馬を駆って砂丘を駆け上がる。砂ぼこりが割れて砂に半ば埋もれた都市が現れ、馬は頂上で前脚を上げて止まる。吹きすさぶ風、ひづめの音、いななき。
雨の夜、店に入ってきた探偵がセリフを言う
プロンプトの要約
トレンチコートの女性探偵が雨の夜から店に入り、帽子をカウンターに置いて腰かけ、「Coffee, black. And tell me who’s been asking about me.」と言う。カメラは最後に彼女の笑みをとらえる。声の下に、やわらかいピアノ。
ザトウクジラが海から跳び上がる
プロンプトの要約
穏やかな海の上をカメラが低く飛ぶなか潮が噴き上がり、ザトウクジラが海面を突き破って跳び出す。横向きに海へ倒れ込み、尾びれを上げて潜っていく。波の音のあと、大きな水しぶきの音。
アニメ：屋上で、風に手紙をさらわれる
プロンプトの要約
手描きアニメの画風で、屋上で手紙を開いた女子高生が風に便せんをさらわれ、走って夕焼けの街並みを背に空中でつかむ。そのあと手紙を読んでほほえむ。風の音のあと、ピアノ。
クレイアニメ：小さなロボットと、ぐんぐん伸びる花
プロンプトの要約
コマ撮りの粘土アニメで、黄色いロボットが赤いつぼみに水をやると、花がぐんと伸びて大きく咲き、ロボットは花の真ん中で両腕を広げる。小さな虹がかかる。水の音のあと、楽しげなメロディ。
TikTokやリール、ショート向けの縦型動画
コック帽の猫が、パンケーキをひっくり返す
プロンプトの要約
コック帽をかぶった茶トラの猫がパンケーキを高く放り上げ、くるりと回るのを見上げてフライパンで受け止め、得意げな顔をしてから前足で帽子を直す。焼ける音、「ニャー」のひと声、軽快な音楽。
フォークで、フォンダンショコラを割る
プロンプトの要約
ゆっくりとしたアップで、フォークがフォンダンショコラに入り、温かいチョコレートが湯気を立てて流れ出す。カメラが引くと、粉砂糖が舞い落ちる。そのあと、やわらかいピアノ。
テキストから動画を作る3ステップ
- 1.
場面を書く
映っている人や物、起きること、カメラの動き、聞こえる音を書きます。上の作例を読み込んで、言葉を書き換えてもかまいません。
- 2.
アスペクト比と長さを選ぶ
プロンプトの下のツールバーで、16:9や9:16などのアスペクト比と動画の長さを選びます。選べる項目はモデルによって変わります。
- 3.
生成してダウンロードする
できあがった動画はプロンプトのすぐ下に表示されます。そのままダウンロードするか、言葉を少し変えて生成し直せます。生成に失敗した場合は、クレジットが返金されます。
テキストから動画のプロンプトの書き方
よいプロンプトの流れに沿って、書くことを順に並べました。上の作例も、すべて同じ書き方です。
画風とショットから書き始める
あいまい
雪の中のキツネ。
具体的
実写、映画のような質感、ロングショット。夜明けの雪の丘を、アカギツネが小走りで横切る。
最初の言葉が、そのあとすべての見た目を決めます。実写、アニメ、クレイアニメなどの画風と、カメラがどこまで寄るかを書きます。
何が動くかを書く
あいまい
雪の森に建つログハウス、窓に暖かい明かり。
具体的
ログハウスの前を雪が舞い、明かりのともった窓へカメラがゆっくり寄っていく。
場面の説明だけでは写真と同じで、何があるかは伝わっても、何が起きるかは伝わりません。誰が、何が、どう動くかを書きます。
カメラの動きと速さを書く
あいまい
崖の上の灯台、シネマティックなカメラ。
具体的
崖の上の灯台へカメラがゆっくり寄り、下では波が砕ける。
「シネマティック」と書いても、カメラは何をすればいいかわかりません。寄る、引く、パン、追う、回り込むなどの動きと、その速さを書きます。
流れを時間で区切る
あいまい
女性が家を出て、海まで車を走らせ、夕日を眺める。
具体的
0〜3秒：女性が崖沿いの道の突き当たりに車を止める。3〜7秒：車のボンネットに上る。7〜10秒：カメラが引くなか、海に沈む夕日を眺める。
動画をいくつかの区切りに分け、動きがどうつながるかを順番に書きます。区切りは選んだ長さに合わせます。大事なのは正確な秒数より順番です。
音とセリフを書く
あいまい
夜、探偵がダイナーに入ってくる。
具体的
外では雨がざあざあと降り、ドアベルが鳴って探偵が入ってくる。低く疲れた声で「Coffee, black.」と言う。
音声をオンにすると、聞こえる音もプロンプトで決まります。どんな音が鳴るか、誰がどんな調子で話すかを書き、セリフはそのまま「」で囲みます。
最後に、入れたくないものを書く
あいまい
雨の夜のネオン街。
具体的
雨の夜のネオン街、水たまりに映る光が揺れる。文字、字幕、透かしは入れない。
まず画面に入れたいものを書き、最後に短い一文で、出てほしくないものを書き添えます。文字や字幕、透かしは、モデルが自分から入れてしまうことがあります。
「最適化」でモデル向けに書き直す
自分の言葉で書いたら、入力欄の下の「最適化」を押してください。選んだモデルのプロンプトのルールに合わせて書き直し、書いた言語のまま返します。クレジットは使いません。ログインすると使えます。
テキストから動画のよくある質問
ほかにご不明な点があれば、[email protected] までお問い合わせください。