画像から動画を生成するAI
写真をアップロードして起きてほしいことを書くだけで、画像から動画AIが音声付きの動画に仕上げます。
元の写真とプロンプトがわかる、画像から動画の作例
どの動画も、隅に表示した写真から始まっています。下にあるのは、その動画を作ったプロンプトの要約です。ボタンを押すと写真とプロンプト全文が入力欄に入り、写真は自分のものに差し替えられます。
写真 ポートレート：振り向いて笑い、窓を開ける
プロンプトの要約
女性がカメラのほうへ振り向いてほほえみ、立ち上がって窓を押し開ける。吹き込む風でカーテンと髪がなびき、目を閉じて風を受ける。風の音のあと、やわらかいピアノ。
写真 ペット：スローモーションでフリスビーをキャッチ
プロンプトの要約
犬がカメラに向かって駆けだし、芝を跳ね上げながらスローモーションで赤いフリスビーに飛びつく。くわえたまま、しっぽを振って小走りで戻ってくる。ローアングルで追うカメラ。息づかいのあと、口笛のメロディ。
写真 イラスト：海風に飛ばされる麦わら帽子
プロンプトの要約
列車が走りだし、海風に麦わら帽子が飛ばされる。少女はリボンをつかんで引き戻し、カメラは後ろへ引いて海岸を映す。手描きアニメの画風はそのまま。
写真 しゃべる写真：カフェの店主がセリフを話す
プロンプトの要約
店主がフラットホワイトを置き、カメラのほうへ差し出して「Morning! Your usual flat white, on the house today.」と言う。カメラが湯気まで下がってから戻ると、店主がウインクする。店内の音とギター。
写真 古い写真：1970年代の家族が動き出す
プロンプトの要約
止まっていた家族が写真の中から動き出す。父親が娘を抱き上げてくるりと回り、母親が拍手し、3人で寄り添ってカメラに笑いかける。1970年代のフィルムの質感はそのまま。
写真 商品写真：香水の広告
プロンプトの要約
金色のキャップに水滴が落ちてはじけ、カメラが回り込むなか、金色の光の粒と花びらがボトルを囲む。最後にキャップに光がきらめく。ボトルとキャップは写真のまま変えない。
開始・終了フレームで、動画の終わり方を決める
生成モードを「開始・終了フレーム」に切り替えて、写真を2枚追加します。1枚目から2枚目までの動きは、AIが組み立てます。
2枚の写真で、昼から夜へ
プロンプトの要約
晴れた開始フレームから始まるタイムラプス。人や自転車が行き交い、雲が流れ込んで雨が降り、街灯がともって夜の終了フレームで終わる。カメラは固定。
画像から動画を作る3ステップ
- 1.
写真を追加する
JPEG、PNG、WebPの写真を20MBまでアップロードできます。入力欄の下の作例を選んで、その写真から始めることもできます。
- 2.
動かしたいことを書く
カメラの動き、被写体の動作、聞こえる音を書きます。動作を2〜3個、順番に書くと、始まりから終わりまで流れのある動画になります。
- 3.
長さを選んで生成する
モデル、長さ、アスペクト比を選ぶと、生成ボタンの横に料金が表示されます。できあがった動画はダウンロードできます。
画像から動画のプロンプトの書き方
誰が、どこで、どんな見た目かは、写真がすでに伝えています。変えてはいけないものを書いたら、残りの言葉は何がどう動くかに使ってください。
写真から始める
あいまい
彼女を動かして
具体的
[Image 1] を最初のフレームにする。彼女の顔立ち、髪型、セーターは [Image 1] のまま。窓辺に座っているところから、カメラのほうへ振り向く
写真が最初のフレームであることと、変えてはいけないものを書き、最初の動きは写真のポーズから始めます。新しく加わるものは、画面の外から入ってくるように書きます。
カメラの動きと速さを書く
あいまい
シネマティックなカメラワーク
具体的
カメラがゆっくり寄り、そのまま彼女の横へ回り込んでクローズアップ
どう動くか、どのくらいの速さか、どこで止まるかを書きます。「寄る」「パン」「回り込む」ならモデルはそのとおりに動かせますが、「シネマティック」と書いても動きにはなりません。
流れを時間で区切る
あいまい
彼女があちこち動く
具体的
0〜3秒：カメラのほうへ振り向いてほほえむ。3〜7秒：立ち上がって窓を押し開ける。7〜10秒：風を受けて目を閉じる
動画をいくつかの区切りに分け、動きがどうつながるかを順番に書きます。区切りは選んだ長さに合わせます。大事なのは正確な秒数より順番です。
被写体のまわりで動くものを書く
あいまい
風が強い
具体的
強い風が吹き込み、白いカーテンが大きくふくらんで、髪が後ろへなびく
止まった場面を生き生きと見せるのは、風や雨、湯気、移り変わる光です。それが何に触れるかまで書いてください。
音とセリフを書く
あいまい
いい感じの音
具体的
店主が温かく気さくな声で「Morning! Your usual flat white, on the house today.」と言う。ドアベルが鳴り、やさしいギターが入る
誰がどんな調子で話すかを書き、セリフはそのまま「」で囲んで、ほかに聞こえる音も書きます。音声が出るのは、音声を生成できるモデルを選んだときです。
最後に、入れたくないものを書く
あいまい
香水のいい感じの動画
具体的
ボトルと金色のキャップの形は最後まで変えない。文字、ラベル、字幕、透かしは入れない。
最後に短い一文で、変えてはいけないものや、出てほしくないものを書き添えます。文字や字幕、透かしは、モデルが自分から入れてしまうことがあります。
「最適化」でモデル向けに書き直す
自分の言葉で書いたら、入力欄の下の「最適化」を押してください。選んだモデルのプロンプトのルールに合わせて書き直し、書いた言語のまま返します。クレジットは使いません。ログインすると使えます。
画像から動画のよくある質問
ほかにご不明な点があれば、[email protected] までお問い合わせください。