Premiere 学習

生成動画の構図やカメラワークを思い通りにコントロールするAdobe Firefly Video活用法

Firefly Videoは、参照動画から「動き」を読み取り、それを生成動画に反映するユニークな機能があります。この記事では、参照動画と同じ構図の動画を複数生成したり、カメラワークを参照動画を使って指定したり等、Firefly Videoならではの動画生成テクニックを紹介します。動画を生成する際、被写体の構図や動きをプロンプトで正確に指示するのは容易な作業ではありません。Adobe Firefly Videoでは、動画を参照させて生成する動画の構図やカメラワークを指示することが可能です。この記事では、Firefly Videoモデルを活用して、参照動画と同じ構図の動画を複数生成して合成する表現方法や、参照動画でカメラワークを指示する動画生成のテクニックを解説します。動画制作の品質向上に生成AIを活用したい方におすすめです。※この記事は先日配信されたイベントのセッション内容を紹介しています。記事冒頭のアーカイブ動画と合わせてご覧ください。
公開日

作業に入る前に、サンプルファイルをダウンロードします。

本素材は学習目的に限り使用することができます。

目次:

  1. 動画で構図を指定して動画生成

  2. 構図が同じ2つの動画をブレンド

  3. 人物動画からアバターを生成

  4. 動画でカメラワークを指定して動画生成

※Adobe Premiere 26.3を使⽤して操作しています。

1.動画で構図を指定して動画生成

Firefly Videoには既存の動画を参照して動画を生成する機能があります。参照には「構成参照」と「カメラ動作の参照」の2種類があり、それぞれ動画の異なる要素を参照します。

まずは構成参照の機能と使用例を紹介します。参照するのは以下の動画です。道路を走っているスポーツカーの動画です。

構成参照に動画をアップロードすると、被写体のレイアウトやカメラアングルの動きを反映した別の動画を生成できます。

構成参照を使用する場合は、「スタイル」も指定できます。プロンプトを使わずにポピュラーな作風を指定できる便利なオプションです。今回は「アニメ」を選択します。

プロンプトに「SF的な土地を走る未来の車」と入力して生成したのが以下の動画です。場面が海岸からSF的な未来都市になっています。車も近未来的なデザインです。一方、カメラと被写体の動きや構図は参照動画のままです。

このように、構成参照は参照動画と同じ動きの動画を生成するために利用できます。

2.構図が同じ2つの動画をブレンド

構成参照は、被写体の輪郭の変化も反映します。そのため、同じ参照動画を使って生成した2つの動画を重ねて使うことが可能です。

具体的な例を紹介します。

先ほどのスポーツカーの動画素材を構成参照に指定してもう一度動画を生成します。プロンプトは「黒の背景。カラフルなパーティクルが飛び交う」です。スタイルは今回も「アニメ」を選択します。

ビデオを読み込めません

プロンプトの記述通りパーティクルが飛び交う動画が生成されました。とはいえ単純にパーティクルが飛び交っているのではなく、車の動きやカメラアングルの変化に合わせて位置や大きさを変えています。

この2つの動画をAdobe Premiereに読み込みます。まずSF風の動画をタイムラインに配置し、その上に重ねてパーティクル動画を配置します。

パーティクル動画を選択した状態で描画モードを変更します。「スクリーン」にすると、黒い部分は下のレイヤーが、明るい部分ほど上のレイヤーが見えるようになります。その結果、車の上をパーティクルが飛び交う映像になります。

未来感のある演出をSF風動画に加えることができました。車の輪郭の動きやカメラの変化に合わせてパーティクルを追加するのは、プロンプトを使った生成では困難です。

描画モードを利用した手法ですので、モードを変えるだけでさまざまな表現を試せます。「オーバーレイ」では、少しダークでシネマティックな映像になりました。

3.人物動画からアバターを生成

次は、人物動画を使った例を紹介します。使用するのは以下の動画です。

ビデオを読み込めません

この動画を構成参照にアップロードして、プロンプトには「クラシカルなSF風の人間型ロボット」と入力します。今回はスタイルは指定しません。すると以下のような動画が生成されました。

動きが参照元の動画をトレースしているため、振り付けを指定したい場合に使えるテクニックです。細かな仕草をプロンプトで指定するのは大変ですが、この方法であれば、スマートフォンなどで演技を撮影することにより、かなり意図に忠実な動きを再現できます。

また参照動画に音声が入っていれば、アバターとしてトークさせることもできます。合成作業が不要なため、わざわざタイミングを合わせる必要はありません。

4.動画でカメラワークを指定して動画生成

次はFirefly Videoのもう一つの動画参照オプション「カメラ動作の参照」の活用例を解説します。こちらは構成参照とは異なり、参照動画のカメラワークだけ利用したい場面で使用します。

なお、Firefly Videoには一般的なカメラの動きがプリセットとして提供されています。単純な動きであれば、このオプションから選ぶことでもカメラワークを指定できます。

ショットサイズも、超クローズアップから超ロングショットまで選択して指定できます。

「カメラ動作の参照」は、プリセットには見つからないような複雑なカメラの動きを指定したい場面で便利です。ここではスポーツカーの動画を参照させて、カメラが横から回り込む動画を生成します。

動画から参照されるのはカメラの動きだけです。今回、動画のシーンは画像を使って指定します。以下のように横向きの男性の画像を「最初の」フレームに設定します。

プロンプトに「窓の外を見つめる男性」と入力して生成すると、カメラが男性の横から前に回り込む動画が生成されました。

実現したいカメラアングルを実際にスマートフォンを動かしながら撮影すれば、プロンプトで説明するより確実にカメラの動きを指定できます。参照動画から動きを取り入れられるのはFirefly Videoのユニークな性質です。動画制作の品質を高める手段の一つとして、ぜひ活用してみてください。

※⽣成AI機能を利⽤する際に使⽤する⽣成クレジットの概要、ご⾃⾝が保有するクレジット数の確認⽅法などは「 ⽣成クレジットの基本 」で解説しています。

インストラクター

大須賀 淳

Premiere Pro でこれらのチュートリアルをお試しください

映画やビデオの作成と編集
すべてのプランを表示