Firefly 学習

生成AIで好みの3Dキャラクターを作成して動画にしよう - Adobe Fireflyとブラウザーで手軽に楽しく動画生成

手元にブラウザーさえあればAdobe Fireflyの生成AI機能を使用して、イメージしているクリエイティブを簡単に、かつ高い品質で制作できます。この記事は、オリジナルの3Dキャラクターと、それが登場する動画をFireflyのパートナーモデルを活用して制作する手順を紹介します。3Dキャラクターが冒険へと誘う動画をAdobe Fireflyの生成AI機能を使ってつくり上げましょう!この記事では、Fireflyパートナーモデルにおけるプロンプト記述のヒントを紹介しつつ、手書きのラフスケッチから生成した3Dキャラクターが登場するBGM付きショート動画の制作手順を解説します。ブラウザーだけでつくれる手順です。
公開日

作業に入る前に、サンプルファイルをダウンロードします。本素材は学習目的に限り使用することができます。

1.画像の生成

まずキャラクターのラフスケッチを描きます。特長さえ表現されていれば上手である必要は全くありません。

キャラクターの生成にはFirefly web版の「 画像を生成 」を使用します。

画面を開いたら、モデルに「Gemini3.1(Nano Banana 2)」を指定して、参照画像にラフスケッチをアップロードします。アスペクト比は「ワイド(16:9)」、解像度は「2K」を指定します。

Nano Banana 2は表現力豊かな生成AIです。詳細を任せてしまうことにより生成結果の偶発性を楽しむこともできますが、プロンプトでイメージを詳しく指定する使い方もできます。今回は絵に手間をかけなかった代わりとしてプロンプトを頑張ってみましょう。

ということで詳細に記述したプロンプトを用意しました(サンプルファイルの「画像生成プロンプト1」)。

ポイントは以下の通りです。

  • 参照画像ができるだけ反映されるように「手描きイラストをもとにした」から始める

  • それぞれのキャラクターの形状をプロンプトでも具体的に描写

  • スケッチには顔しか描かれていないので首から下の情報を記述

  • キャラクターの特徴を出すために猫には「小さな剣を持っている」、犬には「大きな丸い盾を持っている」を記述

  • 2体のバランスを指定するため「猫より犬が少しだけ身長が高く…」と記述

  • 全体的な質感を指定「滑らかで柔らかな印象の3DCG、丸みのある造形、明るい色彩、やさしいライティング」

プロンプトを頑張った甲斐あって、最初の生成結果としてはまずまずです。詳しくプロンプトすることで、自分のイメージするキャラクターに近づけられることがわかります。

ここからさらに調整してみます。特に気になったのは以下の点です。

  • 犬の口元がスケッチより大きい。眉が生成されている

  • 犬が猫より大きく、ちょっと猫背

  • 2体とも手足の先が丸iい。剣や盾を握っていない

そこでプロンプトを以下のように修正します。

  • 「どちらも人間のように後ろ足の二足で立っている」を追加

  • 「体の大きさ…が揃った」を「顔の大きさ…が揃った」に変更

  • 犬の記述の「黒い目」を「小さな黒い目」に変更し、「マズルはなく、口も描かれていない…」を追加

  • 「前足も後ろ足も指の数は各3本」を追加

修正したプロンプトは、サンプルファイルの「画像生成プロンプト2」です。

2体のバランスと姿勢がよくなり、猫も犬も参照画像の顔に近づきました。胴体や手足、剣と盾の持ち方は自然です。プロンプトを修正した甲斐がありました。

基本の形状が整ったので質感を加えます。猫は淡いクリーム色をベースにします。

  • 「白い猫」を「白黒の柄の猫」に変更し、「全身が淡いクリーム色の...」を追加

  • 「耳の内側と小さな鼻は薄いピンク色」を追加

犬は淡いキャラメルブラウンです。

  • 「白い犬」を「温かみのある淡いキャラメルブラウンの犬」に変更

  • 「全身が温かみのある淡いキャラメルブラウンの...」を追加

さらに全体の質感についての記述も変更します。

  • 「滑らかで柔らかな印象の...」を、「ふわふわの毛並みを持つ、柔らかな印象の…」に変更。

再修正したプロンプトは、サンプルファイルの「画像生成プロンプト3」です。

狙い通り、もふもふした質感を加えつつ元の形状を維持した画像が生成されました。これをキャラクターの完成形として参照し、次は動画を生成していきます。

2.動画の生成

生成したキャラクターを使って動画を生成します。まずFirefly web版の「 動画を生成 」画面を開きます。

動画生成にもパートナーモデルを使用します。モデルに「Gemini Omni Flash」を指定し、縦横比は「ワイドスクリーン」、時間は「8秒」にします。そして最初のフレームに生成したキャラクター画像を設定します。音声はデフォルトでオンになっていて効果音やBGMが同時に生成されます。

動画生成でもプロンプトは丁寧に記述します。ゲームのオープニングを意識したシナリオにしてみましょう。プロンプトは、サンプルファイルの「動画生成プロンプト1」です。

ビデオを読み込めません

ほぼイメージ通りの動画が生成されました。気になったのは以下の2点です。

  • 表情の変化(特に犬)が勝手に生成されている

  • 犬が最後に剣を持っている

そこでプロンプトを以下のように修正します。

  • 最後のシーンに「猫は剣だけを持っている。「犬は右前足には何ももたず、左前足に盾だけを持っている。」を追加

  • 顔の様子をより具体的に記述

修正したプロンプトは、サンプルファイルの「動画生成プロンプト2」です。

ビデオを読み込めません

犬が剣を持つ件は直りましたが、表情の変化は相変わらずです。また、最初に現れた芽や植物は、森へと変化する途中で消失してしまいました。

プロンプトは以下の点を変更します。

  • 芽や草花が順番に現れる記述から背景全体が森へ変化する表現に変更

  • 犬を大きく変化させないため盾を掲げる動作等を削除

  • 犬が動かなくても2体が一緒に冒険へ出発する雰囲気が出るような演出を追加

再修正したプロンプトは、サンプルファイルの「動画生成プロンプト3」です。

ビデオを読み込めません

いかがでしょうか?長いプロンプトは面倒に思えますが、自分のイメージを言語化して欲しいキャラクターに近づける作業です。この記事を参考にして、皆さんも画像や動画を生成する際に是⾮試してみて下さい。

※⽣成AI機能を利⽤する際に使⽤する⽣成クレジットの概要、ご⾃⾝が保有するクレジット数の確認⽅法などは「 ⽣成クレジットの基本 」で解説しています。

インストラクター

akihiro kamijo