RefVid
GuaPi · 第2話: ちぢめライト

キャラクターは同じ姿のままでした。GuaPi第2話の撮り直しはすべて私たち自身のミスで、そのたびにルールが1つ生まれました。

著者:Louis Chi · · 6 分で読めます

ショット
16
生成したクリップ
22
バージョン
6
動画生成費
≈ $5.50
完成したエピソード · 第2話: ちぢめライト

使用ツール

スタジオ
RefVid
動画モデル
Kling 3.0 Omni、1ショット3秒、9:16、720p、音声なし
キーフレーム
画像モデルで16ショットに14枚。2つのショットは、前のクリップの最後のフレームから続けています
サウンド
CC0の効果音、第1話で生成した音声のガチョウの鳴き声、パブリックドメインの「禿山の一夜」の録音

GuaPi第2話は36秒、16ショットです。Henry、GuaPi、Xiaobaiは全ショットで同じ姿をしています。第1話のために保存したキャラクターを、何も変えずにそのまま使ったからです。

それでも、16ショットに22クリップ、編集は6バージョンかかりました。クリップが増えた原因は、キャラクターの崩れではなく、私たちが書いたこと、あるいは書き忘れたことです。この記事では、撮り直しを並べて見せ、直したプロンプトと、いま毎回の生成前に確認しているルールを紹介します。

5ラウンド:5つのクリップで作るAIアニメの戦闘シーン

3秒のクリップ1本では、取っ組み合いは描けません。もみ合いを頼むと、キャラクターがその場で抱き合う2秒間が返ってきます。そこでライトの奪い合いを5ラウンドに分けて書き、ラウンドごとにキーフレームとクリップを1つずつ用意しました。

どのラウンドも、優勢が入れ替わります。ガチョウがHenryをつついてライトが飛び、Xiaobaiがキャッチし、ガチョウがXiaobaiの頭に乗り、Henryが飛び込んでつかみ、犬が激突する。打撃のたびに白いフラッシュと軽い揺れを入れてつなぐと、5つのクリップが11秒の戦闘になります。

エピソード本編での5ラウンド。
ラウンド1だけ:つま先をひとつつき、ライトが消えます。

キーフレームは、前のキーフレームを参照にしながらショット順に描いています。そのため、どれも前の絵の終わりから始まります。

GuaPi第2話の14枚のキーフレームを並べたグリッド

6回の撮り直しと、そこで学んだこと

ちぢんだキャラクターは、元の大きさに戻ります。GuaPiの参照画像は実物大のガチョウで、5テイク中3テイクで、小さいガチョウが2秒もたたないうちに元の大きさに戻りました。ジャンプや乗り物に乗る動きは大きさを戻してしまい、地面に近い小さな動きなら小さいままでした。ラウンド1は、Henryの親指への跳びかかりから、スニーカーへのひとつきに書き直し、3回目のテイクで大きさが保たれました。

プロンプトに名前があっても、ショットに入っていないキャラクターは、勝手に作られます。ラウンド5は、GuaPiをショットに入れないまま犬の頭に小さなガチョウを乗せるよう頼んだところ、モデルは黄色いヒヨコを描きました。視聴者に見せたい物語の見せ場には、専用のショットが要ります。スイッチが「ちぢめる」から「大きくする」に動く場面は小さすぎて読み取れず、クローズアップで撮り直してようやく伝わりました。

同じプロンプト、2つのキーフレーム。ショットを選んでください。
最初のテイク
Henryの親指への跳びかかり:ガチョウが元の大きさに戻ります。
修正後
地面に近いスニーカーへのひとつき:スズメの大きさのままです。

登場するキャラクターは、AIアニメのプロンプトにすべて書く

プロンプトには、3秒で起きるただ1つの出来事と、その激しさ、表情の変化を書き、最後は「Keep the drawn style.」で締めます。プロンプトに出てくるキャラクターは、必ずそのショットの保存済みキャラクターでもなければなりません。大きさが特殊なキャラクターには、比べる対象を与え、最初のフレームから最後のフレームまで大きさが変わらないことを書きます。

ショット
ラウンド1:ひとつき
キャラクター
Henry, GuaPi
設定
Kling 3.0 Omni · 3秒 · 9:16 · 720p · 音声なし · キーフレームを最初のフレームに
プロンプト

The sparrow-sized goose dashes in low along the ground and pecks Henry hard on the toe of his sneaker; Henry hops up on one foot in pain, his laugh turning into a wide-open pained grimace with bulging eyes, and the shrink torch flies out of his hand, spinning up to the upper right. The goose stays sparrow-sized the whole time. Fast, snappy. Keep the drawn style.

スタジオで試す

各ショットを、視聴者の目で見る

動きが起きたかどうかの確認だけでは足りません。あるリアクションのショットでは、ライトが「大きくする」に切り替わる瞬間、Henryの顔に赤い光が広がっていました。動きとしては合っていますが、視聴者には光線がHenryに当たったように見えます。次のショットでは、光線はガチョウに当たっています。このショットはエピソードからカットしました。

そこで、どのテイクも2回目の確認で、ひとつの問いを立てるようにしました。絵だけを見た視聴者は、いま何が起きたと思うか。

カット:赤い光は、Henryに当たったように見えます。
採用:赤い光はライトの上にとどまり、次のショットでガチョウに当たります。

切る前に見る:29秒が36秒になりました

バージョン5は29秒でした。テンポを速くするために、先に各パートの長さを決め、カットのあとに何があるかを見ないまま、全クリップをその長さに切っていたのです。その結果、ライトを持って小走りに去るXiaobai、土ぼこりの中でにやりと笑うHenry、巨大ガチョウの爆風まるごとが捨てられていました。

バージョン6では、すべてのクリップを最後まで見て、取り除くのは3つだけにしました。本当のミス、1秒を超えて何も動かない間、そして次のショットにつながらないフレームです。

ショットバージョン5バージョン6
Henryがライトを発射2.5 s3.0 s
Xiaobaiがライトをキャッチ1.7 s2.5 s
Henryの飛び込み2.3 s3.0 s
巨大ガチョウ2.2 s3.0 s
エピソード全体29.3 s35.9 s

音はすべて、そのフレームに置く。最初の1秒から

打撃音はどれもCC0の効果音で、出来事が起きるフレームに置いています。骨を踏みつける音、ブラスター、GuaPiがちぢむときのポンという音、戦闘の各ラウンド、スイッチ、巨大化。ガチョウの鳴き声は、第1話で生成した音声から取りました。パブリックドメインの「禿山の一夜」の録音は音楽バージョンの下で流れ、GuaPiが大きくなる瞬間にぴたりと止まります。

あるバージョンでは、サウンドトラック全体が0.43秒早まっていました。最初の音が短い無音のあとに始まっていて、ミキサーが0秒ではなくその音から数え始めたためです。いまはどのミックスにも、作品と同じ長さの無音トラックを敷き、音と映像が同じ長さで出力されることを確認しています。

6つのバージョン

6つのバージョンのどれも、エピソード全体の新しいキャラクターや新しいキーフレームは必要ありませんでした。新しいクリップが必要だったのは3つで、残りは手元のテイクの再編集です。

  1. v1とv2最初の編集、27.6秒。抜けていた白いフラッシュをv2で修正しました。
  2. v3Henryにかかる赤い光をカットして、光線がガチョウにだけ当たるようにしました。
  3. v4骨を持ったXiaobaiから始まる形に。スイッチはクローズアップで撮り直しました。
  4. v5ラストを追加:巨大ガチョウが振り向いて歩き去ります。
  5. v6全クリップを最後まで見て、29秒が36秒になりました。

かかった費用

動画生成費は約$5.50で、第1話の約$10に対して半分ほどです。今回は捨てるための最初のバージョンを作らず、22クリップのうち撮り直しは6クリップでした。

ステップ生成したもの生成費
最初の一通り3秒の無音クリップ16本≈ $4.00
撮り直し3秒の無音クリップ6本≈ $1.50
バージョン1〜6撮り直し以外の新規生成なし。既存テイクの再編集$0

毎回の生成前に確認するチェックリスト

  1. 1プロンプトに名前のあるキャラクターは、すべてそのショットの保存済みキャラクターにする。
  2. 2ちぢんだキャラクターや巨大なキャラクターには、地面に近い小さな動きをさせ、ショット内の何かと比べられるようにする。
  3. 3光、煙、爆風は、当たるはずのキャラクターにだけ当てる。
  4. 4スイッチのように視聴者に見せたい物語の見せ場には、専用のクローズアップショットを用意する。
  5. 5キーフレームを最初のフレームにし、設定は3秒、9:16、720p、音声なしにする。
  6. 6まず2〜3クリップ生成して1フレームずつ見てから、次のクリップを生成する。

よくある質問

ちぢんだガチョウが、何度も元の大きさに戻ったのはなぜですか?
モデルは保存済みのキャラクターを参照画像に近づけようとしますが、GuaPiの画像は実物大のガチョウです。ジャンプや乗り物に乗るような大きな動きは、実物大に引き戻しました。地面に近い小さな動きと、比べる対象を与えるプロンプトで、スズメの大きさを保てました。
36秒のエピソードには、クリップが何本必要ですか?
1ショット3秒で16ショット、1ショットにつき1クリップ、それに撮り直しです。第2話は22クリップ、最初の一通りが16本、撮り直しが6本で、RefVidのスタジオでの生成費は約$5.50でした。
このプロンプトは、自分のキャラクターにも使えますか?
はい。自分のキャラクターの名前に差し替え、RefVidで数枚の画像から各キャラクターを一度だけ保存し、キーフレームを最初のフレームにして、絵柄のあるアニメ調にしたいときは最後の一文「Keep the drawn style.」を残してください。