絵本をAIでアニメーションに：どのページも同じキャラクターで - RefVid

ページごとにキャラクターが変わる理由と、その防ぎ方

• AI動画モデルは、フレームごとにキャラクターを描き直します。1ページ分の絵しかないと、横顔や後ろ姿、画面の外にある服まで推測するしかなく、その推測は毎回変わります。そのため、3ページ目と4ページ目で少しずつ違う子どもが描かれてしまうのです。
• 解決策は、毎回同じ絵を渡すことです。RefVidでは、自分のイラストから主人公を名前付きで一度だけ保存します。その後に作るクリップはすべてこのセットから描かれるので、10ページ目も1ページ目と一致します。当社のアニメシリーズ「GuaPi」もこの方法で作りました。キャラクター4人、それぞれ4枚の絵で、4話すべてのショットで同じ顔を保っています。

• GuaPi：同じ保存キャラクターで作ったアニメシリーズ→

絵本からアップロードするもの

• 自分の絵を使い、キャラクターだけが写ったきれいな画像に切り出します。理想的なセットは、正面、斜め45度、横向き、顔のアップの4枚で、すべて同じ服、同じ画風にそろえます。3〜5枚あれば十分で、1キャラクターにつき最大10枚まで使えます。
• 文字は入れないでください。アップロード前に、本文、ページ番号、吹き出しを切り取りましょう。モデルは画像に写っているものすべてをキャラクターの一部と受け取り、動画モデルは今も小さな文字を崩してしまいます。イラストレーターが描いたキャラクター設定画があれば、各アングルごとに切り分けてください。
• ほかの登場人物も同じように保存します。1つのクリップに保存キャラクターを最大3人まで登場させられるので、子どもと親と犬を同じページに出すこともできます。

• キャラクター設定画をアングルごとに切り分ける方法→

絵本のイラストを1ページずつ動画にする手順

• 1. 見開きを1つ選び、そこで動くことを1つだけ決めます。犬が跳ねる、船が傾く、子どもが月を見上げる、などです。1クリップに出来事1つならうまくいきますが、短いクリップに3つ詰め込むと、たいていどれも成立しません。
• 2. そのページのイラストを文字なしで最初のフレームにすると、クリップはあなたの絵そのものから始まります。描く・選ぶのは動作の結果ではなく、その直前の瞬間です。モデルは最初のフレームから先にしか進めないからです。
• 3. 1〜2文で書き、最後に「手描きのタッチを保つ。」と添えます。GuaPiの爆発ショットで使ったプロンプトはこちらです：「小さな扇風機が火花を散らし、ポンと破裂する。もくもくと黒い煙が噴き出し、羽根が引っかかって止まり、傘がガクンと揺れる。ヘンリーのにやけ顔が、目を見開いたパニック顔に変わる。手描きのタッチを保つ。」
• 4. 生成してクリップを確認し、残すかやり直すかを決めます。それから次のページへ進みます。クリップの長さはモデルによって3〜30秒です。好きな動画編集ソフトでクリップをつなげれば、動く絵本の完成です。

絵本のアニメ動画：うまくいくこと、まだ難しいこと

• 得意なこと：手を振る、跳ぶ、振り向くといった、シンプルで分かりやすい動き。ゆっくりしたズームインのような穏やかなカメラワーク。そして、プロンプトで別の見た目を求めない限り、フラットな絵柄や絵の具で描いた絵柄。絵がそう描かれていれば、クレヨンはクレヨンのまま、水彩は水彩のままです。
• 苦手なこと：場面の中の文字、手の細かく精密な動作、たくさんのキャラクターが入り乱れる場面。本文はモデルに描かせず、編集ソフトで字幕として加えましょう。
• 音声：無料クリップは無音です。Kling 4やKling 3.0 Omniの音声ありクリップなら短いセリフを入れられます。絵本をまるごと朗読させたいときは、読み聞かせを録音して、つなげたクリップの下に敷いてください。

• 同じキャラクターでシリーズを作る方法→

絵本をアニメーションにする費用

• Kling 3.0 Omniでの最初の3秒のクリップは無料で、カード登録も透かしもありません。その後は、動画1本が$2.99から、買い切りのクレジットパックが$9.90から、月額プランが$10からで、クレジットに有効期限はありません。
• 目安として、GuaPi第1話は40秒・14ショットで、生成したクリップ24本から作りました。動画生成にかかった費用は、Kling 3.0 Omni、720p、音声なしで約$10です。