ComfyUI×動画生成AI×Codexで作る!ゲームスプライトアニメ量産パイプライン構築ガイド

こんな悩みはありませんか

インディーゲームや個人開発でキャラクターのスプライトアニメーションを作っていると、歩行・攻撃・被弾など動作パターンごとに何十枚もの画像を用意する作業に時間を溶かしてしまう、という経験は多いのではないでしょうか。イラストが得意でも、コマ数分を一貫したクオリティで描き続けるのは正直かなりの体力勝負です。

この記事でできるようになること

ComfyUIで生成したキャラクター画像を起点に、動画生成AIで自然な動きを付け、Codexで書いたスクリプトによってフレーム抽出とスプライトシート化を自動化する、という一連のパイプラインの組み方を紹介します。手作業で1枚ずつ描いていた工程を、生成と自動処理の分業に置き換えるのがこのパイプラインの核心です。読み終えた後、自分の環境で同じ流れを再現できる粒度でまとめています。

手順1：ComfyUIでベースキャラクターを固める

まずComfyUIのノードワークフローで、アニメの元となるキャラクター立ち絵を1枚生成します。ここで大事なのはキャラクターの特徴（髪型・服装・配色）を固定するプロンプトとシード値を決めておくことです。ここがブレると後工程の動画生成でキャラが安定せず、フレームごとに微妙に別人になってしまいます。最初は戸惑いやすいポイントですが、シードを固定してプロンプトの語順まで揃えると、驚くほど再現性が上がります。

手順2：動画生成AIで動きのバリエーションを作る

ベース画像ができたら、動画生成AIに読み込ませて「歩く」「ジャンプする」といった短い動きのクリップを生成します。1つの動作につき数秒のクリップを作り、そこからアニメーションに使うフレームを抜き出す形です。個人的にはここで一気に全パターンを作ろうとせず、まず1動作だけ完成させてクオリティを確認するやり方が楽でした。全部同時に作業すると、後で手直しが発生したときの手戻りが大きくなります。

手順3：フレームを抽出してスプライトシートの形に整える

生成したクリップから必要なコマ数を等間隔で抜き出し、背景を透過処理してから1枚のスプライトシートに並べます。この工程は地味ですが、ゲームエンジンにそのまま読み込める形式に整えるうえで欠かせません。ここは正直少し面倒な作業なので、次のステップで自動化してしまうのが現実的です。

手順4：Codexで自動化スクリプトを書く

ここがこのパイプラインの肝です。Codexにフレーム抽出・透過処理・格子状の配置・書き出しまでを行うスクリプトを書いてもらい、繰り返し作業をコード化します。自分でゼロからスクリプトを組むよりも、やりたい処理を自然な文章で伝えてコードを生成してもらうほうが圧倒的に速く、修正も指示ベースでできるので試行回数を増やしやすいです。この自動化スクリプトさえ用意できれば、以降は動作パターンを追加するたびに同じ処理を流すだけで量産が可能になります。

手順5：バッチ処理でまとめて量産する

スクリプトが動くようになったら、複数の動作クリップをまとめてフォルダに置き、一括で処理を走らせます。ここまで来れば、あとは動画生成AI側で新しい動きのクリップを作るたびに、同じスクリプトを流すだけでスプライトシートが増えていく状態になります。量産の速度を決めるのは、生成の速さよりも「後処理をどれだけ自動化できているか」だという実感があります。

つまずきやすいポイントと対処

実際に手を動かすと、いくつか引っかかりやすい点があります。

• キャラの一貫性が崩れる:シードやプロンプトを固定していても、動画生成AI側の揺れで微妙に絵柄が変わることがあります。気になる場合は生成したクリップの中から一貫性の高いものだけを選別する工程を挟むと安定します。
• 透過処理のムラ:背景色とキャラの配色が近いと、透過処理で輪郭が欠けることがあります。背景色をあらかじめ目立つ単色に統一しておくと後処理が楽になります。
• フレームレートのばらつき:動作ごとにコマ数が変わると、ゲーム内でのアニメーション速度が不揃いになります。抽出するフレーム数を動作の種類ごとに固定しておくのがおすすめです。

まとめ

ComfyUIでキャラクターを生成し、動画生成AIで動きを付け、Codexで書いた自動化スクリプトでスプライトシートに変換する、という三段構えのパイプラインは、個人開発におけるアニメーション制作の負担を大きく減らせる可能性を持っています。すべてを一気に自動化するのではなく、まず1つの流れを手動で通してから徐々に自動化範囲を広げていくのが、無理なく定着させるコツではないでしょうか。