正直に言うと、AIを使って洗練されたアニメシーンを作るのは、見た目ほど簡単ではないこともあります。「クールなビジュアルを生成して音声を同期させよう」と思っても、結局何もうまくいかなかったり、出力がいまいちだったり。私も経験済みです。そこで、実際にうまくいく方法(そして、いくつかの設定でうまくいかない方法)に基づいた、いわば現実的なウォークスルーをご紹介します。

準備:本当に必要なもの(ネタバレ:それほど多くはない)

これらのツールを準備し、アカウントにログインするのを忘れないでください。難しいことではありませんが、時々バグがひどいことがあります。

  • ChatGPT : スクリプトやプロンプトの下書き用です。ChatGPT押してください。
  • DreamMina : あなたのアイデアをビジュアル化します。DreamMina に登録してください
  • OpenAITS : 不気味で素敵なナレーション。OpenAITS見つかります。
  • Hedra AI : アニメーション作成用。Hedra AIにログインしてください。
  • CapCut:最終的な調整と磨き上げに。アプリストアまたは公式サイトからダウンロードしてください。

ステップ1:つまらないスクリプトを書かない

まずは基礎から始めましょう。とにかく基礎を固めましょう。ChatGPTを開いてシーンをササッと作ってみましょう。プロンプトの例(コピーしても恥ずかしくないですからね):

Write a 20 seconds anime scene about a warrior saying goodbye to her dragon.

この機械は、セリフや演出、その他お決まりのものをどんどん作り出します。まあまあ良い出来の時もあれば、大幅な編集が必要な時もあります。まあ、それも制作過程の一つですから。まあまあの出来になるまで微調整を続けましょう。奇妙な展開が一つ二つあっても驚かないでくださいね。

ステップ2:クラウドゴミのように見えないようにビジュアルを作成する

DreamMinaを起動してログインし、チャットボットにスクリプトに基づいた画像プロンプトを生成してもらいましょう。そのためには、ChatGPTに戻って次のように言います。

Create a prompt for image generation for the anime scene I wrote earlier.

結果をDreamMinaに貼り付けて、微調整を始めましょう。ライティング、スタイル、カメラアングルなど、完璧なショットを撮るために何でも試してみてください。正直なところ、完全にダメな結果になるまでには数回レンダリングする必要があるでしょう。一部のマシンではDreamMinaの動作が遅くなったり、不具合が発生したりすることがあるので、こまめに保存しましょう。もし何かがおかしいと感じたら、プロンプトを変えたり、スタイルを変えたりしてみてください。私の場合は、ある設定ではうまくいきましたが、別の設定では…うまくいきませんでした。実験が鍵です。

ステップ3:スタジオを使わずに適切な音声にする

シーンのビジュアルが決まったら、次は音声について考えてみましょう。OpenAITSはスクリプトを読みやすいナレーションに変換するのが得意で、自分で録音するよりもはるかに高速です。ChatGPTからスクリプトをコピーして、以下の手順を実行してください。

  1. OpenAITSに貼り付けます。
  2. 男性、女性、落ち着いた声、力強い声など、自分に合った声の種類を選択してください。デフォルトの声でもうまくいく場合もあれば、うまくいかない場合もあります。
  3. 「スピーチを作成」をクリックします。次に、オーディオファイルをダウンロードします。

自動生成された音声の場合、音声が完全に一致しなかったり、少しずれて聞こえたりする可能性は常にありますが、ほとんどの場合、十分な結果が得られます。変化をつけたい場合は、音声を変えてもう一度試してみましょう。設定によっては、シーンの雰囲気に合わせてピッチやスピードを微調整する必要があるかもしれません。なぜうまくいくのかは分かりませんが、複数のバージョンを試聴することで、最適なテイクを選ぶのに役立つことがよくあります。

ステップ4:スタッフを雇わずにアニメーションを作る

ここで魔法が起こります—うまくいけば。Hedra AIにログインして、画像をアップロードします。ええ、段階的に行う必要があるかもしれません。

  1. ビデオをクリックします。
  2. DreamMinaからフレームを1つずつアップロードします。
  3. それをナレーションと同期させましょう。試行錯誤が必要になるでしょう。特にリップシンクはおかしくなりがちですが、Hedraは自動的に処理しようとします。
  4. オプションで、ヘドラにジェスチャーや感情的な反応を指示するプロンプトを追加できます。うまくいくこともあれば、変な表情をしてしまうこともあります。
  5. 矢印ボタンまたはスタートボタンを押して、アニメーションを見てみましょう。スムーズに動く時もあれば、少しぎこちない時もあります。それはあなたの指示、入力、そして忍耐力次第です。

完了したら、ダウンロードしてレビューしてください。正直なところ、この部分は当たり外れがあり、たまにぎこちない出来栄えになることもありますが、練習すれば完璧になります。本当にこだわりたい場合は、プランをアップグレードしたり、手動で修正を加えたりすることもできます。

ステップ5:その糞(または傑作)を磨く

動画をCapCutに読み込みます。ここで音楽やエフェクト、そして少しステッカーを追加して、素人っぽくない仕上がりにしましょう。手順は以下のとおりです。

  1. バックグラウンド ミュージックを追加します。CapCut のライブラリは優れていますが、独自の音楽をアップロードすることもできます。
  2. さらにセンスを加えたい場合は、テキストや楽しい効果を追加します。
  3. タイミング、ビジュアル、オーディオなどすべてが揃っていることを確認し、HD または必要な品質でエクスポートします。

この最後のステップは、主に忍耐と視覚的な味わいに関わるものですが、本当に大きな違いを生み出します。シーンが「まあまあ」から「まあまあ」に変わることもあるのです。

追加のヒントと、何も機能しない理由…

プロのヒント:頭を悩ませている場合のために。最初から完璧を期待しないでください。DreamMinaがクラッシュしたり、Hedra AIがリップシンクをうまく行かなかったりすることがあります。様々なプロンプトを保存しておき、動作がおかしくなったら再起動して、もう一度試してみてください。また、音声パラメータを微調整したり、画像プロンプトを調整したりすると、かなり改善されます。

正直に言って、もし「カチッ」と音が鳴るワークフローを見つけたら、それを使い続けましょう!これらのツールはまだ少し扱いに​​くいですが、根気強く使い続ければ、より「映画のような」映像に近づくことができます。

実際何が起こっているのか?

簡潔に答えると、AIはまだ魔法ではありません。各ツールがプロンプトを解釈したり画像を処理したりする方法によって、うまく連携できないこともあります。ハードウェア、設定、アップデートなど、これらが作業フローを著しく乱す可能性があります。もちろん、すべてのAIツールがうまく連携するわけではありません。だからこそ、試行錯誤を繰り返し、臨機応変に調整していくことが重要です。少しイライラするかもしれませんが、努力を続ければ必ずうまくいくはずです。

よくある質問(当然です)

私のDreamMinaの画像がひどいのはなぜですか?

プロンプトが明確でなかったか、GPU に問題があります。より分かりやすいプロンプトを試すか、ライティングとスタイルのオプションを調整してください。また、バグが発生する可能性があるため、最新バージョンを実行していることを確認してください。

なぜ声と口の動きが一致しないのでしょうか?

OpenAITSのリップシンクは完璧ではない場合があります。速度とピッチを調整したり、声を変えてみたり、Hedraに表情や身振りを誇張するよう促すプロンプトを追加したりしてみてください。すべてが完璧に一致するわけではありませんが、ほぼ完璧に機能することがよくあります。

より早く結果を得るためのショートカットはありますか?

テンプレートを活用し、お気に入りのプロンプトを保存し、可能な場合は一括処理しましょう。また、バックグラウンドアプリを終了し、ドライバーを更新するなど、システムをクリーンな状態に保つことで、処理速度が向上します。

まとめ

  • ChatGPT で適切なスクリプトを作成します。
  • 画像を生成し、十分に良く見えるまで調整します。
  • ナレーションを自動生成し、必要に応じてカスタマイズします。
  • Hedra AI でアニメーション化を試みる場合、試行錯誤が必要になります。
  • CapCut で最後の仕上げを加えて、プロフェッショナルな外観を実現します。

これで誰かの時間短縮になれば嬉しいです。もちろん、AIを使ったアニメ制作は決して楽ではありませんが、ゆっくりでも何もないよりはましですからね。頑張ってください!