Google DeepMind、AI活用の短編アニメを公開
- •Google DeepMindが、独自の「video-to-video」ワークフローを用いた短編アニメ『Dear Upstairs Neighbors』をサンダンス映画祭で発表した。
- •特定の芸術的スタイルとキャラクターの一貫性を維持するため、ファインチューニングを施したVeoおよびImagenモデルを開発。
- •プロのアニメーターが3D/2Dのラフなレイアウトを作成し、AIの生成プロセスをフレーム単位で精密に制御する手法を採用した。
Google DeepMindは、サンダンス映画祭において、伝統的なストーリーテリングと生成AIを融合させた短編アニメ『Dear Upstairs Neighbors』を公開。
予測が難しいテキストプロンプトだけに頼るのではなく、ピクサー出身のベテランを含む制作チームは、専用の研究ツールを通じて「芸術的制御」を最優先事項に掲げた。
独自のコンセプトアートを用いてAIモデルをファインチューニングすることで、主人公「アダ(Ada)」のようなキャラクターの造形をシーン全体で一貫させ、3D的な視点では破綻しやすい複雑な2Dデザインのルールも見事に維持している。
今回の突破口となったのは、動画から動画を生成する「video-to-video」ワークフローだ。
アニメーターはまず、MayaやTV Paintなどの標準的なツールで、映像の設計図となるラフなレイアウトを作成。Googleの生成モデルはこれらのスケッチを、制作者が意図したタイミングや動きを正確にトレースした、表現豊かなハイファイ(高忠実度)なフレームへと変換したのだ。
このハイブリッドな手法により、映像制作の標準的な慣習である「デイリー(試写)」形式でのレビューが可能になり、ショット全体を再生成することなく、特定の領域だけを洗練させたりマスク処理したりできるようになった。
このプロジェクトは、AIが自律的なクリエイターではなく、高度な技術アシスタントとして機能する「アーティスト第一主義」への転換を象徴している。
制作の最終段階では、大画面での上映に備えて4Kアップスケーリングモデルが使用された。この機能は近く、同社のVertex AIやAI Studioプラットフォームでも提供される予定だ。
AIを「デジタルな絵の具」の一層として扱うことで、DeepMindは、人間の直感によってマシンの創造的な出力を導き出す未来を提示したと言えるだろう。