広告

アニメーター向けの最新AIが登場~テキストから3Dモデルを作る

アニメーター向けの最新AIが登場~テキストから3Dモデルを作る

AIの波は今もなお上昇を続けている。毎週、ビッグネームの発表があり、Google、Microsoft、Adobeがこの競争を主導している。ここでは映像制作の世界に関連するアップデートを特別に選んだ。アニメーターやアニメーターになりたい人のための、エキサイティングなAIの数々を紹介する。

MidjourneyやStable Diffusionは、以前からあるディープラーニングの画像生成ツールで、誰もが知っているのではないだろうか。しかし、それらは2次元の画像しか作れず、当初の盛り上がりは薄れてしまった。次のステージは3次元モデルだが、そこでまた生成AIの研究が私たちを感動させてくれるようだ。

アニメーターのためのAIが登場:テキストから3Dオブジェクトへ

今月、Open AI(ChatGPTの製作社)はShap-Eを導入した。同社の研究者であり貢献者であるAlex NicolとHeewon Junは、3D資産のための条件付き生成モデルを発表する論文を発表した。複雑そうに聞こえるかもしれないが、その基本的な動作原理は実はとてもシンプルだ。Shap-Eは、学習させた膨大なデータセットから、テキストや画像と対応する3Dモデルを関連付けることを学習した。つまり、ニューラルネットワークにいくつかの単語や簡単な画像を与えると、最適な3D結果を生成してくれるのだ。

ChatGPTとは異なり、Shap-Eはまだパブリックベータ版を持っていないが、そのモデル、推論コード、サンプルをGitHubで無料でダウンロードすることができる。ただし、稼働させるためには、AIの経験や専門知識が必要な場合がある。その後、例えばMicrosoft Paint 3D上でこのツールにアクセスできるようになり、作成したレンダリングは3Dプリンター用のSTLファイルに変換することも可能だ。

もし、必要な知識や学習する時間がなくても、Shap-Eを試してみることは可能だ。(こちら)コミュニティキューで待ち時間が発生するかもしれないが、ブラウザで直接実験できる。イメージをつかんでもらうために-私の試みをいくつか紹介しよう:

AI launches for animators - text to 3D models examples
An ancient temple and a green cat: first rough 3D models, generated by Shap-E. Image source: CineD

ワンクリックでアニメーションを作成

もうひとつのAI大手、Stability AIも最近、テキストからアニメーションを作成するツールをリリースした。これはStable Animation SDKと呼ばれ、発表によると、アーティストや開発者は、最先端のStable Diffusionモデルを実装して、見事なアニメーションを生成できるようになった。このシステム全体の仕組みについて聞いたことがない場合は、基本的なプロセスをここで説明したので、まずはStable Diffusionに関する部分を読んでいただくことをお勧めする。

この新機能により、ユーザーは3つの方法でアニメーションを作成することができる:

  • 簡単なテキストプロンプトを作成し(Stable Diffusionの画像生成と同じ)、様々なパラメータを調整する方法;
  • 画像入力を追加し、テキストプロンプトと組み合わせる;
  • ニューラルネットワークに動画を提供し、それがアニメーションの出発点となる

Stable Animation SDKのインストール方法と使用方法については、非常に丁寧な公式ガイドをご覧ください。ただし、2D画像生成の前身となるソフトウェアと比較すると、この新しいソフトウェアは無料ではなく、さまざまな価格モデルが提供されていることに注意いただきたい。一部のユーザーは、このソフトウェアで作成されるアニメーションはまだ十分ではないが、モデルが学習し続けることで、この先もっと良くなっていくはずだ。

仮想世界のクリエイターのためのAIローンチ

もしあなたが熟練したアニメーターで、ゲーム業界で長年働いてきたのであれば、このような仕事に必要なスキルはすべて持っているはずだ。そうでない方は、Nyricという新しい技術を導入したばかりのLovelace Studioをご覧いただきたい。簡単に言えば、AIによる世界生成プラットフォームで、テキストをメタバースに変えるものだ。

AI launches for animators - creating worlds based on text descriptions
Various generated worlds. Image source: Lovelace Studio

とはいえ、Nyricはまだ一般公開されていないので、想像の域を出ない。つまり、今のところは開発者の発言を信じるしかない。彼らは、この新しいAIがビデオゲームの制作を簡素化する一歩になると約束している。さて、ショーケースの映像は印象的だった。文字だけの説明で、リアルでファンタジックな世界を作り出せるのだ。試してみたいという場合は、TwitterやDiscordでLovelace Studioにコンタクトを取ってみていただきたい。

グラフィックの世界でもAIが登場

日常的にグラフィックや写真を扱う人に向けて、少し余談を: Googleは、今年後半にGoogleフォトに搭載される予定の「Magic Editor」のAI編集機能をいくつか発表した。その中には、背景の簡単な置き換え、不要な要素の削除、1枚の写真内の異なる被写体の再配置などがある。AIがありふれたレタッチ作業を引き継ぐことで、私たちはより多くの時間とエネルギーを創造的な課題に集中することができるようになるだろう。

Feature image source: Stability AI.

Leave a reply

Subscribe
Notify of

Filter:
all
Sort by:
latest
Filter:
all
Sort by:
latest

Take part in the CineD community experience