広告

Adobeが「Firefly for Video」を発表~Creative CloudにジェネレーティブAIをもたらす

Adobeが「Firefly for Video」を発表~Creative CloudにジェネレーティブAIをもたらす

ご存知のように、NABは業界が集まるだけでなく、企業にとっても何か特別なものを紹介する絶好の機会だ。アドビも例外では無い。テキストベースの編集自動カラートーンマッピングといったPremiere Proの新機能を発表した後、Adobe Fireflyをビデオに実装し、クリエイティブな生成AIモデルのファミリーを大幅に拡張する今後の計画も明らかにした。

最初に、Adobe Fireflyは、同社の人工知能と機械学習のフレームワークであるAdobe Senseiをベースとした、AI駆動型のツールセットだ。Fireflyは先月世界に紹介され、現在は活発なベータテスト段階に入っている。現時点では、主にテキストプロンプトから画像を作成することができる(このような生成AIツールの提供はすでに大規模なものであり、例として、MidjourneyとStable Diffusionについてはこちらで紹介した)。これに加えて、Fireflyは、デザイナーやイラストレーターにとって興味深い道具であるテキストエフェクトを生成する可能性を提供する。

NAB 2023では、今後、Adobeのビデオ、オーディオ、アニメーション、モーショングラフィックスデザインのアプリにジェネレーティブAIを導入していくことを明らかにした。すでに発表されている機能としては、簡単なテキスト説明でクリップの音楽を生成したり、ワンクリックで動画の配色を変更したりするものがある。

Adobe Firefly for video:期待されるもの

アドビがAI分野で探求するコンセプトの範囲は、ストーリーボードから最終的な編集に至るまで多岐にわたる。まずはプリプロダクションから。公式プレスリリースにあるように、クリエイターは脚本をアップロードし、ディープラーニングエンジンにテキストを解析させ、絵コンテの走り書きを自動的に作成することができるようになる。ビデオプレゼンテーションでは、このプロセスは文字通りマウスを1回クリックするだけで、以下の画像のようなものが出来上がる。

しかも、それだけでは無い。MakePreviz “ボタンをクリックすると、 タイムライン上に、シンプルで詳細なアニメーションによるプリビズが表示さ れるのだ。

この機能がこれほどシンプルでユーザーフレンドリーなものであれば、映像制作を志す人や自主制作の作品にとって、非常に大きな助けになるのではないのだろう。と同時に、この開発の方向性は、私には心配に思える。ジェネレーティブAIが人間のアーティストの未来に与えうる影響については、すでに多くの議論がなされている。クリエイターの中には、大企業がプロを雇う代わりにこのようなツールを活用するかもしれないと想定する人もいる。NetflixがAIを使って短編アニメのアートを作成し、それを「業界の人手不足」で正当化した事例もある。

さまざまなワークフローを高速化する便利な機能

この継続的な議論はさておき、Adobe Fireflyは、特にソーシャルメディアや企業ビデオ制作の分野で、いくつかのワークフローを加速するのに非常に役立つと思われる(「特に」と書いたのは、時間が最高の友となり、いくつかのプロセスは完全な映画的品質で行う必要がないためだ)。

例えば、前述した「テキストからカラーへの拡張」。この機能により、クリエイターはビデオクリップの配色や時間帯、季節などを瞬時に変更することができるようになる。下の例のように、簡単なプロンプトを書くだけでいいのだ。

さらにもう一つ発表されたAIベースのツールは、インタビューを書き起こすだけでなく、キーワードを特定し、関連するBロールクリップまで提案して、ラフカットを作ってくれる。

Fireflyを他のAdobeアプリケーションに統合できるようになれば、(ベータ版のように)テキストエフェクトを生成するだけでなく、アニメーションもできるようになる。魅力的なフォント、タイトルカード、グラフィック、ロゴの作成は次のステップだと、開発者は約束している。

Adobe Firefly for audio

ジェネレーティブAIのもう一つの探求領域は、もちろんオーディオだ。ここでアドビは、Fireflyの新しいコンセプトもいくつか紹介している。まず、同社のプレゼンテーションでは、クリエイターが人工知能に頼んでカスタムミュージックを作曲してもらうことができるようになることを紹介している。キーワードをいくつか並べると、こうなる。

その後、高度なサウンドエフェクト機能を使って、AIに動画の内容を分析させ、マッチするサウンドを探させることができる。開発者が強調しているように、生成されたメロディーやトラックはすべてロイヤリティフリーなので、クリエイターは最終カットにそれらを加えることができる。

Adobe Fireflyの最大の魅力

そしてそれが、Adobe Fireflyと他の生成AIとの最大の違いにつながっている(少なくとも、私の意見では)。Adobe Fireflyは、Adobe Stockの画像やオープンライセンスのコンテンツ、著作権の切れたパブリックドメインのデータなど、合法的で包括的なデータセットのみを用いてモデルを学習させることを約束している。これは、手に入るものなら何でも使ってしまう他のニューラルネットワークの開発者に比べ、非常に新しく、間違いなく最も良心的なアプローチと言える。

つまり、Fireflyが生成したコンテンツは、商用利用が可能であり、帰属の問題の一部を解決することができるということだ。しかし、それ以外の意見もいくつか読んだが、例えば映画制作者は、ストッククリエイターが自分の映像をFireflyモデルのトレーニングに使用するかどうかを選択する自由を与えるように(使用する場合は追加報酬を得るように)、アドビに求めているようだ。

新しいAIツールを試すには

現在、Adobe Fireflyはベータ版として提供されており、誰でもここから早期アクセスをリクエストすることができる。私たちは招待状を受け取り、最初のテストの結果をすぐにお見せできることを切望している。しかし、現時点では、Fireflyのテキスト画像生成機能を試したり、さまざまなテキストエフェクトを作成して遊んだりすることしかできないので、ご注意いただきたい。アドビは、この記事で紹介した他のAIベースの機能をすべて今年後半に導入する予定だ。

まとめ

発表を聞けば聞くほど、映像制作はまったく新しい時代に突入しているように見える。人工知能ツール(ジェネレーティブAIだけでなく、すでに日常的な作業を代行しているものもある)があれば、プリプロダクションやポストプロダクションのプロセスは、私たちが想像していたよりもずっとスピードアップするかも知れない。同時に、まだ答えの出ていない、まったく別の疑問も出てくる。

Feature image credit: Adobe.

Leave a reply

Subscribe
Notify of

Filter:
all
Sort by:
latest
Filter:
all
Sort by:
latest

Take part in the CineD community experience