スマートフォンは、年々最新の技術を搭載した新機種が発売されている。最近では、新しいiPhone 13が登場し、ビデオのフェイク被写界深度や、まもなくアップデートで追加されるプロ用ビデオコーデックのProResが搭載された。しかし、ハードウェアの発展に伴い、ソフトウェアも発展しており、、ユーザーは新しい表現方法を手に入れ、阿多rしい映像を作り出すことができる。CamTrackARもそのようなソフトウェアの一つで、CamTrackARとiPhone 13の組み合わせは、VFXを多用するプロジェクトにおいて、ユニークな方法をユーザーに提供する。
CamTrackARを開発したのは、ビデオ編集・VFXソフトウェアパッケージ「HitFilm」を開発したFXhome。この多才なソフトは、パワフルなツールをユーザーに提供している。初心者にも問題なく使用できる。先日、非常に重要な機能が追加されたCamTrackAR 2.0のリリースについての記事を掲載した。最新のCamTrackARとiPhone 13のコラボレーションで、FXhomeはハリウッドレベルのバーチャルプロダクション技術を手に入れることができる。プリビジュアライゼーション、インフォンクロマキー、Blender、Unreal Engine、そして同社のHitFilmとの統合により、CamTrackARは原石の中のダイヤモンドのようなものだ。
スマートフォン でできるVFX
CamTrackARは、世界初のiOS用モバイルバーチャルプロダクションスタジオとして、iPhoneやiPadに特別な能力を与える。AppleのARkitとLiDARスキャナーの技術を用いて、FXhomeはビデオ撮影と同時に正確な3Dカメラトラッキングデータを生成する。iPhoneで、緑や青のスクリーンをキーアウトしたり、3Dバーチャル背景をインポートしてダイナミックに配置することができる。床、壁、背景などの平面には、トラッキンググリッドとアンカーポイントを設定できる。あとはCamTrackARとiPhone13が、すべての作業を代行して録画してくれる。下はFilm Riotのプロモーションビデオ。
カメラトラッキングのデータと映像が集まると、HitFilm、Blender、AfterEffects、Apple Motion、AutoDeskなどのプログラムにエクスポートすることができる。また、FXhomeは.jsonと.csvのフォーマットを使用しているので、ユーザーは自分のカスタムメイドのプログラムでデータを処理することができる。これらの機能の一部は無料でご利用できるが、無制限のエクスポート、複数のポイントアンカー、3Dモデルのインポートなどの高度な機能は、月々のサブスクリプションまたは買い切りでのみ利用できる。すべての機能の詳細については、FXhomeのヘルプガイドを参照いただきたい。
制限事項
完璧なソフトのように見えるが、CamTrackARにはいくつかの制限がある。この投稿の時点では、3D背景要素をビデオに焼き付けることができない。スマートフォンでキーを見ることはできるが、そのように録画することはできない。理論的には、iOSのスクリーンレコード機能を使ってiPhoneの画面を録画することで、これを回避することができるが、今回はテストしていない。その上、3D画像をスマートフォンに取り込むためのワークフローは現在のところ少し面倒で、使用するにはいくつかのベータ版ソフトウェアが必要だ。3つ目は、録画オプションが30fpsと60fpsに限られていることと、iPhone内のカメラの手ぶれ補正を利用できないこと。FXhomeによると、これらはiPhoneのARkitの限界とのことだ。
必要性
このソフトが映画に使用されることは、おそらくないだろう。しかし、このアプリは、一般のユーザーがVFXツールキットを広げるのに役立つ安価なオプションではある。ダウンロードは無料で、使える機能が豊富に揃っている。アップグレードはたったの29.99ドルで、この価格であれば、購入する価値がある。少なくとも、教育ツールになるだろう。よく言えば、ワークフローを拡張し、効率と創造的なアウトプットを向上させることができる。これはお金と時間の節約になる。CamTrackARの詳細については、FXhomeをご覧いただきたい。