ソニーは、バーチャルプロダクションとVFX用に開発されたマーカー不要のカメラトラッキングシステム、OCELLUS ASR-CT1を発表した。従来のトラッキングでは、マーカーや赤外線ビーコン、ベースステーションが必要となることが多く、セットアップが複雑で時間がかかることがあった。
OCELLUSは、Visual SLAMによりプロセスを簡素化し、追加のハードウェアなしでリアルタイムのカメラトラッキングを可能にする。このシステムは、プラグアンドプレイソリューションとして設計されている。LEDボリューム、グリーンスクリーン、AR環境とシームレスに統合し、よりスムーズで効率的なワークフローを実現する。
カメラトラッキングが重要な理由
バーチャルプロダクションは、映画やテレビ番組の制作方法を完全に変えた。ユーザーは、遠隔地への移動や大規模なセットの構築を行う代わりに、高解像度のスクリーンを並べた巨大な壁（LEDボリューム）の前で俳優を撮影することができる。これは素晴らしいツールだが、カメラの動きをデジタル背景の視点に正確に一致させる必要がある。トラッキングがしっかりしていないと、その関係は崩れてしまう。
グリーンスクリーン撮影にも同じ課題がある。正確なトラッキングができない場合、VFXアーティストはポストプロダクションでカメラの動きを手作業で再現することになるが、これは時間がかかりフラストレーションのたまる作業だ。OCELLUSは、カメラの動きとレンズのメタデータをリアルタイムでキャプチャし、そのデータを直接Unreal Engineやその他のレンダリングプラットフォームに送信し、正確なトラッキングを可能にする。
他のトラッキングソリューションも存在するが、それぞれに欠点がある。赤外線モーションキャプチャには管理されたスタジオ環境が必要であり、慣性トラッキングシステムは時間の経過とともにドリフトが発生し、頻繁な再キャリブレーションが必要になる。クレーンやドリーリグの中には、トラッキング機能を内蔵したものもあるが、特定のセットアップでのみ動作する。HTC Vive Ultimate Trackerのようなコンシューマー向けのものは、VRやモーションキャプチャには適しているが、レンズメタデータの統合やプロ仕様のカメラのサポートは対応できない。
OCELLUSはマーカー不要で柔軟性があり、どこでも使えるプロレベルのソリューションである点で際立っている。
OCELLUS
ソニーのOCELLUS ASR-CT1は、センサーユニット、プロセッシングボックス、オプションのレンズエンコーダーという3つの主要コンポーネントで構成されている。各パーツは、バーチャルプロダクション、AR、VFXを多用する撮影において、正確なリアルタイムカメラトラッキングを実現する。
センサーユニット – コンパクトでマーカーレス
センサーユニットは小型軽量で、どこにでも取り付けられるように設計されている。5つのイメージセンサーを搭載し、Visual SLAMを使用してあらゆる方向の動きを追跡する。従来のトラッキングシステムとは異なり、OCELLUSは赤外線マーカーやベースステーションを必要としない。単に環境をリアルタイムでマッピングするだけだ。たとえ1つのセンサーだけが特徴点を検出した場合でも、システムはスムーズに追跡を続ける。
プロセッシングボックス – システムの頭脳
プロセッシングボックスは、SDIケーブル1本でカメラに接続し、レンズのメタデータ、タイムコード、同期情報を取得する。有機EL画面でリアルタイムのトラッキング状況を確認できる。ポートには、ゲンロック、タイムコード、SDI入出力、レンズエンコーダーがある。これにより、別のハードウェアを追加することなく、プロ仕様の制作システムに簡単に統合できる。
レンズエンコーダー – メタデータ非対応のレンズ用
レンズがメタデータを出力しない場合は、オプションのレンズエンコーダーを使用する。レンズに取り付け、ズーム、フォーカス、アイリス調整を追跡し、LEMO 7ピンコネクタ経由でデータをプロセッシングボックスに送信する。これにより、マニュアルシネマレンズでも仮想制作ワークフローに完全に統合できる。
リアルタイムデータとストレージ
OCELLUSは、トラッキングデータの処理に2つの方法を提供している。イーサネット経由でUnreal Engineやその他のVFXソフトウェアにライブストリーミングするか、SDXCメモリーカードにFBXトラッキングファイルを保存して、Maya、Blender、Nuke、After Effectsでポストプロダクションを行うかだ。この柔軟性により、ライブおよびポストプロダクションのワークフローの両方に対応でき、後で手動でトラッキングを修正する必要がなくなる。
OCELLUS：未来のトラッキング
ソニーは、バーチャルプロダクション、AR、VFXを多用する映画制作システムにおけるカメラトラッキング分野に参入した。レンズメタデータのキャプチャ、マーカーレス、FBXトラッキングファイルの保存機能により、合理化されたワークフローを求めるハイエンド制作に最適な選択肢となる。
OCELLUSの価格はオープンだが、市場推定価格は5,600,000円前後とされている。そのプロ仕様の機能から、ハイエンド市場向けであることは間違いない。
OCELLUS ASR-CT1は、4月6日にラスベガスで開催されるNAB 2025で正式にデビューし、ソニーはその全機能を発表する予定だ。
詳細はソニーのOCELLUS公式ページをご覧下さい。発表文はこちら。
