ライトフィールド技術を使って、クールな可変焦点画像を作成できる、あの気の利いたLytroカメラを覚えていますか？実は、万華鏡のような形をした第一世代のLytroカメラと、より伝統的なカメラのような外観のIllumは、ほんの始まりに過ぎなかったのです。
木曜日、Lytro 社は、ライトフィールド技術を使用してリアルで没入感のあるライブアクションビデオとコンピューターグラフィックスをキャプチャして組み合わせるビデオカメラ、Immerge でビデオ分野に参入したことを発表しました。
ライトロ「Immergeは、Illumによって実現された技術的成果を基に構築され、その技術をライブアクションビデオと360度の仮想空間へとさらに進めています」とLytroの最高製品責任者であるアリエル・ブラウンスタイン氏はMacworldに語った。
これはLytroにとって自然な進化です。昨年の夏、同社はIllumの大規模なアップデートをリリースしました。これはファームウェアとデスクトップアップグレードを組み合わせたもので、Oculus Rift、Sony PlayStation VR、Microsoft Hololens、HTC ViveといったVRヘッドセット向けのコンテンツクリエイターとしての位置付けを強めました。
そして今では、Lytro ソフトウェア プラグインの助けを借りて、Immerge 出力を Mac で編集できます。
まだプロトタイプ
Immergeは現在プロトタイプ段階にあり、プロの映画制作者をターゲットとしています。同社によると、2016年第1四半期にクリエイティブなストーリーテラー向けにリリースされる予定です。
編集の主な入り口は、Foundry のクロスプラットフォーム合成および視覚効果パッケージである Nuke であり、Lytro はそのプラグインを作成しました。
「編集環境を一から作り直すことはしませんでした」とブラウンスタイン氏は述べた。「Nukeはポストプロダクションの視覚効果の標準規格です。編集者はあらゆるピクセルを編集し、コンピューターグラフィックスと組み合わせ、視覚効果を適用することができます。」
ARとVRはこれまで3Dゲーム環境の構築に主に利用されてきましたが、Immergeの画期的な点は、ドラマやドキュメンタリーにおいてリアルで没入感のある映像表現を可能にすることです。これにより、ターゲット視聴者層が飛躍的に拡大し、映画制作者の創造性も飛躍的に向上するでしょう。
Immergeは、一度キャプチャすればあらゆるデバイスで再生できるように設計されています。ハイエンドのヘッドセット向けに最適化されていますが、GoogleのCardboardや、光学系のみを搭載したシンプルで低価格なヘッドセットなどのVRデバイスのスクリーンとして、スマートフォンでも使用できます。
2Dの問題の修正
Immergeは実写コンテンツとコンピューターグラフィックスを組み合わせるために開発されましたが、まずは2Dの問題を解決する必要がありました。「現在利用可能なテクノロジーの多くは2Dから寄せ集めたもので、3D環境ではうまく機能しません」とブラウンスタイン氏は言います。「2Dテクノロジーでは、自分がどこにいるのかが分からず、臨場感に欠けるのです。」
例えば、VRの2D画像はつなぎ合わせる必要がありますが、そうすると継ぎ目や線が不連続な空間を作り出し、見ていて気になってしまうことがあります。優秀な動画編集者は継ぎ目を隠すことはできますが、完全に消すことはできません。
Immergeはライトフィールドボリューム内でデータをキャプチャし、任意の点、任意の方向、任意の視野角から仮想ビューを生成できます。これにより、これまでコンピュータグラフィックスでしか実現できなかった、はるかにリアルな臨場感を実現します。
さらに、Immergeは自然な光の流れを再現することで視聴者をアクションの中に没入させ、ユーザーが頭を左右に動かしてもシーンの一貫性を保つよう立体的な配置を補正します。カメラは、異なる距離にある物体が異なる速度で動いているように見える現象である視差を補正します。
頭をあらゆる方向に自然に（「6自由度」）動かすことができ、左右、上下、前後など、自然な視界で世界を見ることができます。さらに、この3つの軸に加えて、3つの軸が回転します。
システムとして構築
Immerge はカメラとしてだけでなく、コンテンツのキャプチャ、処理、編集、再生に必要なすべてのハードウェア、ソフトウェア、サービスを提供する完全なシステムとして設計されています。
柔軟で構成可能な高密度ライト フィールド カメラ アレイ、ストレージおよび処理用のサーバー、Nuke と統合されたライト フィールド エディター、VR ヘッドセットおよびプラットフォーム用のライト フィールド ビデオ再生エンジンを備えています。
Immerge サーバーは最大 1 時間のキャプチャを保存し、ライト フィールド データを処理し、ネットワークおよびエンタープライズ ストレージや VFX ツールと統合し、ポータブル レンダリング ファームも提供します。
Lytro 社は、2016 年第 1 四半期中にストーリーテラーが Immerge システムを購入またはレンタルできるようにし、その年の後半には一般向けにも提供することを計画しています。
これが重要である理由:ビデオ分野の進歩により、Lytro は、一般視聴者向けの新しい種類の没入型ストーリーテリングと VR ベースのプレゼンテーションのために、ライブアクションとコンピューターグラフィックスを作成および組み合わせる上で重要な役割を果たします。
