
メディア・VFX・ゲーム
映画、テレビ、ゲーム、没入型メディアのために、場所、小道具、人物をフォトリアルにキャプチャします。Gaussian Splat、ラディアンスフィールド、セットのスキャン、ボリュメトリックビデオに対応します。
Laan Labsは、映画・テレビの制作会社、VFXスタジオ、ゲーム開発者、没入型メディアのチームのために、キャプチャとレンダリングの技術を開発しています。ロケ地、セット、小道具、出演者をスマートフォンや一般的なカメラでキャプチャし、制作パイプラインに取り込めるGaussian Splat、ラディアンスフィールド、メッシュとして再構成します。Laan Labsは、15台の同期したiPhoneとNeRFによるボリュメトリックな「バレットタイム」映像を収録し、3D Splat Appのために、MetalでGaussian Splatの学習器とレンダラーを独自に開発しました。
制作の現場には、常に現実世界のデジタル版が必要でした。撮影を計画するためのロケ地、拡張するためのセット、作り直すための小道具、カメラのなかった角度から見るためのパフォーマンスです。最近までそれは、LiDARクルー、フォトグラメトリ用のリグ、ボリュメトリックステージを意味していました。深度センサーを備えたスマートフォンとラディアンスフィールドの再構成が、そのコストを変えました。ロケハンの担当者は数分でロケ地をスキャンし、VFXスーパーバイザーはテイクの合間にセットを記録し、アーティストは実物のキャプチャから制作を始められます。
Laan Labsは、HBO、NBC、MTV、TBSなどのメディア企業と仕事をしてきました。そのスキャン技術は、ロケ地の計画やストーリーボードから、スキャンした物体によるゲームアセットの制作まで、映画、テレビ、ゲームの制作の現場で採用されています。
Laan Labsができること
- ロケ地・セットのキャプチャ
- ロケ地やセットを実寸大でLiDARと写真によりスキャンします。ロケハン、ショットの計画、ストーリーボード、プリビズに加え、ポストプロダクションでのセット拡張やマッチムーブの計測済みリファレンスにも使えます。
- フォトリアルな環境
- 光、反射、細部まで含めて場所を再現する、Gaussian Splatとラディアンスフィールドのキャプチャです。バーチャルロケハン、監督やクライアントとのレビュー、背景環境、没入型体験に活用できます。品質は、その場所をどれだけ徹底的に撮影したかによって決まります。
- 小道具とゲームアセット
- 実物の物体、車両、環境をスキャンし、OBJ、USD、glTF形式のテクスチャ付きメッシュとして納品します。写真を見ながらモデリングする代わりに、アーティストはリトポロジーと最適化の正確な出発点を得られます。
- ボリュメトリック・バレットタイムのキャプチャ
- スマートフォンで構成した同期マルチカメラリグに、時間の位置合わせ、色合わせ、フレームごとの再構成を組み合わせます。カメラがカバーした範囲の角度から見られる、瞬間や短いパフォーマンスを生み出します。品質はカメラ位置の近くで最も高く、カメラの間や外側では低下します。
- 顔と出演者
- iPhoneのTrueDepthセンサーと写真から、顔、手、体を近接スキャンします。デジタルダブル、キャラクター制作、衣装や特殊メイクの採寸のためのリファレンスとして使えます。
- カスタムの学習器とレンダラー
- 使用するハードウェア向けに作られた再構成とリアルタイムレンダリングです。クラウドへアップロードせずにApple Silicon上で学習し、SPZとSOGへ圧縮し、Web、iPhone、iPad、Mac向けのビューアも用意します。
- 没入型の再生
- キャプチャをApple Vision Pro、Meta Quest、その他のヘッドセットで実寸大に表示します。ロケ地のレビュー、展示、観客向けの体験に活用できます。
- 映像とコンテンツのためのAI
- 動画を大規模に視聴して説明するビジョンモデルと言語モデルです。Glow Agencyと共同開発したCreatorViewでは、ソーシャルメディアのコンテンツからクリエイターとブランドの適合性を評価します。
はじめ方
最初のプロジェクトは、通常、1つの制作における1つのキャプチャの課題が対象です。たとえば、クルーが去った後に再訪する必要があるロケ地、デジタルコピーが必要な小道具、止まった瞬間を求めるショットなどです。Laan Labsはキャプチャを構築して実施し、パイプラインが求める形式で成果物を納品します。また、それを得るために必要だったカバレッジと条件を文書化するため、制作側のチームだけで同じ手法を繰り返せます。
この技術を自社のソフトウェアに組み込みたいスタジオやツールメーカーには、ライセンス提供やコンポーネントの受託開発も可能です。Gaussian Splattingとラディアンスフィールドと空間コンピューティング、AR・VR開発もご覧ください。
関連する取り組み

モバイルLiDARワークフロー
プロフェッショナルがモバイルLiDARスキャンを業務にどのように取り入れているかを紹介します

InfraTech 3Dスキャン
スマートフォンを使って、NeRF や Gaussian Splat など各種の3D表現をキャプチャ・作成し、InfraTech の資産を管理するワークフローの概要です。

ギャラリーと作品の記録
まずギャラリーを Gaussian Splat としてスキャンし、その上に間取り図を描きます。次に各作品をスマートフォンでキャプチャし、閲覧用と状態の記録として使います。間取り図上のマーカーから、その場所に展示されている作品を開けます。

NeRFによるバレットタイム
15台の同期したiPhoneとNeural Radiance Fields(NeRF)を使い、マトリックス風の「バレットタイム」ボリュメトリックビデオをキャプチャして、3D空間の中で瞬間を静止させた方法を紹介します。

MetalによるMac上のGaussian Splatトレーニング
Gaussian Splattingのトレーナーの多くは、NVIDIA GPU向けのCUDAで作られています。私たちはCUDA製のSplatトレーナーをMetalに移植し、Apple Silicon上でネイティブに動作するようにしました。その成果が、Mac上でローカルにSplatをトレーニングできる無料アプリ「3D Splat App」です。

CreatorView
Laan LabsがGlow Agencyと協力し、ソーシャルメディアのコンテンツを視聴・分析してクリエイターとブランドの適合性を即座に評価するAIシステムを構築した経緯を紹介します。

Apple Vision Pro
Apple Vision Proを実際に使って試した実験を紹介します。visionOS向けのフィンガーペイントアプリ「AirDraw」の開発、空間コンピューティング開発に関する知見、そしてこのプラットフォームの魅力についてお話しします。

Kinect 3Dビデオ
拡張現実(AR)で3Dビデオを表示する実験
この分野の Laan Labs 製品
- 3D Splat App — クラウドへアップロードせずにMac上でGaussian Splatを学習・表示
- RadianceView — スプラット、スキャン、写真を1つのリンクで共有
よくあるご質問
制作では、Gaussian Splatとメッシュをどう使い分けますか。
スプラットは、反射、ガラス、植物、細部を含めて場所の見え方を再現し、短時間で作成できるため、ロケハン、レビュー、背景、没入型の閲覧に向いています。メッシュは、ライティング、衝突判定、リグ付け、編集が可能な面を持つため、アセットや、他の要素と相互作用させる必要があるものに向いています。多くのプロジェクトでは、同じキャプチャから両方を使います。見た目にはスプラット、ジオメトリとスケールにはLiDARまたはフォトグラメトリのメッシュです。
ロケ地や小道具のキャプチャには、どのような機材が必要ですか。
ロケ地、セット、小道具のスキャンの大半は、最近のiPhoneまたはiPadで対応できます。Gaussian Splat用の写真や動画は、性能の良いカメラであれば何でも使えます。ボリュメトリックやバレットタイムのキャプチャには、同期した複数のカメラが必要です。Laan Labsは、三脚に載せた15台のiPhoneでこのようなリグを構築しました。
キャプチャをゲームエンジンやVFXソフトウェアで使えますか。
メッシュは、テクスチャ付きのOBJ、USD、glTFで納品され、標準的なゲームエンジンやコンテンツ制作ツールに読み込めます。Gaussian SplatはPLY、SPZ、SOGで納品され、Webビューア、ネイティブアプリ、ヘッドセット、およびスプラットにネイティブまたはプラグインで対応したエンジンやツールで再生できます。Laan Labsは、各プロジェクトの個別のパイプラインに合わせた変換を構築します。
未公開の素材を、自社のマシン上にとどめられますか。
はい。Laan Labsは、Apple Siliconを搭載したMac上でGaussian Splatをローカルに学習します。3D Splat Appもこの方式で動作します。また、パイプライン全体をスタジオ自身のハードウェア上で実行できるため、セット、出演者、未公開の作品の映像がサードパーティのクラウドにアップロードされることはありません。
まずはご相談ください
プロジェクトについてお聞かせください。創業者のひとりが返信いたします。labs@laan.com へメールいただくか、お問い合わせフォームをご利用ください。
この業界向けのサービス: Gaussian Splatting, 空間コンピューティング、AR・VR, コンピュータビジョンとAI, ラピッドプロトタイピング
その他の業界: 保険・保険金請求, 不動産, 医療・ボディスキャン, ロボティクス・自動化, 公益事業・インフラ, 航空宇宙・MRO, 建設・AEC, 自動車, 製造・検査, アート・美術館・文化遺産