True3D Labs

ウェブカメラの視線追跡とAI技術により、通常の2D映像を裸眼で立体的に変換するソリューション

有料WebDesktopAPILLMベースマルチモーダルBeta

概要

True3D Labsは、AIファウンデーションモデルを活用して、通常の2D映像を没入型3D体験へとリアルタイムで変換するプラットフォームです。2020年に元MetaのエンジニアであるDaniel Habibによって設立され、Y Combinator Winter 2021コホートの出身です。ニューヨークを拠点とし、毎フレームのリアルタイム深度推定とRushmore AIモデルに基づく即時3Dストリーミングを提供しており、深度・セグメンテーションAPIとグローバルなABR再生を単一のAPIに統合しています。AIベースのビデオ拡張（画面比率の自動調整）機能も提供しています。

差別化ポイント

True3D Labsは、Owl3DやLeia（Immersity）などの従来型の静的3D変換ツールとは異なり、視線追跡（Eye-tracking）を活用した「ウィンドウモード」と呼ばれるリアルタイム応答型3D技術に特化しています。競合他社が主にVRヘッドセット向けの左右視差（SBS）映像の生成に注力しているのに対し、True3Dはハードウェアに依存しないウェブベースのリアルタイムストリーミングとプロ向けの16ビット深度マップを提供し、汎用性と精度の面で差別化しています。

主な機能

Rushmore AIモデルに基づく2D→3Dリアルタイム変換
毎フレームのリアルタイム深度推定
深度・セグメンテーションAPIとオートスケーリングGPUインフラ
グローバルなABR（適応ビットレート）3Dストリーミング
エンコーディング・ホスティング・ストリーミングを統合した単一のAPI
バッチ推論およびストリーミング推論の両方をサポート

メリット・デメリット

ウェブ検索で収集したユーザーの声をまとめたものです

メリット

専用の専門機器を使用せず、一般的なウェブカメラだけで裸眼3D効果を実現する優れた技術を備えており、リアルタイム処理に最適化されているため、遅延が非常に短い点が特徴です。特に、プロ向けの16ビット深度マップは、従来の8ビットツールで頻繁に発生していたバンディングを大幅に軽減し、高品質なVFX制作を可能にします。元Metaエンジニアが開発しているため技術的な信頼性が高く、ウェブ上ですぐに試せる優れたアクセシビリティも備えています。

デメリット

リアルタイム視線追跡機能の精度は、周囲の照明やウェブカメラの性能に大きく左右され、トラッキングが不安定な場合は画面が揺らいで見えることがあります。また、一般消費者向けの代表的なツールであるOwl3Dなどと比べると、バッチ処理や詳細な編集UIはまだ十分ではありません。AI変換に特有の、被写体周辺に生じる歪みやアーティファクトについても、複雑な背景では依然として改善の余地があります。