World LabsがMarbleを発表：テキスト、画像、動画から3Dワールドを作成・編集できるAIツール

空間情報企業 ワールドラボ は、テキストや画像のプロンプトから3D環境を作成できる、先駆的な生成型マルチモーダルワールドモデル「Marble」をリリースしました。当初は一部のベータ版ユーザー向けに提供されていましたが、現在ではテキスト、画像、動画、ラフ3Dレイアウトなど、幅広い入力タイプをサポートし、インタラクティブな3Dワールドの編集、拡張、組み合わせが可能です。作成したワールドは、ガウススプラット、メッシュ、動画などの形式でエクスポートできるため、ユーザーはより高度な制御と柔軟性で3Dワールドを作成できます。

Marbleツールに加え、World Labsは、ゲーム、VFX、デザイン、ロボティクスなどの分野を横断したコラボレーションと実験を促進するクリエイティブプラットフォーム「Marble Labs」を発表しました。Marble Labsは、ケーススタディ、チュートリアル、ドキュメントを備え、ユーザーが独自の3Dワールドを学習し、共有するためのリソースを提供します。この新しいツールのマルチモーダル機能は、人間の世界認識が視覚、聴覚、触覚、言語といった複数の感覚を統合し、統一されたメンタルモデルを形成するという考えに基づいています。同様に、Marbleの世界モデルは、様々な入力を統合し、新しい情報が追加されるにつれて進化する包括的な3Dワールドを作成するように設計されています。

Marble は次世代の世界モデルとして位置づけられており、ユーザーが詳細な 3D 世界を簡単に生成し、単純なプロンプトから複雑なインタラクティブ編集まで、それを繰り返し正確に改良できるようにすることで、創造の可能性を広げます。

World Labs は、テキスト、画像、ビデオのプロンプトからユーザーが 3D ワールドを作成、カスタマイズ、拡張できるようにします。 

Marbleは、単一の画像または短いテキストプロンプトから完全な3Dワールドを生成できるため、直感的でシンプルな方法で、様々な芸術スタイルで多様なシーンを作成できます。画像プロンプトを利用することで、Marbleを他のAIツールと統合し、生成された画像から3D環境を作成できます。しかし、テキストプロンプトと画像プロンプトは強力である一方で、クリエイティブなコントロールには限界があり、シーンの不足している詳細をMarbleが生成する必要があり、予期せぬ結果につながることがあります。

より高度な制御を求めるユーザーのために、Marbleはマルチイメージプロンプトもサポートしており、異なる画像を組み合わせて統一された3D世界を作り出すことができます。このアプローチにより、ユーザーはより正確な操作が可能になります。 defi様々な角度から見た世界の様相を再現します。マルチイメージプロンプトは現実世界の空間を再現するためにも使用できます。Marbleは、異なる視点から撮影された複数の写真や動画を合成し、実際の場所の3Dモデルを作成します。

Marbleのクリエイティブプロセスは反復的に設計されており、ユーザーは生成後にワールドをさらに洗練させることができます。プラットフォームには、オブジェクトの削除や変更から、ビジュアルスタイルや構造の完全な変更まで、3Dワールドに大小さまざまな調整を加えるためのネイティブ編集ツールが搭載されています。より詳細な制御を実現するために、Marbleは上級ユーザー向けのAI駆動型ツール「Chisel」を導入し、3Dワールドを直接彫刻することができます。シンプルな3Dシェイプやインポートしたアセットを使用してシーンを構築し、テキストプロンプトでビジュアルスタイルを指定できるため、ワールド作成における柔軟性が新たなレベルに引き上げられます。

より大規模で広大なワールドを実現するために、Marble は生成したワールドのサイズを拡大するためのツールを提供しています。ユーザーは特定の領域を拡張することで、これまで精度が不足していた部分のディテールと鮮明度を向上させることができます。さらに、コンポーザーモードでは、複数の生成ワールドを組み合わせてより広い空間を構築できるため、シーンのレイアウトと配置を完全に制御できます。

ワールドを作成したら、Marble は複数のエクスポートオプションを提供します。ガウススプラットは 3D シーンを最高忠実度で表現し、トライアングルメッシュは業界標準の様々なツールで使用できるようにエクスポートできます。Marble はピクセルパーフェクトなカメラコントロールによるビデオレンダリングもサポートしており、ユーザーはワールドをビデオ形式でキャプチャして共有できます。これらのビデオには、ディテールやダイナミックな要素を追加して、より魅力的なものにすることもできます。

Marble Labsは、世界構築の探求と実験のためのプラットフォームを提供し、様々な業界のアーティスト、エンジニア、デザイナーによるクリエイティブかつ技術的なプロジェクトを紹介しています。Marbleは進化を続け、よりインタラクティブな体験へと拡張し、シミュレーション、ロボティクス、その他の高度なアプリケーションへの応用を目指しています。

ゲーム業界やバーチャルリアリティ業界が最初に思い浮かぶことが多いですが、ワールドモデルの潜在的な応用範囲は広大で、これらの分野をはるかに超えています。これらのモデルは、ロボット工学シミュレーション、建築設計、映画の世界構築など、様々な分野に変革をもたらす可能性を秘めています。画像や動画の生成モデルと同様に、ワールドモデルは急速に価値あるツールとなりつつあり、近い将来、幅広い業界のワークフローに統合されることが期待されています。