非常に軽快な動作で「1枚絵を3D化」できるツール『DreamGaussian』が公開されました。
Webから誰でも試すことができ、数分以内に手元の1枚絵を3Dコンテンツに変換できます。
北京大学や百度(バイドゥ)による開発です。
○ Jiaxiang Tang et al., “DreamGaussian: Generative Gaussian Splatting for Efficient 3D Content Creation”
これまで、テキストや一枚絵からの3Dコンテンツ作成には「時間がかかる」「計算負荷が高い」などの課題がありました。有力な技術であるNeRFには、まだ障壁が存在していました。
そこで今回研究者らは、”ガウスプラッティング”という手法によるアプローチを使用して、極めて軽快な動作での3Dコンテンツ生成を実現させました。
■手法の優れている点
① 高い効率性(数分で実行完了)
② 高い品質
③ image to 3Dとtext to 3Dの両方が実行できる
④ 優れたアクセス性(Webに公開)
■NeRFと異なる点
① 生成が速い
② UV空間でのメッシュ抽出とテクスチャの精緻化を行う
③ リアルタイムアプリケーションへの適用に期待できる
■試す方法
① Google Colaboratoryリンクを開く
(今回は1枚絵の3D化を説明)
② “install”から順に実行(▶︎)を行う
③ “upload image”で自身のローカルファイルを選択
④ “render a video for displaying”まで実行する
📄 参照論文
DreamGaussian: Generative Gaussian Splatting for Efficient 3D Content Creation