· TongFlow Team · お知らせ  · 5 min read

TongFlow が TripoSplat を統合 — 1 枚の画像から 3D ガウシアンスプラットへ

公式プラグイン tongflow-modal-triposplat が、1 枚の画像を高品質な 3D ガウシアンスプラットに変換。Modal 経由で GPU 上で実行し、v0.1.2 では結果をキャンバス上で自由に回して確認できます。

公式プラグイン tongflow-modal-triposplat が、1 枚の画像を高品質な 3D ガウシアンスプラットに変換。Modal 経由で GPU 上で実行し、v0.1.2 では結果をキャンバス上で自由に回して確認できます。

TongFlow が TripoSplat を統合しました。 公式プラグイン tongflow-modal-triposplat は、1 枚の画像を 3D ガウシアンスプラットに変換します——写真やレンダー画像をキャンバスに置くと、回転・ズーム・書き出しができる .splat が返ってきます。GPU は Modal が提供します。

TripoSplat で 1 枚の画像を 3D ガウシアンスプラットに

何ができるか

TripoSplat(VAST-AI-Research/TripoSplatTripoAI 製)は、1 枚の 2D 画像から 3D ガウシアンスプラットを再構成するフィードフォワードモデルです。プラグインはこのモデルを、すぐに実行できる 1 つのノードとして組み込みます。

  • 画像 → 3D モデル(image-gen-model——画像を 1 枚入れると、3D ガウシアンスプラットが返ります。

背景除去は内蔵されているので、写真・イラスト・生成フレームのいずれもそのまま使えます——手作業のマスク不要です。ガウシアン数(最大 262,144)を指定して、画質とレンダリング/保存コストのバランスを調整できます。出力は標準の .splat で、任意のガウシアンスプラットビューアで開けます。

1 枚の画像から再構成された緻密な 3D シーン

キャンバス上で確認 — v0.1.2 の新機能

結果を見るために TongFlow を離れる必要はもうありません。v0.1.2 から、3D モデルノードは SparkJS によってガウシアンスプラットをアプリ内でレンダリングします。トラックボールカメラで好きな方向に回転(極のロックなし)でき、ズームもパンも自在です。ノードのプレビューでも全画面ビューアでも、キャンバス上でそのまま操作できます。レンダリングはオンデマンドなので、26 万スプラットのアセットでも滑らかです。他で使いたい場合は .splat / .ply を書き出し、SuperSplatSpark で開いてください。

単一 GPU に収まる設計

プラグインは TripoSplat のコンパクトでほぼ依存ゼロのパイプラインを同梱し、Modal 上の単一の A100-40GB で実行します。重みは共有ボリュームへ一度取得すればよく、その後は 1 枚の画像がエンドツーエンドで数分で仕上がります(コールドスタート時のモデル読み込みを含む)。ガウシアン数、サンプラーのステップ数、ガイダンスなどのチューニング項目はプラグインの README に記載されています。

無料で始める

プラグインは Modal 上で動作し、新規アカウントには毎月最大 $30 分の無料 GPU クレジットが付与されます(A100 クラスの実機)。GPU を持っていなくても、たくさんの画像をスプラット化できる量です。さらに VAST-AI/TripoSplat の重みは公開(MIT)なので、TongFlow の設定に必要な認証情報は 2 つだけ:MODAL_TOKEN_IDMODAL_TOKEN_SECRET。ゲート付きモデルのアクセス申請は不要です。

試してみる

  1. プラグインをインストール——TongFlow でプラグインマネージャを開き、tongflow-modal-triposplat をインストール。再起動なしですぐ使えます。
  2. Modal トークンを追加——設定に入力します。
  3. 画像をキャンバスに置き画像 → 3D モデルノードをつないで実行。初回利用時にプラットフォームが自動で Modal にデプロイし、結果がその場でレンダリングされます。

TongFlow は初めてですか? まずは v0.1.0 リリース記事をどうぞ。デスクトップアプリは Releases から入手できるほか、ホスト版スタジオ app.tongflow.com ならインストールなしで始められます。役に立ったら、GitHub でのスターが大きな励みになります。

想像を広げ、アイデアを伸ばそう——ぜひお試しを。

TongFlow の新機能 — v0.1.2 以降のすべて

最初のオープンソースリリース以降、TongFlow は新しいモデル、新しいノードタイプ、そして刷新されたキャンバスを届けてきました。v0.1.2 から v0.1.8 までのすべてのアップデートをまとめてご紹介します。

TongFlow がオープンソース化 — v0.1.0 リリース

TongFlow がオープンソースになりました。最初の公開リリース v0.1.0 では、デスクトップアプリ、プラグイン SDK、公式プラグインカタログを同時に公開——1 枚のキャンバスでマルチモーダル GenAI ワークフローを組むために必要なものが、すべて揃っています。