realflow插件怎么用

量子位QbitAI

VAST团队再开源力作：全新3D生成工具Tripo Doodle，让建模像涂鸦一样简单！

Tripo Doodle（内部代号TripoSG Scribble），这款能够将简单的2D草图和文本提示实时转化为精细的3D模型的神奇工具，已经引起了广大科技爱好者的关注。它不仅简化了传统3D建模的繁琐过程，更在初期“打形”阶段展现出极大的优势。目前，该项目的关键组件已经开源。

Tripo Doodle的用户可以：

直观绘制（Sketch Intuitively）：在画布上自由发挥，画出简单的 2D 形状和线条。

添加文本提示（Add Text Prompts）：通过文字输入，赋予模型语义信息或特定属性。

在SIGGRAPH Asia 2024 Real-Time LIVE!的首次亮相中，Tripo Doodle展示了一个充满无限可能的未来——3D建模可以变得像2D涂鸦一样流畅自然、触手可及。

那么，Tripo Doodle是如何实现这一性创新的呢？它基于VAST旗下的TripoSG基础模型，并巧妙地利用并扩展了其能力。具体来说，TripoSG是其底层引擎，一款图像到3D（Image-to-3D）形状生成模型。该模型采用了大规模整流流Transformer架构，能在精选数据集上进行训练，直接从条件输入生成高保真3D网格。其内部通过定制的VAE管理精确的符号距离函数表征。

Tripo Doodle的核心突破在于增强了TripoSG模型，使其能够理解并同时融合草图和文本两种输入模态。其中，草图引导提供了强几何约束，定义了3D模型的核心形状、结构和姿态；文本引导则负责语义理解，影响物体的类型、风格和特征。为了实现近乎实时的生成速度，Tripo Doodle还采用了CFG Distillation等优化技术。

以下实例突显了Tripo Doodle如何将从概念到初步3D可视化的时间缩短至秒级：

轻松创建：无论是植物、桌子、戒指还是怪兽，简单的几笔草图都能即时转化为3D物体。

创意探索：“Randomize”功能让用户在同一份草图和文本输入下，快速浏览多种不同的3D解释。

易用性与效率：在“Doodle 1v1”环节中，观众成员在30秒内创作怪兽，证明了其直观性和高效性。

TripoSG-Scribble抱抱脸：huggingface.co/spaces/VAST-AI/TripoSG-scribble

TripoSG抱抱脸：huggingface.co/spaces/VAST-AI/TripoSG

TripoSG GitHub：/VAST-AI-Research/TripoSG

TripoSG arXiv论文链接：/abs/2502.06608

——结束——