ScanTo3D | OpalAi 对比 DreamFusion

OpalAi 的 ScanTo3D 是一款适用于 iPhone Pro 和 iPad Pro 的 3D 生成应用，可将 LiDAR 走查扫描转换为平面图、点云和 BIM 准备模型。您只需用手机走过空间，使用 InstaCAD 或 LiDAR 模式捕捉几何信息，并导出 OBJ、GLTF、STL 和 USDZ 等格式的数字孪生。该应用面向需要竣工文档但不想携带专用扫描仪的物业所有者、承包商和设施团队。

与租用三脚架 LiDAR 硬件相比，ScanTo3D 用设备要求和可选云处理替代了设备成本。InstaCAD 模式可实时构建面积小于 2,000 平方英尺空间的二维平面图和三维 CAD 模型，而 LiDAR 模式则支持更大环境，虽无硬性面积上限，但 OpalAi 建议每次扫描面积保持在约 5,000 平方英尺以内。

现场经理、房地产团队和建筑销售人员使用该应用快速生成平面图、符合 ANSI 标准的总居住面积计算及带纹理的 3D 导出。OpalAi 声称生成的平面图和 BIM 对象误差小于每 30 英尺 1 英寸，准确率约为 98%。

DreamFusion 使用预训练的二维文本到图像扩散模型，而非三维训练数据，从文本描述生成三维物体。它优化神经辐射场（NeRF），使随机角度的二维渲染与 Imagen 对提示的预期相符。结果是一个可重新点亮的三维资产，可以从任意角度查看、导出为网格或放置在场景中。

与需要大型标注三维数据集的流程不同，DreamFusion 使用评分蒸馏采样将二维扩散先验转化为三维优化器。这绕过了大规模三维去噪的基础设施缺失。仅凭 SDS 即可获得合理的外观；DreamFusion 通过正则化器在 Lambertian 着色下实现更干净的法线、深度和表面几何。

研究人员、探索生成式工作流的三维艺术家以及研究文本到三维的机器学习工程师，将 DreamFusion 作为 Google Research 和加州大学伯克利分校的参考实现。项目页面提供了数百个生成资产的可搜索画廊，并引用了 2022 年的 arXiv 论文。