←新闻详情

Rohan Paul更新于 10月27日 21:20

Hi3D 开源 Hi3D v1.0 图生3D模型

This is so good for open 3D generation. last year’s cutting-edge technology, open-sourced this year

AI 导读

Hi3D 将原 Sparc3D 以 Hi3D v1.0 之名开源,这是一个图生3D模型,代码与权重已发布在 GitHub 和 Hugging Face,可商用。模型接收图像和另一模型生成的粗网格,在 512、1024、1536 三级分辨率上分三遍细化,采用稀疏体素和自剪枝解码器,训练数据从 500K 增至约 2M 个3D资产。在 8 个对比模型中,其多视角保真度 0.75、细节丰富度 0.841 均为最高,3D 打印切片成功率 90%,13 位专业3D人士的 562 次并排评分中 83.5% 选择它;模型仅输出形状不含颜色纹理,需 NVIDIA GPU,商用免费上限为月活 20 万或月收入 100 万美元。

推荐理由

AI 评分 52

原文给出了多视角保真度、细节丰富度和打印切片成功率等对比数据,可据此判断开源图生3D模型的当前水平。

主题

标签

引用

Hi3D

@Hi3D_AI

https://t.co/FlZfsBfs0T

查看原文

https://t.co/FlZfsBfs0T

查看原帖

正文 · AI 翻译

这对开放3D生成来说太棒了。去年的尖端技术,今年就开源了

@Hi3D_AI 已开源 Hi3D v1.0(原 Sparc3D),这是一个图生3D模型,从各个角度看都保持完整,而且在发布前就已经在 Hi3D 的实际产品中运行。

> 任何人都可以在自己的服务器上私密运行它,将其接入内部系统,并在此基础上为所在行业构建工具和应用。 > 代码和权重已在 GitHub 和 Hugging Face 上发布,可免费使用,包括商用,

大多数图生3D模型只按正面效果来评判,因此背面、底部以及翅膀、犄角、把手等细薄部位往往会出现糊成一团、破损或缺失的问题。

Hi3D v1.0 接收图像外加一个粗略的草稿形状(来自另一个模型的“粗网格”),并分3遍进行细化,分辨率分别为 512、1024 和 1536。

这里的分辨率是指物体周围的空间被切分成称为体素的微小立方体,基本上就是3D像素,而 1536 意味着每边有 1536 个立方体。

完整的网格将包含超过 36 亿个立方体,因此模型采用稀疏方式工作,只处理靠近表面的立方体,跳过空白区域和内部的实体。

在每一遍中,“自剪枝”解码器以 8 倍更精细的尺度重建表面,并丢弃最终为空的立方体。

训练数据从 50 万个增加到约 200 万个精选3D资产。

在与另外 8 个图生3D模型(包括 TRELLIS.2 和 Hunyuan3D-2.1)的对比中,它在多视角保真度(0.75)上得分最高,该指标检查形状在 6 个相机角度下是否保持一致且不破损;细节丰富度(0.841)也最高,该指标评估精细的表面起伏和小部件。

它还保持了 90% 的切片成功率,即3D打印机软件能够将其切分为打印层的模型比例,而同样采用 1536 分辨率的唯一其他模型 Pixal3D 仅为 7%,TRELLIS.2 为 17%。

在 13 位具备专业3D经验的人士进行的 562 次并排评分中,Hi3D v1.0 有 83.5% 的情况下被选中。

它仅输出形状(不含颜色或纹理),需要 NVIDIA GPU,代码和权重可免费商用,上限为月活用户 20 万或月收入 100 万美元。

Hi3D 1.0 现已开源

https://t.co/AaRHAfa3Bu

来源

Rohan Paul