Meta 悄悄开源了两个惊艳的 3D 重建模型,物体重建+人体重建!

机器学习算法图像处理

前两天AI圈几乎被 Gemini 3 Pro 刷屏,但与此同时,Meta 静悄悄开源了两个我认为更“硬核”的项目。

一个 SAM 3D Objects (从一张照片重建任意物体);另一个 SAM 3D Body (从一张照片重建人体网格模型)。

如果你对 3D 建模、游戏开发、AR/VR、虚拟资产创作有一点点兴趣,这两个项目绝对值得收藏。

很多人做建模时都可能有些许痛点:

  • • 传统 3D 软件学习门槛高
  • • 从多张照片建模很麻烦
  • • 遮挡、杂乱场景经常识别失败
  • • 人体重建尤其难,细节永远不够
  • • ...

而 Meta 的这两套 SAM 3D 系列,彻底把“用照片生成 3D”这件事拉到了实用级。

一、SAM 3D Objects(物体重建3D模型)

SAM 3D Objects 是 Meta 开源的 SAM 3D 系列模型,可实现一张照片重建任意物体(带纹理+高斯泼溅)。

尤其擅长处理真实场景中的复杂情况,即使物体有遮挡、尺寸很小,或者场景很杂乱也能准确重建,还支持同时重建多个物体并保持它们的空间关系。

这就让它在真实应用中非常实用,例如电商、家装、AR 场景、游戏道具等。

此外,项目还提供了在线演示和完整的 Jupyter 示例代码,可以导出 3D Gaussian Splatting(高斯泼溅)格式方便后续处理。

GitHub:https://github.com/facebookresearch/sam-3d-objects

二、SAM 3D Body(人体重建3D模型)

SAM 3D Body 是 Meta 开源的另一款 SAM 3D 系列模型,可实现一张照片重建完整人体(含手脚细节+可驱动骨骼)。

不是粗糙人偶,是带手指、脚部、姿态的完整网格。

它基于 Momentum Human Rig 参数化表示,不仅能准确估计各种复杂姿态,还支持通过 2D 关键点和遮罩提示进行交互式调整,即使在遮挡或多人场景下也表现出色。

GitHub: htttps://github.com/facebookresearch/sam-3d-body

三、Objects + Body = 完整 3D 场景

Meta 官方的建议之一是:

将 SAM 3D Objects 与 SAM 3D Body 一起用。

例如:

  • • 还原真实室内场景
  • • 游戏中构建人物与物体交互
  • • 影视拍摄做人物与道具合成
  • • AR 角色放入真实物体场景
  • • 电商产品 + 模特展示

它们一个负责物体,一个负责人体,可使整个生态直接迈入低门槛 3D 场景构建时代。

四、写在最后

Gemini 3 Pro 的确很强,但属于“通用 AI 能力进化”。

而 Meta 的两个 SAM 3D 系列,是垂直领域的工业级提升。

更重要的是:全部开源、可训练、可扩展、可商用。

3D 内容创作这条赛道,会因为这些模型的出现而变得更开放、更平价、更大众化。

如果你做 3D 相关业务,这两个项目几乎是必须收藏的基础能力。

picture.image

如果本文对您有帮助,也请帮忙点个 赞👍 + 在看 哈!❤️

在看你就赞赞我!

picture.image

0
0
0
0
关于作者
关于作者

文章

0

获赞

0

收藏

0

相关资源
融合开放,新一代边缘云网络平台 | 第 11 期边缘云主题Meetup
《融合开放,新一代边缘云网络平台 》李冰|火山引擎边缘云网络产品负责人
相关产品
评论
未登录
看完啦,登录分享一下感受吧~
暂无评论