Model details
模型介绍
中文整理FreeSplatter
Model use case
FreeSplatter是一个用于稀疏视角3D重建的神经网络模型,能够从无相机标定的稀疏视角图像生成高质量3D高斯表示,并在数秒内恢复相机参数。
主要能力
基于Transformer架构的端到端前馈重建框架,通过自注意力机制处理多视角图像token并解码为像素级3D高斯原语。预测的3D高斯原语统一置于参考坐标系中,支持高保真3D建模和即时相机参数估计。支持目标级和场景级两种模型变体。在重建质量和相机姿态估计精度方面均优于现有先进基线方法。可用于增强文本/图像到3D内容创建等下游应用的生产效率。
输入输出
输入:稀疏视角的2D图像(无需相机内外参标定信息)。输出:统一参考坐标系下的像素级3D高斯原语、估计的相机内外参数。
运行要求
模型以端到端前馈方式运行,推理速度为秒级。具体硬件配置要求需参考项目官方文档。
基本用法
模型接收无标定的稀疏视角图像,直接输出3D高斯表示和相机参数。可通过项目GitHub仓库获取模型权重和推理代码。
限制
模型依赖稀疏视角输入,视角数量和图像质量会影响重建效果。具体性能指标需参考项目文档中的实验评估部分。
License
需参考项目GitHub仓库中的开源许可证声明。
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行环境运行模型需要的设备、工具与依赖,以原作者说明为准。
授权范围是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
Problem with the information or download?
Sign in to submit feedback.