All systems operationalAI Agent Automation Platform
English
Language简体中文EnglishSelected

Choose your language

NVComposer

TencentARC/NVComposer

PublisherTencentARC

Download access requirementsMirror available

NVComposer是一种用于新视角合成(Novel View Synthesis,NVS)的生成模型,可从多个无姿态的输入视角图像生成目标新视角图像。 消除对外部对齐过程的依赖,无需显式姿态估计或预重建步骤 通过图像-姿态双流扩散模型,同时生成目标新视角并隐式估计条件图像的相机姿态

Other Models
Model details

模型介绍

中文整理

# NVComposer

Model use case

NVComposer是一种用于新视角合成(Novel View Synthesis,NVS)的生成模型,可从多个无姿态的输入视角图像生成目标新视角图像。

## 主要能力

  • 消除对外部对齐过程的依赖,无需显式姿态估计或预重建步骤
  • 通过图像-姿态双流扩散模型,同时生成目标新视角并隐式估计条件图像的相机姿态
  • 几何感知特征对齐模块从预训练的密集立体模型中提取几何先验
  • 在输入视角数量增加时,合成质量显著提升

## 输入输出

  • 输入:多个无姿态的条件视角图像
  • 输出:生成的目标新视角图像

运行要求

  • 需要GPU进行推理
  • 模型检查点通过HuggingFace Hub下载

基本用法

  • 从HuggingFace Hub下载模型检查点
  • 加载检查点并运行推理
  • 可参考项目演示页面体验模型

限制

  • 模型依赖多视角之间的重叠区域进行隐式对齐
  • 当视角间重叠不足或存在遮挡时,性能可能受到影响

License

原文未提供许可证相关信息。

优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。

你将获得什么

完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。

完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。

使用前须知

运行环境

运行模型需要的设备、工具与依赖,以原作者说明为准。

授权范围

是否允许商用、修改和分发,请查看模型许可证。

闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。

Back to top