All systems operationalAI Agent Automation Platform

GeometryCrafter

TencentARC/GeometryCrafter

发布机构TencentARC

下载访问条件国内镜像可用

GeometryCrafter是一种从开放世界视频中估计时间一致、高质量点图的新方法,可促进3D/4D重建、基于深度的视频编辑或生成等下游应用。 从视频中估计时空一致的点图,支持3D/4D重建和深度视频编辑生成等应用。 标准推理:约1.27 FPS,需要约40GB显存(110帧,1024x576分辨率)

Other Models
模型详情

模型介绍

中文整理

# GeometryCrafter 模型卡片

Model use case

GeometryCrafter是一种从开放世界视频中估计时间一致、高质量点图的新方法,可促进3D/4D重建、基于深度的视频编辑或生成等下游应用。

## 主要能力

从视频中估计时空一致的点图,支持3D/4D重建和深度视频编辑生成等应用。

## 输入输出

输入:开放世界视频

输出:时间一致的高质量点图

运行要求

推理速度与显存需求:

  • 标准推理:约1.27 FPS,需要约40GB显存(110帧,1024x576分辨率)
  • 确定性变体:约1.50 FPS
  • 低分辨率处理:约2.49 FPS,需要约22GB显存

基本用法

  • 克隆代码仓库
  • 安装依赖(参考requirements.txt)
  • 运行推理代码处理演示视频
  • 使用Viser可视化预测的点图
  • 也可使用本地Gradio演示

限制

模型仍在积极开发中。

许可证

如需商业许可或其他相关咨询,请联系wbhu@tencent.com。

优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。

你将获得什么

完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。

完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。

使用前须知

运行环境

运行模型需要的设备、工具与依赖,以原作者说明为准。

授权范围

是否允许商用、修改和分发,请查看模型许可证。

闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。

Back to top