模型详情
模型介绍
中文整理# GeometryCrafter 模型卡片
Model use case
GeometryCrafter是一种从开放世界视频中估计时间一致、高质量点图的新方法,可促进3D/4D重建、基于深度的视频编辑或生成等下游应用。
## 主要能力
从视频中估计时空一致的点图,支持3D/4D重建和深度视频编辑生成等应用。
## 输入输出
输入:开放世界视频
输出:时间一致的高质量点图
运行要求
推理速度与显存需求:
- 标准推理:约1.27 FPS,需要约40GB显存(110帧,1024x576分辨率)
- 确定性变体:约1.50 FPS
- 低分辨率处理:约2.49 FPS,需要约22GB显存
基本用法
- 克隆代码仓库
- 安装依赖(参考requirements.txt)
- 运行推理代码处理演示视频
- 使用Viser可视化预测的点图
- 也可使用本地Gradio演示
限制
模型仍在积极开发中。
许可证
如需商业许可或其他相关咨询,请联系wbhu@tencent.com。
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行环境运行模型需要的设备、工具与依赖,以原作者说明为准。
授权范围是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
资料或下载有问题?
登录后可提交反馈。