模型介绍
中文整理立知多模态重排序模型 Lychee-rerank-mm
Lychee-rerank-mm 是基于 Qwen2.5-VL-Instruct 基础模型开发的最新通用多模态重排序模型,适用于图文多模态检索任务中的重排序场景。立知多模态重排序模型由哈工大深圳自然语言处理团队联合开发,开源 7B 参数版本。
Lychee-rerank-mm** 立知多模态重排序模型:
模型类别: Multimodal Reranking
语言支持: en
参数大小: 7B
参数精度: BF16
模型列表
Model Type Models Size Instruction Aware
- ----------------------- ---------------------- ------ ----------------------
Multimodal Reranking lychee-rerank-mm 8.29B Yes
- *注意**:
- Instruction Aware 表示重排序模型是否支持根据不同的任务定制输入指令。
- 我们的评估表明,对于大多数下游任务,使用指令(instruct)通常比不使用它们能提高一定性能。因此,我们建议开发者为他们的任务和场景创建定制化的指令。
使用方法
📌 **提示**: 我们建议开发者根据特定场景、任务和语言定制 instruction 。
Transformers Usage
Evaluation
Model Param ALL (40) T→T (14) I→I (1) T→I (4) T→VD (5) I→T (5) T→IT (2) IT→T (4) IT→I (2) IT→IT (3)
- ------------ ------- ---------- ---------- --------- --------- ---------- --------- ---------- ---------- ---------- -----------
GME-2B 2.21B 52.54 49.59 30.75 48.46 66.39 52.62 77.02 39.88 36.70 66.89
Qwen3-Reranker 4.02B -- 60.49 -- -- -- -- -- -- -- --
Jina-rerank-m0 2.21B 54.36 55.36 27.50 59.46 73.13 55.43 74.95 27.82 37.65 51.54
MonoQwen2-VL-v0.1 2.21B 44.20 48.89 12.59 58.73 71.29 19.62 76.46 14.35 31.75 35.83
- *lychee-rerank-mm-3B** 3.75B 61.40 59.22 29.76 58.85 72.38 63.06 81.96 48.81 43.97 79.08
- *lychee-rerank-mm-7B** 8.29B 63.85 61.08 32.83 61.18 72.94 66.61 84.55 53.29 47.39 82.19
Citation
如果您发现我们的工作有帮助,请考虑引用我们的论文。
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行模型需要的设备、工具与依赖,以原作者说明为准。
是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
资料或下载有问题?
登录后可提交反馈。
