Cohere 发布 Rerank 5:聚焦段落级上下文并提供校准分数

溪行者AI 前沿📡 BestBlogs·AI高分精选⭐ 872026-10-23164 阅读💛 289 收藏
Cohere 发布 Rerank 5:聚焦段落级上下文并提供校准分数

📌 One-Sentence Summary

Cohere AI 推出全新检索模型 Rerank 5,提供 Pro 和 Fast 两个版本,具备 Context Focus 功能,可提取相关段落并提供经过校准的相关性分数,旨在提升基于 LLM 的应用的搜索效率与准确性。

📝 Summary

Rerank 5 是 Cohere 检索技术的一次重大升级,提供两款不同模型:Pro 注重高质量排序,Fast 则强调低延迟和高吞吐量。该模型支持 32K 上下文窗口和 100 多种语言,并能对半结构化数据重新排序。主要创新包括 Context Focus,可从文档中提取特定的相关段落;以及经过校准的相关性分数,可用概率衡量文档的实用性。

💡 Main Points

双模型策略

Cohere 提供 Rerank 5 的两个版本:Pro 面向复杂查询和长文档,优先保证排序质量;Fast 则针对速度和低延迟进行优化,适用于搜索智能体等需要高吞吐量的应用。

Context Focus 功能

这项可选功能可以识别并从文档中提取特定的相关段落(字符范围)。它尤其适合减少发送给 LLM 的上下文量,从而提高效率,并有望降低成本。

经过校准的分数

Rerank 5 提供经过校准的相关性分数,可将其理解为概率(例如,0.7 的分数表示内容有 70% 的可能性具有实用价值)。这种校准让开发者能够设置动态阈值来筛选结果,而不必依赖固定的 top-k 限制。

基准测试表现

根据 Cohere 的内部基准测试,Rerank 5 Pro 在 BRIGHT 和 ViDoRe V3 等多个关键数据集上的表现优于竞争产品。该模型在多种语言和文档类型上均表现出色,包括经过解析的 PDF。

💬 Key Quotes

Rerank 5 以两款模型的形式推出。Pro 面向推理需求较高的查询以及篇幅较长、领域特定的文档,力求提升排序质量。Fast 则面向需要执行大量搜索的智能体,主打低延迟和高吞吐量。

Context Focus 是一项默认关闭的可选功能。一次 Rerank 调用即可返回文档分数以及经过评分的字符范围。每个范围都带有指向原文的起始和结束偏移量。

Rerank 5 在两项测试中的得分都约为 0.06。Voyage AI Rerank 3 的得分分别为 0.234 和 0.307,Rerank 4 Pro 的得分分别为 0.384 和 0.309。实际应用中,开发团队可以按阈值筛选,而不必使用固定的 top-k。

📊 Article Meta

AI Screening: 87

Source: MarkTechPost

Author: Michal Sutter

Category: 人工智能

Language: 英文

Read Time: 5 min

Word Count: 1035

Tags:

AI 与智能应用 , 模型发布 , 机器学习 , RAG / 检索增强 , 模型评测与基准

#AI 与智能应用# 模型发布# 机器学习# RAG / 检索增强# 模型评测与基准

文章评论(12)

风倚栏23 天前

很有价值的分享,感谢整理。

回复
杨丽华23 天前

这个比较实用,已转发给同事。

回复
蓝归舟23 天前

楼主辛苦了,内容很有参考价值。

回复
吴超23 天前

整理得太全面了,省了我不少时间。

回复
武磊23 天前

这个观点很中肯,深有同感。

回复
晨沐雨23 天前

这篇文章分析得很透彻,收藏了!

回复
石佳琪23 天前

实话,说的不明不白

回复
暮拾贝23 天前

很有价值的分享,感谢整理。

回复
郭超23 天前

看标题就点进来了,内容果然没让人失望。

回复
龙文博23 天前

这个比较实用,已转发给同事。

回复
晨沐雨23 天前

写得挺用心的,支持一下。

回复
杨丽华23 天前

看完了,收获满满,期待更多更新。

回复