介绍
什么是重排器?
搜索的本质就是快速有效地找到最用户想要的结果。上世纪的BM25 或 tf-idf 等关键字匹配算法已成熟用在各类搜索结果进行排名。近几年来,基于向量模型的余弦相似度大放异彩,已在许多向量数据库成为标配。但这些方法的本质都相对简单,经常会忽略掉自然语言的微妙之处,最重要的是,忽略掉文档和查询意图之间的关联信息。
“重排模型”由此而生!重排模型实际是一种高级AI模型,它从搜索中获取初始候选集(通常由基于向量/基于词元的搜索结果提供)并重新评估它们与用户搜索意图之间的相关性。重排器超越了文字的表层匹配,探索查询和文档内容之间更深层次的交互。
jina-reranker-v2-base-multilingual
BAAI/bge-reranker-v2-m3
最后修改时间: 2 天前