Cohere выпустила Rerank 5: контекстные фрагменты и калиброванные оценки релевантности
Cohere AI анонсировала Rerank 5 — новое поколение моделей реранжирования, которые переупорядочивают результаты поиска перед подачей в LLM. Доступны два таргетных варианта: rerank-v5.0-pro, ориентированный на качество ранжирования сложных запросов и длинных документов, и rerank-v5.0-fast — для низкой задержки и высокой пропускной способности в агентных сценариях. Обе модели поддерживают более 100 языков, окно в 32K токенов и умеют работать с полуструктурированными данными (JSON, таблицы, YAML).
Главные нововведения — Context Focus и калиброванные оценки релевантности. Context Focus (опционально, выключен по умолчанию) возвращает не только оценку документа, но и конкретные символьные диапазоны (start/end offset), где находится релевантный фрагмент. Cohere тестировала функцию на 30 датасетах QA: удаление половины текста сохраняло 96% качества ответа, а при удалении 75% — 87%. Калиброванные оценки (например, 0,7 = 70% вероятности, что документ полезен) позволяют разработчикам отсекать кандидаты по порогу, а не по фиксированному top-k, и детектировать ситуации, когда ничего релевантного не найдено. Ошибка калибровки (ECE) составила 0,06 против оценок людей, тогда как у Voyage AI Rerank 3 — 0,234, у Rerank 4 Pro — 0,384.
Cohere приводит собственные бенчмарки (метрика RCP-nDCG@10). Pro занимает первое место в 39 из 46 композитных датасетов. На ViDoRe V3 — 92,2, на BEIR — 90,4, на BRIGHT — 82,2 (на 12,4 пункта выше Rerank 4 Pro), на nanoMTEB — 87,3. Fast обходит Lite-версию Voyage AI Rerank 3, Qwen3-Reranker-8B и Rerank 4 Pro по всем четырём бенчмаркам. При этом медианная задержка Pro составляет 11,7 с на 96 документов против 4,1 с у Fast. В тестах на парсенных PDF (47 датасетов) Pro показал 89,9, Fast — 88,5, Voyage AI Rerank 3 — 88,4.
Модели доступны через hosted API, Model Vault, Microsoft Foundry, Amazon SageMaker, частные VPC и on-prem. Для перехода с предыдущих версий Rerank не требуется переиндексация — достаточно сменить параметр model. Размер не раскрывается. Открытых весов нет. Для инференса Cohere использует один NVIDIA A100.