Cohereが文書検索AIを発表、必要な部分だけ抜き出し利用費用を大幅削減へ
- Cohereが企業向け検索モデル「Rerank 5」を発表し、高精度なProと高速・安価なFastの2種を提供。
- 文書内の重要箇所だけを特定する新機能を備え、AIへ送る文脈データを絞り込んで処理費用と遅延を抑制する。
- 関連度スコアを確率として扱えるよう調整したほか、日本語を含む多言語や金融などの専門分野で高精度を記録。
Cohereは2026年10月21日、企業向け検索モデルの最新世代となる「Rerank 5」を発表した。高精度を重視した「Rerank 5 Pro」と、処理速度とコスト効率を重視した「Rerank 5 Fast」の2つの階層を用意する。Cohere APIやModel Vault、Microsoft Foundry、Amazon SageMakerなどを通じて一般提供を開始した。APIの利用価格は100万トークンあたりProが0.05ドル、Fastが0.02ドルに設定されている。
必要な記述のみを抽出する新機能「Context Focus」
AIエージェントが長大な文書を検索する際、後段の大規模言語モデル(LLM)へ渡す文脈情報が増えることで、トークン利用費用や応答遅延が増加し、不要な情報が混ざることで回答精度が下がる課題が存在した。Rerank 5では新機能「Context Focus」が導入され、文書全体や固定ブロック単位ではなく、文書内で最も関連性の高い特定の記述箇所を特定して提示できる。30の質問応答データセットを用いた検証では、取得した文脈を半分に削っても回答品質の低下は2ポイント(96%を維持)にとどまり、4分の3を削った場合でも87%の品質を維持できたという。
ベンチマーク首位と多言語・日本語対応
検索精度の公開ベンチマークにおいて、Rerank 5 Proは「ViDoRe V3」「nanoMTEB」「BRIGHT」「BEIR」でテストされた競合モデルを上回る結果を示した。評価対象となった46の複合データセットのうち39で1位、43で2位以上を獲得した。特に論理的な推論が求められる検索ベンチマーク「BRIGHT」では82.2を記録し、前世代の「Rerank 4 Pro」を12.4ポイント、Voyage AIの「Rerank 3」を5.8ポイント上回った。言語別評価では、日本語においてVoyage AI Rerank 3を2.7ポイント上回るなど、評価対象となった非英語19言語中14言語で首位を獲得した。
処理速度に特化したFastと確率に基づくスコア判定
速度重視のRerank 5 Fastは、NVIDIA A100 GPU環境で毎秒約187件の標準文書(1,000トークン)を処理可能で、Proと比べて2.9倍のスループットと約3倍の応答速度を実現する。さらに、Rerank 5では算出される関連度スコアが調整(キャリブレーション)されており、例えば「0.7」というスコアは文書が有用である確率が70%であることを直接示す。有用かどうかの判断基準値はProが0.50、Fastが0.45となっており、開発者は固定件数を取り出すのではなく、確率の閾値に基づいてAIに渡す情報を絞り込める。
Rerank 5は既存のキーワード検索やベクトル)に変換し、意味の近さをもとに情報を探す技術。キーワードが完全に一致しなくても、文脈やニュアンスが似ているデータを見つけ出せる。">ベクトル検索と併用でき、再インデックス化を伴わずに導入できる。同社はまた、文書解析、埋め込み、ハイブリッド検索、リランキングを一体化した基盤「Compass Cloud」のプライベートベータ版の提供も開始した。
この記事は Cohere 公式ブログの発表を AI が日本語に要約したものです。正確な内容は原文をご確認ください。
アプリで開く