XNews

Keenable Search 1.0、プロモードとリアルタイムモードでArtificial Analysis Search Indexの首位に

Keenable Search 1.0、プロモードとリアルタイムモードでArtificial Analysis Search Indexの首位に

Keenable Search 1.0は、Artificial Analysis Search Indexにおいてプロモードが83点で1位、リアルタイムモードが82点で2位となり、80点のExaとPerplexityを上回った。Stirrupエージェントハーネスで1,700の検索重視タスクをベンチマークした結果、両モードはDeepSearchQAで88 F1を記録し、1,000検索あたり4ドルでタスクあたり約0.040ドルのコストは、ボード中央値より3分の1以上低い。

イベントのバージョン 1.

Key insights

インデックススコアで首位

Keenable Search 1.0は、Artificial Analysis Search Indexにおいてプロモードが83点、リアルタイムモードが82点を記録し、8月時点の両モード67点から向上した。両モードは、Exa(auto、dynamic highlights)とPerplexity(medium)の80点を上回っている。

DeepSearchQAで強力な結果

Keenableの両モードはDeepSearchQAで88 F1を記録し、26モデル中1位と2位となり、86点のExaを上回った。プロモードはまた、BrowseCompで87%、AA-Omniscienceで73%を記録し、それぞれ1位となった。

タスクあたりの低コスト

1,000検索あたり4ドルで、Keenableは両モードともタスクあたり約0.040ドルのコストとなり、ボード中央値の0.063ドルより3分の1以上低い。

高速な検索時間

リアルタイムモードはタスクあたり2.3秒、プロモードは3.0秒の検索時間を要し、ボード中央値の12.5秒に対して大幅に短い。各検索の平均応答時間は、リアルタイムモードが約330ms、プロモードが約390msであった。

ベンチマークの設定

テストは、StirrupエージェントハーネスでGPT-5.6 Luna(medium)を使用し、Keenable Search APIのリアルタイムモードとプロモードを1,700の検索重視タスクに適用して実施された。テストではKeenableの検索カードは無効化された。

Source posts