Keenable Search 1.0、プロモードとリアルタイムモードでArtificial Analysis Search Indexの首位に

Keenable Search 1.0は、Artificial Analysis Search Indexにおいてプロモードが83点で1位、リアルタイムモードが82点で2位となり、80点のExaとPerplexityを上回った。Stirrupエージェントハーネスで1,700の検索重視タスクをベンチマークした結果、両モードはDeepSearchQAで88 F1を記録し、1,000検索あたり4ドルでタスクあたり約0.040ドルのコストは、ボード中央値より3分の1以上低い。
イベントのバージョン 1.
Key insights
インデックススコアで首位
Keenable Search 1.0は、Artificial Analysis Search Indexにおいてプロモードが83点、リアルタイムモードが82点を記録し、8月時点の両モード67点から向上した。両モードは、Exa(auto、dynamic highlights)とPerplexity(medium)の80点を上回っている。
DeepSearchQAで強力な結果
Keenableの両モードはDeepSearchQAで88 F1を記録し、26モデル中1位と2位となり、86点のExaを上回った。プロモードはまた、BrowseCompで87%、AA-Omniscienceで73%を記録し、それぞれ1位となった。
タスクあたりの低コスト
1,000検索あたり4ドルで、Keenableは両モードともタスクあたり約0.040ドルのコストとなり、ボード中央値の0.063ドルより3分の1以上低い。
高速な検索時間
リアルタイムモードはタスクあたり2.3秒、プロモードは3.0秒の検索時間を要し、ボード中央値の12.5秒に対して大幅に短い。各検索の平均応答時間は、リアルタイムモードが約330ms、プロモードが約390msであった。
ベンチマークの設定
テストは、StirrupエージェントハーネスでGPT-5.6 Luna(medium)を使用し、Keenable Search APIのリアルタイムモードとプロモードを1,700の検索重視タスクに適用して実施された。テストではKeenableの検索カードは無効化された。