XNews

Gemini 3のパフォーマンスとユーザーフィードバック

Gemini 3のパフォーマンスとユーザーフィードバック

複数のユーザーが、Gemini 3.0 Proの「思考パートナー」機能と検索品質に関して相違があると報告しています。- Yuchen Jinは、Gemini 3 Deep ThinkがGemini 3 Proを上回ると報告しています。- 提供されたベンチマークスコア:Humanity’s Last Exam 41%。- 提供されたベンチマークスコア:ARC-AGI-2 45.1%。- 一部の意見では、GoogleはTransformerの導入以来、AIのリーダーシップを取り戻したと主張しています(上記のスコアを引用)。- 多くのユーザーがGemini 3.0 Proを優れた「思考パートナー」と見なしています。- ユーザーの例:deep-thinkプロンプトを通じて得られた高品質な思考ガイダンスと回答。- 多くのユーザーがGemini Proの利点を挙げています:マルチモーダル機能、YouTubeリンクを直接読み取る能力。- 多くのユーザーがGemini Proの利点を挙げています:長いコンテキストサポート、出力の長さ、Google検索との統合。- 一部のユーザーは、Geminiの検索と回答には依然として深刻な幻覚の問題があると指摘しています。- 一部のユーザーは、Geminiの検索品質がChatGPT Searchよりも低いと考え、Deep ResearchとDeep Think機能が混同されていると述べています。- 日常的にGeminiを多く使用しているユーザーも、コーディングにはCodex/ChatGPTのサブスクリプションを好むと述べています。- 一部のユーザーはサブスクリプションの選択について言及しています:Geminiアプリの体験はAI Studioより劣り、Gemini 3.0 Proには無料プランもあります。- 一部のユーザーは例を挙げています:Geminiを使用して複雑な中央銀行と財政の知識をアニメーション説明に統合する試み。

Key insights

Gemini 3/Deep Thinkは多くのユーザーによって優れた「思考パートナー」と評価されています

多くのユーザーが、Gemini 3.0 ProまたはそのDeep Thinkモードが思考を導き、深い議論を展開し、長文を生成する点で優れていると表現しています。ユーザーの例には、シンプルなプロンプト「deep-think this」を使用して高品質で構造化された思考の進化提案を得ることが含まれます。一部のユーザーは、数年のLLMの実践に基づき、Gemini 3.0 Proを最高の思考パートナーと評価し、思考効率を高めるために毎日の対話を推奨しています。

ベンチマークデータとパフォーマンスの主張

一部のユーザーは、Googleのリーディング主張を支持するためにテストスコアを引用しています。具体的なベンチマークデータを引用してGeminiのパフォーマンスを評価するユーザーがいます:Humanity’s Last Examのスコアは41%、ARC-AGI-2のスコアは45.1%、これによりGoogleはTransformer以来AI分野でのリーダーシップを取り戻したと主張しています。この主張は、ユーザーが公開したスコアとモデルの比較に基づいています。

検索と取得機能には依然として幻覚と品質の問題が存在する

複数のユーザーが比較テストで指摘したところによると、Gemini 3.0 Proは以前のバージョンに比べて検索能力が改善されたものの、依然として深刻な幻覚が存在し、検索結果の品質はChatGPT Searchよりも低いと見なされています。ユーザーは、GeminiがDeep ThinkingモードとDeep Research機能を混同し、誤った回答を導く具体的な現象を説明しています。

Gemini Proの具体的な利点:マルチモーダル、長いコンテキスト、Google検索との統合

複数のユーザーフィードバックがGemini Proの実際の利点を挙げています:マルチモーダルサポート(YouTubeリンクを直接読み取る機能を含む)、長いコンテキストとより長い出力、Google検索との統合、優れた執筆パフォーマンス、および使用制限が少ないことです。一部のユーザーは、これらの機能によりGeminiアプリが特定のシナリオで代替ツールよりも優れていると主張していますが、他のユーザーは特定のタスクにAI Studioや他のモデルを使用することを好んでいます。

ツールの選択とサブスクリプションの決定:ユーザーは複数の大規模モデルとサービスを混合して使用

ユーザーのフィードバックは混合サブスクリプション行動を反映しています。一部のユーザーは、ChatGPTやClaudeのサブスクリプションを完全に停止できないと述べており、日常的にはGeminiを最も使用しています。GeminiアプリがAI Studioより劣るため、Gemini Proのサブスクリプションを一時的に停止しているユーザーもいます。コーディングに関しては、多くのユーザーがCodexや共有ChatGPTサブスクリプションを優先しています。

Geminiの複雑な知識の視覚化に関する試みとユーザー体験

一部のユーザーは、Gemini 3を使用して複雑な金融および貨幣政策の知識を同じアニメーションまたは視覚的な物語に統合する試みを行い、このようなタスクにおけるモデルの能力が高いと表現しています。このフィードバックは、ユーザーがGeminiを高い複雑性の知識統合と提示に使用することを探求していることを反映しています。

Source posts