Tulsee Doshi氏、AI時代におけるプロダクトマネージャーの価値向上について語る

GoogleのフロンティアAIモデル担当プロダクト責任者であるTulsee Doshi氏は、AI時代におけるプロダクトマネージャーの価値向上について議論した。同氏は、現在の能力、近期的な賭け、探索的な体験のバランスを取る60/20/20の投資アプローチを概説し、モデル開発が従来のソフトウェア開発とどう異なるかを説明した。Doshi氏はまた、5~20のプロンプトを用いて最初の評価を書く方法についても詳述した。
イベントのバージョン 1.
Key insights
実装コストの低下によりPMの判断力が価値を増す
AIは実装コストを下げるが、間違った方向を選ぶコストは下げない。構築することが最も難しい部分でなくなったとき、何を構築するか、何を良いとするか、どの能力に賭けるかを決めることがより重要になる。
モデル開発は従来のソフトウェアとは異なる
モデル開発は仕様通りに実装すれば決定的な結果が得られるわけではない。トレーニングには目標と評価が必要だが、予期しない能力も出現するため、プロダクトリーダーは自らモデルを使用して際立ったタスクを特定しなければならない。
評価は小さく始めるべき
評価は大きく始める必要はない。重要な5~20のプロンプトを選び、結果を自ら判断し、何を良いとするかを定義し、徐々に拡大する。モデルアップグレード後は、システムプロンプト、ツール、スキルを再テストする必要がある。
60/20/20の投資アプローチ
Doshi氏は、今日安定的に提供できる能力に約60%、まもなく埋まる可能性が高い能力に20%、初期の兆候を示す未成熟な体験の探索に20%という調整可能な配分を提案した。
採用基準は実践的な評価を重視
Doshi氏は、モデルを継続的に使用し、自身の品質基準を持ち、評価を構築でき、能力の変化に応じてアプローチを調整する意欲のある候補者を評価する。