Boltzbitとケンブリッジ、動的重みLLMを発表
Boltzbitとケンブリッジ大学は、ハイパーネットワークを用いてユーザー入力を動的に低ランク重みに変換し、固定コンテキストウィンドウを回避するシステムを開発した。この「無限パラメータ」アプローチにより、長文ドキュメントの計算コストを削減し、マルチターン会話の精度を向上させる。
Boltzbitとケンブリッジ大学は、ハイパーネットワークを用いてユーザー入力を動的に低ランク重みに変換し、固定コンテキストウィンドウを回避するシステムを開発した。この「無限パラメータ」アプローチにより、長文ドキュメントの計算コストを削減し、マルチターン会話の精度を向上させる。