Boltzbitとケンブリッジ大学、ハイパーネットワークを介して重みに知識を書き込む手法を提案
Boltzbitとケンブリッジ大学は、ハイパーネットワークを用いてユーザーのコンテキストをLoRAの重みに動的に書き込む「無限パラメーター」(Infinite Parameters)を提案した。これにより、ラウンドごとの計算コストを一定に保ちながら、効率的な長文書理解が可能となる。
Boltzbitとケンブリッジ大学は、ハイパーネットワークを用いてユーザーのコンテキストをLoRAの重みに動的に書き込む「無限パラメーター」(Infinite Parameters)を提案した。これにより、ラウンドごとの計算コストを一定に保ちながら、効率的な長文書理解が可能となる。