テクノロジー
AMD製GPUで学習させた推論特化型軽量モデル「ZAYA1-8B」がリリース:NVIDIA一強体制への挑戦とAMDハードウェアの実用性
米Zyphraは、AMD Instinct MI300のみでフルスタック学習させた80億パラメータの推論モデル「ZAYA1-8B」を公開した。独自のアーキテクチャと推論時計算手法「Markovian RSA」により、大手モデルに匹敵する数理・コーディング性能を達成し、Apache 2.0ライセンスで商用利用を促進する。
Zyphraが開発した推論時計算(Test-Time Compute)技術。推論軌跡の「尾部」のみを抽出し再帰的にアグリゲーションすることで、コンテキストウィンドウを溢れさせることなく、事実上無限の思考連鎖を可能にする手法。