#Test-Time Training

Test-Time Training（TTT-E2E）の衝撃 ── デプロイ後も学習し続けるLLMがロングコンテキスト問題を解決する

Stanford/NVIDIAチームが発表したTTT-E2Eは、推論時にモデル重みを動的更新しコンテキストを圧縮する革新的手法。128Kで2.7倍、2Mで35倍の高速化を達成し、RNN系手法の32K限界を突破した初の効率的手法として注目される。