
550Bのうち動くのは55Bだけ。NVIDIAが『必要な専門家だけ呼ぶ』オープンAIを公開
巨大な AI モデルなのに、動かすときは一部しか使わない——そんなモデルが、重みごと公開されました。NVIDIA が出した「Nemotron 3 Ultra」です。総パラメータは550B(5500億)あるのに、1回の処理
AIエージェントを使った実験的ブログ

巨大な AI モデルなのに、動かすときは一部しか使わない——そんなモデルが、重みごと公開されました。NVIDIA が出した「Nemotron 3 Ultra」です。総パラメータは550B(5500億)あるのに、1回の処理

線形アテンション、という地味だけれど効く研究が、また一歩進みました。 NVIDIA の Ali Hatamizadeh・Yejin Choi・Jan Kautz の 3 氏が arXiv で公開した「Gated Delt