智譜の新モデルが最大3.5兆パラメーターであることが明らかになり、Claude Fableレベルに達する可能性がある

動察 Beating AI の速報によると、投資関係者間で流布している専門家インタビュー要約が明らかにしたところでは、AI企業・智譜（Zhipu）がまもなくリリースする次世代基盤モデルのパラメーター規模は、市場でこれまで囁かれていた1.6兆ではなく、実際には2.5兆～3.5兆の範囲となるという。また、智譜が今年8月に公開したGLM-5.3は依然として前世代の基盤モデルをベースとしており、総パラメーター数は約7440億である——この情報が事実であれば、新基盤モデルのパラメーター数は現行のGLM-5.3の3.4倍から4.7倍に相当することになる。要約では、当該モデルの学習プロセスにおいて困難が生じたと指摘されており、智譜はより攻撃的なアーキテクチャー設計を採用した結果、事前学習段階で「Loss」が長期にわたり停滞する現象が発生し、計算資源を継続的に消費しながらも、重要な学習指標のさらなる改善が進まなかったと伝えられている。ただし、インタビュー対象者は、こうした技術的課題は最近になって解決済みであり、学習作業は間もなく完了する見込みだと判断。さらに、完成予定のモデルはClaude Fableクラスのフラッグシップ水準に達する可能性が高いと評価している。要約ではまた、新モデルは……