多位參與Nemotron項目的英偉達員工透露,他們預計Nemotron 4系列中最大的模型至少將擁有萬億參數級別——這一消息由科技媒體The Information披露。
知情人士表示,眼下英偉達內部正全力推進這一龐大模型的訓練與優化工作。參數規模的激增,意味着模型在複雜推理、多模態理解以及生成能力上將迎來質的飛躍。萬億參數,這個數字幾乎達到了當前頂尖大語言模型的天花板。
不過,英偉達官方尚未就此作出回應。但業界普遍認為,此舉將進一步鞏固英偉達在AI基礎設施領域的霸主地位。畢竟,參數規模越大,對算力及芯片的需求就越顯迫切,而英偉達正是這一生態的核心供應商。
從員工們的預期來看,Nemotron系列顯然志在挑戰當前所有已知的AI模型規模紀錄。但參數並非唯一的衡量標準,算法的效率與訓練的穩定性同樣需要考驗。未來,英偉達能否在萬億參數級別上實現真正的商業落地,仍需時間檢驗。