SK海力士計劃透過美國IPO募集100-140億美元來擴大記憶體晶片產能,將自己定位為正在進行的「RAMmageddon」的解決方案,這場危機正在扼殺AI發展。這家南韓記憶體巨頭旨在利用大量資金挹注來建設新的製造廠房,專門為AI工作負載提升高頻寬記憶體(HBM)生產。
時機並非巧合。AI訓練運行不斷遇到記憶體瓶頸——我看到團隊燒完計算預算,因為他們無法獲得足夠的高速記憶體來高效地為模型供能。HBM價格在18個月內漲了三倍,獲得分配需要提前數月規劃。我認識的每家AI公司都在爭奪記憶體分配,這成了新的GPU短缺。
但現實檢查是這樣的:即使有140億美元,新的記憶體製造廠也需要2-3年才能投產。SK海力士的IPO可能表明對AI長期需求的信心,但它無法解決目前壓垮現有專案的供應緊縮。三星和美光也在提升產能,但這些都無法幫助今天面臨記憶體限制的開發者。真正的問題是這筆資金是否會用於創新的記憶體架構,還是只是更多昂貴的HBM。
對於AI建構者來說,這意味著要繼續圍繞記憶體限制進行最佳化,而不是等待緩解。專注於更高效使用記憶體的模型架構,實作更好的快取策略,並考慮減少峰值記憶體需求的混合方法。援軍即將到來,但仍需數年時間。
