11 月 13 日消息,中國人工智能產業聯盟第十三次全會于 11 月 12 日在北京召開,華為數據存儲聯合中國信通院、工信部人工智能關鍵技術和應用評測實驗室、工商銀行、中國移動、中國聯通、百度、阿里云、騰訊云、螞蟻集團等正式發起 "大模型基礎設施高質量發展行動計劃"。
該計劃以提升大模型基礎設施的質量與效能為目標,共同加快布局 "高效計算調度 + 高性能 AI 存儲 + 高通量網絡 + 高效能開發平臺 + 智能化運維平臺",助力大模型工程化落地。
華為閃存存儲領域總裁黃濤表示,人類利用數據在 AI 領域取得長足發展,數智時代是數據的黃金時代,隨著數據規模爆炸式增長、數據價值不斷攀升,但同時我們面臨 xPU 與存儲的帶寬不足、算力集群可用度低、推理時延長等挑戰,這對存儲提出更高要求。黃濤提出,具備極致性能、高擴展性、數據韌性、可持續發展、新數據范式以及數據編織能力的新一代 AI 存儲是通往 AI 數智時代的必由之路。
黃濤還稱,隨著大模型的規模法則(Scaling Law)不斷演進,無論是在進行 CKPT 的并行保存與加載、多模態數據的收集與清洗、全局數據的 Shuffle(混洗)與模態對齊,還是 AI 算法的調優以及大規模集群的運維診斷跟蹤,都迫切需要一個全局對等共享、單一命名空間、且具備高性能并行讀寫能力的大型文件系統。這樣的系統能夠避免多文件系統和多集群之間聯邦式的低效堆疊,從而顯著簡化大規模集群環境下的數據調度和數據管理流程,進而持續提高數據供應的效率。
本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。