北京2024年9月24日 /美通社/ -- 在數字化浪潮的洶涌澎湃中,閃存技術與人工智能(AI)的融合發展正逐步成為推動社會進步與行業變革的關鍵力量。浪潮信息在以"芯存儲 AI未來"為主題的2024全球閃存峰會上,聚焦閃存技術與人工智能(AI)的融合發展。在主題演講與多個論壇中分享了在數據存儲技術和AI領域的最新進展和洞察。
AI與數據存儲的融合創新
數據在AI時代的重要性不言而喻,數據與AI深度融合以推動未來AI的發展。據IDC分析,智能制造、智慧醫療、AIGC等新興應用的爆發式增長及數字經濟高質量發展的政策紅利,為分布式存儲市場帶來前所未有的發展機遇。
云存儲產品部總經理劉希猛在主題演講中指出,2024年標志著人工智能應用的全面爆發,尤其是大語言模型、視頻與圖像處理以及虛擬直播等領域的廣泛應用,使得數據存儲基礎設施面臨前所未有的挑戰。
隨著數據的爆炸性增長,從數據采集、處理、訓練、推理到歸檔的各個階段都需要存儲系統的有力支持。特別是大規模模型訓練過程中產生的檢查點(Checkpoint)數據,對存儲系統的帶寬和容量提出了極高的要求。
對此,浪潮信息打造基于NVMe SSD搭載新一代數據加速引擎DataTurbo的分布式全閃存儲AS13000G7-N系列,通過盤控協同、GPU直訪存儲、全局一致性緩存等技術,能提供TB級帶寬、千萬級IOPS、EB級容量,在AIGC數據歸集、訓練、數據歸檔與管理等階段提供文件、對象、大數據多協議融合互通能力、多元異構集群納管能力,實現一份數據免遷移,數據準備時間節省40%。
同時,打造了基于AS13000G7的AIGC存儲解決方案,通過與上層EPAI/AIStation進行深度定制,調度平臺加持下,使數據橫向流動更為高效,提升存儲效率;縱向加速數據訪問,加快訓練速度,從容應對大模型應用對存儲性能、容量以及數據管理等方面的苛刻要求。
解鎖AIGC數據價值
在AIGC存儲技術論壇上,浪潮信息存儲產品部方案總監楊智峰博士帶來了題為"釋放AIGC數據潛能 浪潮信息分布式存儲技術創新與實踐"的演講。
AIGC環境下對存儲提出很多需求,特別是數據全生命周期管理能力和極致性能,包括Checkpoint帶寬和訓練過程中的極致I/O性能。
楊智峰強調,Scaling Law作為衡量模型效能的核心要素,其重要性在AI領域依然不可撼動,并引領著AI模型從單一模態向多元模態的深刻轉型。這一轉型趨勢為數據存儲領域開辟了前所未有的新機遇,具體體現在存儲介質的全面閃存化、網絡架構的歸一化整合、內存資源的全局化調度,以及算力資源的多樣化配置等方面。
浪潮信息在存儲協議層面實施了一系列創新舉措,顯著提升了系統的兼容性與靈活性。這些創新包括但不限于文件、對象及大數據存儲協議之間的無縫融合與高效互通,以及通過富元數據集中管理策略,進一步優化了數據存儲的檢索效率與管理便捷性。針對模型訓練過程中對數據存取速度、并發處理能力的嚴苛要求,研發了多項前沿存儲技術,如實現秒級檢查點數據快速寫入的能力,以及支持高達千萬級IOPS的高性能存儲系統,為AI模型的快速迭代與高效訓練提供了堅實的支撐。
高端全閃存儲:安全與高效的引領者
隨著信息化躍居業務前沿,對存儲系統提出嚴苛要求:確保核心業務實時穩定,數據永不丟失,并追求綠色高效。全閃存憑其卓越性能與節能特性,成為市場新寵,不僅提升效率、節省空間,更將能耗較機械硬盤銳減70%。在數字經濟浪潮中,企業紛紛擁抱全閃存儲,以綠色數據中心響應"碳達峰、碳中和"號召,平衡發展與環保,共創可持續未來。
在高端存儲與分布式全閃存論壇中,浪潮信息存儲產品部營銷總監王旭東詳細闡述了高端存儲在核心業務場景下的重要性,特別是在實時交易、生產制造等關鍵性場景中。
為了滿足客戶對存儲系統的高要求,浪潮信息推出了具備安全可靠、綠色高效的高端全閃存儲HF18000系列。該系列產品采用Full-Mesh全互聯架構,提高了系統的穩定性和可靠性,同時通過A-A架構模式降低了CPU利用率和IO延遲,提升了業務性能。
通過優化CPU訪問帶寬、核心分配算法等方式,顯著提高了存儲系統的性能。在系統層面,使用了最新的iTurbo 2.0全閃引擎,使得CPU資源分配更加合理。此外,還構建了一套完善的NOF網絡,減少了丟包和延遲,支持更多的連接,從而進一步提升了存儲性能。
目前,浪潮信息已在六大行、TOP3保險證券公司、石油石化、C9高校、TOP10醫院等行業大客戶中廣泛部署存儲平臺,支撐企業的核心數據庫、生成式AI、云平臺、大數據等場景應用。未來,浪潮信息將會把握市場變化和用戶需求,持續加大技術創新與投入,助力千行百業構建安全、可靠、經濟、高效的數據存儲底座,加速數字化轉型和創新。