首頁|必讀|視頻|專訪|運營|制造|監(jiān)管|大數(shù)據(jù)|物聯(lián)網(wǎng)|量子|元宇宙|博客|特約記者
手機|互聯(lián)網(wǎng)|IT|5G|光通信|人工智能|云計算|芯片報告|智慧城市|移動互聯(lián)網(wǎng)|會展
首頁 >> 制造 >> 正文

數(shù)據(jù)覺醒時代,華為重新定義數(shù)據(jù)存儲

2024年5月7日 19:51  CCTIME飛象網(wǎng)  

5月7日,以“數(shù)據(jù)覺醒,構(gòu)建AI-Ready的領(lǐng)先數(shù)據(jù)基礎(chǔ)設(shè)施”為主題的2024創(chuàng)新數(shù)據(jù)基礎(chǔ)設(shè)施論壇在柏林舉行。華為公司副總裁、數(shù)據(jù)存儲產(chǎn)品線總裁周躍峰博士發(fā)表題為“數(shù)據(jù)覺醒時代,華為重新定義數(shù)據(jù)存儲”主題演講,他表示,具備極致性能、數(shù)據(jù)韌性、全新數(shù)據(jù)范式、高擴展性、綠色節(jié)能、數(shù)據(jù)編織能力的數(shù)據(jù)存儲是AI時代存儲演進的必由之路。

華為公司副總裁、數(shù)據(jù)存儲產(chǎn)品線總裁 周躍峰博士

從上世紀90年代至今,隨著企業(yè)的應用由單機、數(shù)據(jù)庫/虛擬化、文件共享、大數(shù)據(jù)、高性能數(shù)據(jù)分析等應用的變遷,數(shù)據(jù)存儲經(jīng)歷了從DAS到SAN/NAS,再到非結(jié)構(gòu)化存儲的變革與演進。直到如今生成式AI的爆發(fā),對數(shù)據(jù)存儲提出了新的訴求。

AI大模型集群規(guī)模已邁入萬卡、十萬卡時代,集群規(guī)模增加帶來更加頻繁的故障和訓練中斷,重復的CheckPoint數(shù)據(jù)寫入、斷點續(xù)訓導致算力資源閑置,集群可用度不足50%。此外,到2026年,全球數(shù)據(jù)中心的耗電量預計將達到2022年的2.3倍,相當于日本一個國家全年的耗電量,其中數(shù)據(jù)中心一半以上的電力消耗都將被AI占據(jù)。

AI時代呼喚新一代數(shù)據(jù)存儲。過去的數(shù)據(jù)存儲主要關(guān)注性能、可靠、數(shù)據(jù)范式三個方面;面向未來,AI存儲還應增加三個維度:高擴展性、綠色節(jié)能與數(shù)據(jù)編織。數(shù)據(jù)覺醒時代,華為將重新定義數(shù)據(jù)存儲,聚焦于六個方面的創(chuàng)新,持續(xù)引領(lǐng):

極致性能:超越傳統(tǒng)存儲10倍的性能,支持PB級帶寬以及億級IOPS,極大提升生成式AI全流程效率;

數(shù)據(jù)韌性:通過架構(gòu)和技術(shù)創(chuàng)新,實現(xiàn)99.9999%高可靠性,通過內(nèi)置防勒索引擎,實現(xiàn)偵測準確率提升至99.99%,并將AI訓練過程中CheckPoint恢復時間縮至1分鐘以內(nèi);

全新數(shù)據(jù)范式:使能多維“張量”格式的數(shù)據(jù),通過智能檢索引擎,具備快速的張量數(shù)據(jù)檢索能力;通過內(nèi)嵌知識庫,利用RAG技術(shù)消除AI大模型幻覺;

高擴展性:存儲集群支持EB級容量橫向擴展;每個引擎可支持多GPU、DPU或NPU縱向擴展,以支持近存計算;

綠色節(jié)能:通過存儲介質(zhì)應用創(chuàng)新和整機硬件創(chuàng)新,實現(xiàn)小于1Watt/TB的存儲能效和1PB/U的存儲密度;

數(shù)據(jù)編織:基于存儲元數(shù)據(jù)管理及檢索能力,實現(xiàn)全局數(shù)據(jù)可視、可管,并支持10倍的數(shù)據(jù)流動效率提升。

基于以上創(chuàng)新,華為推出全新A系列高性能存儲OceanStor A800,專為AI而生,可有效提升AI集群可用度30%。性能方面,OceanStor A800帶寬是友商同類產(chǎn)品的4倍,IOPS達友商的8倍;支持EB級容量擴展,最大支持擴容至4096張算力卡,512個存儲控制器;從空間能耗來看,密度高達1PB/U,能耗低至0.7Watt/TB;結(jié)合向量化索引、張量格式數(shù)據(jù)、RAG知識庫,使能全新數(shù)據(jù)范式;數(shù)據(jù)韌性方面,勒索攻擊偵測準確率從99.9%提升至99.99%;通過數(shù)據(jù)編織能力,實現(xiàn)數(shù)據(jù)資產(chǎn)管理。

此外,存儲介質(zhì)創(chuàng)新助力可持續(xù)發(fā)展。華為新推出128TB大容量SSD盤,相比業(yè)界友商,每PB節(jié)約88%空間,節(jié)省92%能耗,相同空間實現(xiàn)10倍容量提升,進一步降低數(shù)據(jù)中心能耗。

同樣,AI-Ready的前提是Data-Ready。DME內(nèi)置的Omni-Dataverse全局文件系統(tǒng)實現(xiàn)企業(yè)全域數(shù)據(jù)資產(chǎn)可視、可管、可流動,構(gòu)筑AI數(shù)據(jù)湖存儲底座。

最后,周躍峰表示,華為將聚焦數(shù)據(jù)覺醒時代客戶面臨的挑戰(zhàn)和需求,重新定義數(shù)據(jù)存儲,構(gòu)筑AI-Ready的領(lǐng)先數(shù)據(jù)基礎(chǔ)設(shè)施,為客戶創(chuàng)造價值。

編 輯:章芳
聲明:刊載本文目的在于傳播更多行業(yè)信息,本站只提供參考并不構(gòu)成任何投資及應用建議。如網(wǎng)站內(nèi)容涉及作品版權(quán)和其它問題,請在30日內(nèi)與本網(wǎng)聯(lián)系,我們將在第一時間刪除內(nèi)容。本站聯(lián)系電話為86-010-87765777,郵件后綴為#cctime.com,冒充本站員工以任何其他聯(lián)系方式,進行的“內(nèi)容核實”、“商務聯(lián)系”等行為,均不能代表本站。本站擁有對此聲明的最終解釋權(quán)。
相關(guān)新聞              
 
人物
聞庫:全球6G發(fā)展需要統(tǒng)一的思路、方向和目標
精彩專題
CES 2024國際消費電子展
2023年信息通信產(chǎn)業(yè)盤點暨頒獎禮
飛象網(wǎng)2023年手機評選
第24屆中國國際光電博覽會
CCTIME推薦
關(guān)于我們 | 廣告報價 | 聯(lián)系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網(wǎng) CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號-1  電信與信息服務業(yè)務經(jīng)營許可證080234號 京公網(wǎng)安備110105000771號
公司名稱: 北京飛象互動文化傳媒有限公司
未經(jīng)書面許可,禁止轉(zhuǎn)載、摘編、復制、鏡像