12月20日,騰訊Techo Park開發(fā)者大會在京召開,在“存儲加速度,海量存儲創(chuàng)造無限可能”分論壇上,騰訊云發(fā)布了滿足企業(yè)低成本、高效率存儲需求的智能分層和深度歸檔兩款存儲產(chǎn)品方案,并與知乎、新東方等頭部互聯(lián)網(wǎng)企業(yè)技術(shù)大咖共同分享了數(shù)據(jù)爆炸時代下存儲技術(shù)的機遇和實踐,為數(shù)據(jù)存儲領(lǐng)域帶來一場技術(shù)盛宴。
騰訊云存儲產(chǎn)品中心副總經(jīng)理陳崢在論壇上表示,大數(shù)據(jù)時代,海量數(shù)據(jù)存儲與價值挖掘給企業(yè)級數(shù)據(jù)存儲帶來了成本、性能、安全、業(yè)務(wù)賦能等一系列的挑戰(zhàn)。降低存儲成本、提高訪問性能成為了企業(yè)共同的訴求。
(騰訊云存儲產(chǎn)品中心副總經(jīng)理陳崢)
一站式數(shù)據(jù)湖服務(wù),挖掘數(shù)據(jù)資產(chǎn)價值
當(dāng)前,全球數(shù)據(jù)規(guī)模呈現(xiàn)爆發(fā)式增長,企業(yè)對大數(shù)據(jù)愈加依賴和數(shù)據(jù)帶來經(jīng)濟效益的價值不斷凸顯,但大量冗余數(shù)據(jù)的出現(xiàn)也使得企業(yè)在獲取數(shù)據(jù)要素時,普遍面臨存儲數(shù)據(jù)成本高,有效信息獲取難的問題;谶@些痛點,騰訊云提供了涵蓋了數(shù)據(jù)的集成、存儲、分析、展示等多個階段的一站式數(shù)據(jù)湖服務(wù),可以滿足用戶低成本、高性能、流批一體地挖掘數(shù)據(jù)資產(chǎn)價值的需求。
騰訊云對象存儲高級產(chǎn)品經(jīng)理林楠介紹,騰訊云對象存儲服務(wù)能夠為企業(yè)提供統(tǒng)一的異構(gòu)數(shù)據(jù)存儲平臺,將日志流、數(shù)據(jù)表、圖片音視頻等異構(gòu)數(shù)據(jù)放在對象存儲上邊,并基于騰訊云的彈性 MapReduce等大數(shù)據(jù)產(chǎn)品進行數(shù)據(jù)分析,通過存算分離的架構(gòu),解決業(yè)務(wù)彈性伸縮問題,減少企業(yè)成本。
(騰訊云對象存儲高級產(chǎn)品經(jīng)理林楠)
知乎數(shù)據(jù)架構(gòu)平臺離線架構(gòu)存儲專家劉曉龍在談到與騰訊云的合作時表示,騰訊云計算與存儲分離方案發(fā)揮計算彈性伸縮能力,幫助知乎滿足業(yè)務(wù)對計算資源的靈活調(diào)度,相信雙方在后續(xù)合作中,一定會給廣大知乎用戶帶來更良好的產(chǎn)品體驗。
(知乎數(shù)據(jù)架構(gòu)平臺離線架構(gòu)存儲專家劉曉龍)
推出智能分層和深度歸檔,讓企業(yè)存儲降本增效
為了滿足企業(yè)對數(shù)據(jù)熱、溫、冷,整個數(shù)據(jù)生命周期的存儲需求,騰訊云對象存儲還為企業(yè)提供了全系列存儲產(chǎn)品矩陣。此次分論壇上,騰訊云推出了智能分層和深度歸檔兩項新的產(chǎn)品服務(wù)。
其中,智能分層主要針對未知訪問模式,通過對頻繁訪問和不頻繁訪問的數(shù)據(jù)進行分層,根據(jù)訪問需求自動地將連續(xù)30天(可配置)未訪問的對象移至不頻繁訪問層或移回頻繁訪問層,幫助用戶降低20%的成本,具有 99.95%的可用性和 99.999999999%的持久性,并且可以提供與 S3標準存儲相同的低延遲和高吞吐量性能。幫助企業(yè)即使在不斷變化的訪問模式下,既可以節(jié)省資金,也不會影響業(yè)務(wù)性能。為國內(nèi)云廠商首創(chuàng)
深度歸檔則是為企業(yè)內(nèi)部生命周期結(jié)束后并不能直接刪除的重要數(shù)據(jù)量身定制。軟件上,依托數(shù)據(jù)壓縮技術(shù);硬件上,通過啟用新的高密度存儲介質(zhì),使存儲密度獲得最大限度提升,費用僅為每GB每月0.01元,提供了與本地磁帶庫歸檔等同的存儲成本,目前為全行業(yè)最低的公有云存儲單價。同時,可靠性達到 99.999999999%,支持全套API、SDK以及10+外部備份軟件,適用合規(guī)性數(shù)據(jù)、異地容災(zāi)、數(shù)據(jù)備份等業(yè)務(wù)場景。
此外,騰訊云文件存儲CFS超高性能產(chǎn)品Turbo系列也在會上全新發(fā)布,單文件系統(tǒng)最高百GB/s吞吐、百萬級IOPS、亞毫秒級時延,完美滿足AI訓(xùn)練、自動駕駛、HPC超算場景下高性能共享存儲業(yè)務(wù)訴求。
安全高速,海量存儲創(chuàng)造無限可能
近年來,企業(yè)對數(shù)據(jù)存儲的可靠性、可用性和成本都提出了越來越高的要求,針對這一需求變化,騰訊云推出了新一代存儲引擎YottaStore。騰訊云數(shù)據(jù)存儲研發(fā)副總監(jiān)付強介紹,超大規(guī)模云存儲引擎YottaStore支持原生多AZ、任意副本和EC的冗余模式,異構(gòu)硬件自適應(yīng)混部。整個系統(tǒng)高度自治,單集群規(guī)模可達百萬臺,有效數(shù)據(jù)占比90%以上,存儲數(shù)據(jù)規(guī)模高達百EB級別,可靠性遠超 12個 9,可用性超過 99.995%,還為客戶提供了單Bucket高達 6萬的請求 QPS,為滿足客戶云上大數(shù)據(jù)分析需求提供了底層能力支撐,在云上形成數(shù)據(jù)閉環(huán)。
(騰訊云數(shù)據(jù)存儲研發(fā)副總監(jiān)付強)
隨著時間的推移,K8S和容器技術(shù)已經(jīng)逐步成熟,企業(yè)對云原生技術(shù)接納程度越來越高,這給存儲帶來了一些新的機遇和挑戰(zhàn),對此,騰訊云塊存儲專家工程師肖軍表示,騰訊云已經(jīng)推出了極速型云盤,對IOPS和帶寬、穩(wěn)定性、時延做出大幅優(yōu)化。
(騰訊云塊存儲專家工程師肖軍)
騰訊云領(lǐng)先的對象存儲能力如今正在幫助越來越多的企業(yè)完成低成本、高效率、更安全的數(shù)據(jù)存儲任務(wù)。以頭部社交電商平臺小紅書為例,其月活數(shù)據(jù)超過1億,每天筆記曝光量達到80億次。面對爆發(fā)式增長的業(yè)務(wù)場景,小紅書研發(fā)團隊構(gòu)建了一個基于對象存儲的數(shù)據(jù)湖,利用公有云彈性計算的能力完成AI訓(xùn)練和學(xué)習(xí),為推薦、廣告和搜索等業(yè)務(wù)提供模型支撐,同時也需要解決海量大數(shù)據(jù)計算下對性能成本的彈性需求從而減少業(yè)務(wù)成本。
通過騰訊云,小紅書開發(fā)團隊構(gòu)建了可拓展的數(shù)據(jù)接入集群,實現(xiàn)了彈性伸縮能力,完成對用戶行為數(shù)據(jù)的實時分析和推薦后,將有效數(shù)據(jù)以更低成本進行了存儲,滿足了小紅書業(yè)務(wù)可拓展、高吞吐和低成本的要求。
此外,本次大會演講嘉賓,新東方AI研究院負責(zé)人張建鑫對騰訊云的對象存儲能力給出了充分認可,表示在疫情期間,騰訊云針對在線教育行業(yè)客戶提供存儲處理一體化解決方案,快速支持了新東方將線下課程搬到線上的需求,保證了新東方直播/點播業(yè)務(wù)的穩(wěn)定運行。在新東方APP和新東方內(nèi)容平臺的合作上,騰訊云分布式存儲和彈性擴容計算能力也顯著提升了新東方系統(tǒng)服務(wù)的穩(wěn)定性,改善了學(xué)生線上作業(yè)的學(xué)習(xí)體驗。未來,雙方將展開更加深入和更加廣泛的合作,以科技的力量進一步打造新東方這一國內(nèi)領(lǐng)先的教育品牌。
(新東方AI研究院負責(zé)人張建鑫)
近年來,騰訊云基于自身業(yè)務(wù)發(fā)展夯實了存儲技術(shù)底座,在開放兼容的趨勢中提升了存儲產(chǎn)品能力,并入選為全球云計算IaaS和PaaS魔力象限廠商。其中對象存儲產(chǎn)品連續(xù)多年保持三位數(shù)以上速度增長,突破EB級存儲規(guī)模,已經(jīng)大步邁入存儲+時代,為在線教育、社交電商等領(lǐng)域提供更全面的存儲服務(wù)。陳崢在論壇上表示,下一個十年,是產(chǎn)業(yè)互聯(lián)網(wǎng)的十年,騰訊云希望能和企業(yè)一起騰云而上,提供更好的存儲服務(wù)。