云計(jì)算驅(qū)動(dòng)的數(shù)字化浪潮席卷了所有行業(yè)。計(jì)算、網(wǎng)絡(luò)、存儲被稱為云基礎(chǔ)設(shè)施的三大件，存儲又是其中變化最快的一項(xiàng)，這是因?yàn)殡S著數(shù)據(jù)驅(qū)動(dòng)型組織戰(zhàn)略的普及，云計(jì)算、移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能等新技術(shù)在各個(gè)領(lǐng)域深化應(yīng)用，全球數(shù)據(jù)量呈爆炸式增長態(tài)勢。IDC的研究報(bào)告顯示，全球數(shù)據(jù)圈(以數(shù)據(jù)圈代表每年被創(chuàng)建、采集或是復(fù)制的數(shù)據(jù)集合)將從2018年的32ZB增至2025年的175ZB。全球數(shù)據(jù)量爆炸增長，為數(shù)據(jù)存儲市場帶來巨大增量。在這樣的背景下，現(xiàn)有的數(shù)據(jù)存儲模式已經(jīng)難以滿足數(shù)據(jù)存儲要求，數(shù)據(jù)已經(jīng)由原來存儲在專有的集中式存儲設(shè)備上而向云存儲（公有云、私有云、混合云）上轉(zhuǎn)型，以降低固定資產(chǎn)支出和運(yùn)維管理費(fèi)用，以激活數(shù)據(jù)來驅(qū)動(dòng)組織的業(yè)務(wù)創(chuàng)新，注入持續(xù)發(fā)展的源動(dòng)力。

其中，混合云存儲是一種將公有云存儲服務(wù)和私有云存儲資源互聯(lián)互通的技術(shù)實(shí)現(xiàn)，促進(jìn)云上和云下的數(shù)據(jù)雙向互通?；旌显拼鎯υ絹碓绞軞g迎，充分發(fā)揮公有云的超大規(guī)模、彈性擴(kuò)展、隨需而用和低成本優(yōu)勢，以及私有云的資源物理隔離和安全合規(guī)的特點(diǎn)，業(yè)已成為數(shù)據(jù)高效存儲的發(fā)展方向。

技術(shù)立業(yè)的金山云存儲產(chǎn)品線

早在2007年，金山就開始籌建金山實(shí)驗(yàn)室，進(jìn)行云存儲技術(shù)領(lǐng)域的研究。2012年，金山將云存儲業(yè)務(wù)進(jìn)行拆分，成立金山云公司。同年，金山云正式在國內(nèi)推出在線云存儲服務(wù)KS3，為用戶提供優(yōu)質(zhì)的互聯(lián)網(wǎng)對象存儲服務(wù)。此后，金山云存儲產(chǎn)品的不斷迭代演進(jìn)、推陳出新，陸續(xù)推出功能豐富的各種存儲產(chǎn)品及服務(wù)。金山云主要云存儲產(chǎn)品包括：對象存儲（KS3）、彈性塊存儲（EBS）、文件存儲（KFS）、歸檔存儲（KArchive）及混合云存儲產(chǎn)品系列（KingStorage）。

金山云的對象存儲KS3，已經(jīng)在線穩(wěn)定運(yùn)行超過十年，云上規(guī)模超EB級，且每年都保持著高速增長，是業(yè)內(nèi)技術(shù)先進(jìn)的超大規(guī)模公有云分布式存儲服務(wù)。在私有化部署的場景下金山云提供KingStorage混合云存儲產(chǎn)品，繼承了公有云存儲的架構(gòu)與功能優(yōu)勢，并充分考慮并實(shí)現(xiàn)私有化場景下客戶業(yè)務(wù)對存儲的個(gè)性化需求。依托于金山云混合云存儲優(yōu)秀的架構(gòu)設(shè)計(jì)，保障了業(yè)務(wù)能力的穩(wěn)定輸出，具備大規(guī)模的數(shù)據(jù)存儲與處理能力，聚焦于云原生應(yīng)用、大數(shù)據(jù)存算分離、自動(dòng)駕駛、機(jī)器學(xué)習(xí)、視頻云等業(yè)務(wù)場景。在IDC發(fā)布的《中國軟件定義存儲（SDS）2022年第一季度》報(bào)告顯示，金山云KingStorage OBS產(chǎn)品在SDS對象存儲市場細(xì)分領(lǐng)域，市場占有率位列前三，已躋身于國內(nèi)行業(yè)頭部。

以云為基的云原生存儲

金山云KingStorage混合云存儲產(chǎn)品是基于云原生的設(shè)計(jì)理念，定位于混合云、專有云、云化的企業(yè)數(shù)據(jù)中心和邊緣計(jì)算節(jié)點(diǎn)等場景，旨在為客戶提供彈性伸縮、軟硬解耦、資源隔離、隨需而用、敏捷高效、自動(dòng)化運(yùn)維的池化存儲資源。其主要特點(diǎn)有如下：

應(yīng)云而生 — 源自云：產(chǎn)品研發(fā)源于云用戶對數(shù)據(jù)存儲的多樣化需求，解決數(shù)據(jù)存儲在公有云和私有云中流轉(zhuǎn)的問題。

以云為基 — 興于云：產(chǎn)品基于公有云相同的存儲技術(shù)棧，并實(shí)現(xiàn)代碼共享，基于應(yīng)用場景差異提升企業(yè)級存儲的功能特性。

融云致遠(yuǎn) — 贏未來：面向云原生應(yīng)用對海量、高性能存儲的需求，強(qiáng)化與各類云原生平臺的平滑對接，助力云原生生態(tài)的繁榮。

KingStorage云原生的特質(zhì)有利于平滑對接多云平臺和滿足云原生類應(yīng)用的存儲需求，實(shí)現(xiàn)數(shù)據(jù)在多樣化應(yīng)用場景之間按需流轉(zhuǎn)，確保云上云下一致的存儲服務(wù)體驗(yàn)，加速業(yè)務(wù)創(chuàng)新和數(shù)字化轉(zhuǎn)型。

聚焦新興業(yè)務(wù)領(lǐng)域下的存儲痛點(diǎn)

在當(dāng)今新業(yè)務(wù)形態(tài)下，客戶對于存儲的核心需求主要有三點(diǎn)：第一是新業(yè)務(wù)場景對存儲的高性能需求，比如在自動(dòng)駕駛、機(jī)器學(xué)習(xí)、大數(shù)據(jù)分析等場景，高算力下的海量數(shù)據(jù)存儲性能日益成為制約業(yè)務(wù)發(fā)展的瓶頸。第二是業(yè)務(wù)數(shù)據(jù)的超大規(guī)模已是常態(tài)，而現(xiàn)有的存儲模式顯然難以滿足，比如基于開源存儲軟件的方案，會(huì)遇到節(jié)點(diǎn)規(guī)模擴(kuò)展后性能低遠(yuǎn)于預(yù)期、擴(kuò)展后難以符合設(shè)計(jì)預(yù)期、版本更新快且難于在線升級、運(yùn)維復(fù)雜等各類意想不到的問題。最后是要實(shí)現(xiàn)項(xiàng)目總體上的降本增效，業(yè)務(wù)數(shù)據(jù)要能夠做到線上線下按需流動(dòng)，充分享受云上計(jì)算和存儲資源的廉價(jià)。以自動(dòng)駕駛業(yè)務(wù)的需求為例，典型的以數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)量變的新產(chǎn)業(yè)，L4級自動(dòng)駕駛需要大約300PB~500PB的路采數(shù)據(jù)，但是更多的場景數(shù)據(jù)能提升模型的精準(zhǔn)度。此外，業(yè)務(wù)所需的高精地圖和測繪數(shù)據(jù)是涉密的，按照保密要求必須保持在合規(guī)的私有化環(huán)境中。而機(jī)器學(xué)習(xí)可按需按時(shí)采用公有云上大量的GPU服務(wù)器資源，同時(shí)需要云上和云下的數(shù)據(jù)互通來驅(qū)動(dòng)訓(xùn)練任務(wù)的開展。

大數(shù)據(jù)存算分離應(yīng)用場景實(shí)踐

隨著大數(shù)據(jù)應(yīng)用被越來越廣泛的應(yīng)用到互聯(lián)網(wǎng)企業(yè)、金融、運(yùn)營商等行業(yè)，并逐步成為業(yè)務(wù)發(fā)展的主要推動(dòng)力。這就帶來用戶數(shù)據(jù)量的指數(shù)級增長，數(shù)據(jù)的規(guī)模已經(jīng)突破之前的預(yù)期，這不僅帶來高額的成本，同時(shí)原有的數(shù)據(jù)存儲技術(shù)架構(gòu)也不能有效地支撐大數(shù)據(jù)業(yè)務(wù)，進(jìn)而影響到業(yè)務(wù)的創(chuàng)新。為了解決新業(yè)務(wù)形態(tài)下存儲模式面臨的挑戰(zhàn)，越來越多的客戶選擇了存算分離的方式。

存算分離需要解決用戶面臨的三大難題：業(yè)務(wù)運(yùn)行慢、系統(tǒng)維護(hù)難、存儲方案貴。首先，當(dāng)前采用的HDFS存儲的設(shè)計(jì)存在內(nèi)存占用高、使用粗粒度的全局鎖、以及對小文件的處理效率低、數(shù)據(jù)處理的過程出現(xiàn)延時(shí)高的問題。其次，HDFS存儲僅能支持?jǐn)?shù)億級別的文件數(shù)，超過之后一方面需要做深度優(yōu)化提升，另一方面是采用新的版本來提升對文件數(shù)的支持，而新版本的穩(wěn)定性通常比較差，帶來系統(tǒng)級的運(yùn)維難題。最后是HDFS的存算一體和三副本機(jī)制，使得存儲空間的利用率低于33%，且擴(kuò)容時(shí)必須計(jì)算節(jié)點(diǎn)和存儲節(jié)點(diǎn)放在一起，導(dǎo)致數(shù)據(jù)規(guī)模越大存儲方案需要的資金投入就越高。

金山云混合云存算分離解決方案，提供三種靈活的大數(shù)據(jù)對接模式：一是基于具備緩存加速能力的大數(shù)據(jù)存儲網(wǎng)關(guān)組件，二是采用定制優(yōu)化的Hadoop sdk對象存儲插件，三是使用標(biāo)準(zhǔn)的s3a協(xié)議，滿足不同應(yīng)用場景下大數(shù)據(jù)生態(tài)軟件對接存儲的性能和功能需求。其中大數(shù)據(jù)存儲網(wǎng)關(guān)組件，不僅兼容HDFS協(xié)議，還支持全局緩存和統(tǒng)一命名空間，提供彈性伸縮的數(shù)據(jù)存儲能力。對于計(jì)算類應(yīng)用，可以提供很好的數(shù)據(jù)本地化或加速數(shù)據(jù)I/0性能；對于后端的持久化存儲系統(tǒng)，可通過統(tǒng)一命名空間功能融合多套異構(gòu)的存儲系統(tǒng)，且對前端計(jì)算框架的使用做到透明。

通過在頭部商業(yè)銀行的交付實(shí)踐表明，金山云混合云存儲分離解決方案在性能、兼容性、成本、以及規(guī)模化擴(kuò)展能力等方面得到認(rèn)可，并在行內(nèi)廣泛推廣，促進(jìn)大數(shù)據(jù)類業(yè)務(wù)的創(chuàng)新和引領(lǐng)行業(yè)的技術(shù)發(fā)展趨勢。

機(jī)器學(xué)習(xí)應(yīng)用場景實(shí)踐

通過深入分析機(jī)器學(xué)習(xí)場景下各流程環(huán)節(jié)對存儲的需求點(diǎn)可以發(fā)現(xiàn)，用戶對存儲的需求有如下四點(diǎn)。首先是性能，即是否能以最快速度和最優(yōu)成本滿足自動(dòng)駕駛不同流程環(huán)節(jié)的數(shù)據(jù)高速讀寫的要求。第二是擴(kuò)展性，系統(tǒng)整體擴(kuò)展能力和擴(kuò)展的便捷性，決定了系統(tǒng)是否支撐未來2~3年的業(yè)務(wù)增長對存儲系統(tǒng)的容量需求。第三是云原生的需求，機(jī)器學(xué)習(xí)的場景下，一定會(huì)基于云原生平臺來構(gòu)建業(yè)務(wù)運(yùn)行體系，這就需要存儲系統(tǒng)提供CSI容器存儲接口(CSI：Container Storage Interface)插件，并且具備CSI存儲插件的高可用和故障自愈等能力，在確保數(shù)據(jù)安全性的同時(shí)，全面提升存儲服務(wù)的可用性。第四是成本因素，希望降低長期存儲運(yùn)營成本，實(shí)現(xiàn)冷熱數(shù)據(jù)的分離，冷數(shù)據(jù)的存儲成本能進(jìn)一步降低，優(yōu)化數(shù)據(jù)生命周期過程的每TB成本。

結(jié)合用戶的需求以及對存儲系統(tǒng)的長期實(shí)踐，金山云針對機(jī)器學(xué)習(xí)場景下推出三種混合云存儲解決方案，涵蓋文件存儲、對象存儲以及相應(yīng)的高性能存儲網(wǎng)關(guān)產(chǎn)品。一是為中小型客戶提供一體化文件存儲系統(tǒng)，完全具備支撐機(jī)器學(xué)習(xí)的功能特性和性能，并具備良好的性價(jià)比。二是針對性能有極高性能要求的用戶，金山云提供基于全閃存的文件存儲解決方案，性能上支持?jǐn)?shù)百GB的大吞吐量和亞毫秒級的低延時(shí)。三是面向泛互和公共服務(wù)領(lǐng)域的用戶，則推薦高性能存儲網(wǎng)關(guān)+大容量對象存儲的解決方案，構(gòu)建起存儲資源池，實(shí)現(xiàn)機(jī)器學(xué)習(xí)、大數(shù)據(jù)分析、云原生應(yīng)用數(shù)據(jù)的統(tǒng)一化存儲。

在金山云的項(xiàng)目實(shí)踐中，機(jī)器學(xué)習(xí)的數(shù)據(jù)量已超過百PB以上，主要是超大規(guī)模的視頻圖片類數(shù)據(jù)，并且每年保持著高速的增長。同時(shí)，該用戶內(nèi)部有很多關(guān)聯(lián)業(yè)務(wù)系統(tǒng)，對于在線日志保存、大數(shù)據(jù)分析、數(shù)據(jù)歸檔等都有存儲需求，更重要的是機(jī)器學(xué)習(xí)已成為驅(qū)動(dòng)主營業(yè)務(wù)的關(guān)鍵要素。金山云憑借本地對象存儲資源池加上高性能的存儲網(wǎng)關(guān)，提供了機(jī)器學(xué)習(xí)的整套存儲解決方案，解決存儲的性能瓶頸，降低運(yùn)營成本，幫助用戶實(shí)現(xiàn)了新業(yè)務(wù)的快速上線，并驅(qū)動(dòng)核心業(yè)務(wù)的不斷創(chuàng)新。

讓混合云存儲的特質(zhì)驅(qū)動(dòng)業(yè)務(wù)創(chuàng)新

為構(gòu)建數(shù)據(jù)驅(qū)動(dòng)型組織的核心競爭力，各行各業(yè)創(chuàng)新性地對業(yè)務(wù)進(jìn)行優(yōu)化和改造，提升業(yè)務(wù)敏捷性和服務(wù)化能力，同時(shí)選擇適合自身業(yè)務(wù)的數(shù)據(jù)存儲方式，來釋放海量數(shù)據(jù)的潛在價(jià)值，提升數(shù)據(jù)在業(yè)務(wù)間的流轉(zhuǎn)能力，并實(shí)現(xiàn)降本增效的目標(biāo)。作為中國云服務(wù)市場的領(lǐng)導(dǎo)者之一，金山云在混合云存儲產(chǎn)品與解決方案已得到金融、運(yùn)營商、泛互企業(yè)、公共服務(wù)等用戶端的正式商用和服務(wù)認(rèn)可，將持續(xù)幫助用戶解決在業(yè)務(wù)轉(zhuǎn)型過程中面臨的各種數(shù)據(jù)存儲挑戰(zhàn)，充分釋放數(shù)據(jù)價(jià)值，驅(qū)動(dòng)業(yè)務(wù)的高速增長。

金山云云存儲產(chǎn)品負(fù)責(zé)人表示：混合云存儲作為金山云存儲業(yè)務(wù)重點(diǎn)的發(fā)展方向，聚焦在云原生應(yīng)用、大數(shù)據(jù)分析、自動(dòng)駕駛、機(jī)器視覺等新型應(yīng)用場景。依托于公司的云存儲技術(shù)棧和云上存儲服務(wù)的業(yè)務(wù)實(shí)踐，結(jié)合企業(yè)級用戶在業(yè)務(wù)對接、安全合規(guī)、極簡運(yùn)維等方面的需求，金山云將不斷完善混合云存儲產(chǎn)品線，豐富功能特性，促進(jìn)云與端之間數(shù)據(jù)的互相流轉(zhuǎn)，讓混合云存儲的特質(zhì)惠及云上云下的用戶。

展望未來，金山云混合云存儲一方面將持續(xù)不斷地構(gòu)建高性能、高彈性、易運(yùn)維的產(chǎn)品核心競爭力，另一方面將與頭部用戶及行業(yè)ISV攜手共創(chuàng)，率先在業(yè)內(nèi)推出創(chuàng)新性的云原生存儲解決方案，攜手生態(tài)合作伙伴共同推進(jìn)混合云存儲市場規(guī)模的高速發(fā)展。