以下為速記整理,未經(jīng)演講人審核:

存儲(chǔ)技術(shù)的發(fā)展演變

簡(jiǎn)單回顧存儲(chǔ)發(fā)展的歷程。我做存儲(chǔ)大概從2003年開(kāi)始到現(xiàn)在2019年, 16年時(shí)間。從80年代開(kāi)始的DAS、NAS到SAN,2000年以后開(kāi)始做Scale,2010年多了云存儲(chǔ)以后,最近的全閃存、軟件定義存儲(chǔ)還有云存儲(chǔ)雖然發(fā)展速度不是特別快,但是一個(gè)新的技術(shù),創(chuàng)新相對(duì)較多。最近這兩年我們覺(jué)得熱門的是全閃存或者說(shuō)分布式全閃存。

我關(guān)注的是AI技術(shù)和存儲(chǔ)相結(jié)合,AI管理存儲(chǔ)相對(duì)較多一點(diǎn)。

存儲(chǔ)人關(guān)于軟件定義存儲(chǔ)、分布式存儲(chǔ)、超融合存儲(chǔ)、智能存儲(chǔ)定義可能會(huì)混淆,這里我們不講定義,只澄清以下幾點(diǎn)。

軟件定義存儲(chǔ),我們現(xiàn)在默認(rèn)是分布式存儲(chǔ),但并非如此。首先第一點(diǎn)軟件定義存儲(chǔ)不一定是分布式的。以前我們認(rèn)為存儲(chǔ)是大的硬件盒子,大家交付的就是這個(gè)。但現(xiàn)在不是,我們有標(biāo)準(zhǔn)服務(wù)器架構(gòu),不管X86還是國(guó)產(chǎn)化平臺(tái),它的核心從硬件轉(zhuǎn)變到軟件定義存儲(chǔ),第一點(diǎn)我們要明確,軟件定義存儲(chǔ)并不一定是分布式存儲(chǔ)。

第二點(diǎn)什么是分布式存儲(chǔ)?我從2000年開(kāi)始接觸分布式存儲(chǔ),以前很多年沒(méi)有熱起來(lái),在2010年之后趕上云計(jì)算火起來(lái)了。分布式存儲(chǔ)現(xiàn)在可以是對(duì)象存儲(chǔ)、塊存儲(chǔ),以前狹義的存儲(chǔ)概念。

第三點(diǎn)是超融合,我們稱2010年是超融合元年,現(xiàn)在SDS和全閃存勢(shì)頭略蓋過(guò)它,國(guó)內(nèi)有做超融合的廠商,也有做SDS的,界定清晰。但我要說(shuō)的一點(diǎn)是,超融合里核心東西是軟件定義存儲(chǔ)。它與軟件定義存儲(chǔ)密不可分。

因此,大家都在討論什么叫超融合,我說(shuō)了三個(gè)完全——完全軟件定義、完全虛擬化、完全分布式。其實(shí)現(xiàn)在很多架構(gòu)我們都叫超融合,但按這個(gè)概念不是,它要求你啟一個(gè)虛擬機(jī)都可以,但是我們的存儲(chǔ)軟件和虛擬化軟件是并行存在的,按照目前的架構(gòu)首先必須有虛擬化,然后才是超融合。

第四點(diǎn)智能存儲(chǔ),最近我們跟學(xué)術(shù)界、工業(yè)界結(jié)合比較緊密,我在讀書(shū)的時(shí)候叫數(shù)據(jù)挖掘,現(xiàn)在大家更多提AI,所以我們最近考慮一個(gè)事情把人工智能技術(shù),深度學(xué)習(xí)、機(jī)器學(xué)習(xí),包括統(tǒng)計(jì)和數(shù)據(jù)挖掘,智能化運(yùn)維,包括怎么構(gòu)建安全的存儲(chǔ)體系,以及智能化調(diào)度,目前我們關(guān)注點(diǎn)在這個(gè)角度多一點(diǎn)。

SDS軟件存儲(chǔ)已經(jīng)成為市場(chǎng)主流

SDS軟件存儲(chǔ)已經(jīng)成為主流,大家說(shuō)SDS超融合要“革”傳統(tǒng)存儲(chǔ)的命,通過(guò)IDC的報(bào)告說(shuō)明幾個(gè)問(wèn)題,軟件定義存儲(chǔ)包括超融合,這兩個(gè)占比接近35%,已經(jīng)占到1/3。一個(gè)狀態(tài)是軟件定義存儲(chǔ)已經(jīng)成為市場(chǎng)主流,從前我們沒(méi)有明確,但現(xiàn)在浪潮也在明確說(shuō)軟件定義存儲(chǔ)成為市場(chǎng)主流。

如圖客觀來(lái)看,文件存儲(chǔ)已經(jīng)很多年,過(guò)去、現(xiàn)在、未來(lái),仍在市場(chǎng)中占大頭,大家的預(yù)測(cè)也是如此,未來(lái)占一半以上。未來(lái)文件+對(duì)象是存儲(chǔ)的主力軍。

塊存儲(chǔ),以前我們講的是SAN數(shù)據(jù)庫(kù)要有,應(yīng)用系統(tǒng)要有。未來(lái)虛擬化、虛擬機(jī)、數(shù)據(jù)庫(kù)要快,其他更多是非研發(fā)數(shù)據(jù)。我們看這張圖,紅色部分永遠(yuǎn)也不消失,在一些非常核心的系統(tǒng)里,金融、電信核心系統(tǒng)里,這個(gè)系統(tǒng)仍然保留,關(guān)注核心是穩(wěn)定性,包括性能平穩(wěn)性。

這張圖是中國(guó)軟件市場(chǎng)預(yù)測(cè),每年大概有十幾個(gè)億,但增長(zhǎng)速度很快,就像一個(gè)小孩一樣,不怕它現(xiàn)在很小,長(zhǎng)的速度很快,這幾個(gè)代表為什么SSD成為市場(chǎng)主流。

我們做SDS,不能天天只認(rèn)識(shí)自己,要對(duì)外邊世界有了解。這張圖我比較喜歡用,2017年的圖,有點(diǎn)老但基本狀態(tài)還是挺對(duì)的。剛才和大家講的廠商基本都在里邊。不管傳統(tǒng)廠商、軟件定義、新型廠商也好,在開(kāi)源系統(tǒng)里大家都在講SDS,目前在開(kāi)源里占了比較重的比例。

我們感興趣的幾個(gè)公司在文件(FILE)這個(gè)象限里,像WEKA? IO是代表下一代SDS的公司,它們可能有的關(guān)注高性能計(jì)算,有的關(guān)注混合云,有的關(guān)注全閃存。國(guó)內(nèi)這樣的企業(yè)反正我沒(méi)看見(jiàn),我們的創(chuàng)新能力還遠(yuǎn)遠(yuǎn)不夠,而且我們國(guó)內(nèi)有一個(gè)特點(diǎn),開(kāi)源基礎(chǔ)上做的比較多,美國(guó)公司開(kāi)源部分占了很小的部分,大部分都是自己做。因此必須要認(rèn)清美國(guó)領(lǐng)先我們的形勢(shì),如果沒(méi)有開(kāi)源大家可以想象,我們今天有沒(méi)有這個(gè)會(huì)還不確定。

關(guān)于開(kāi)源SDS系統(tǒng)

開(kāi)源存儲(chǔ)有哪些系統(tǒng)?現(xiàn)在比較熱門是標(biāo)紅的四個(gè),Minio非常有特點(diǎn),它們覺(jué)得以前的架構(gòu)有很多問(wèn)題,做了很多深刻變革,大家可以關(guān)注一下。Lustre在高性能運(yùn)算上,目前誰(shuí)都替代不了。BeeGFS有段時(shí)間特別想替換Lustre,但不行。我是2008年博士畢業(yè),當(dāng)時(shí)天天看Swift,那時(shí)候還不成熟,最開(kāi)始是想做軟件系統(tǒng)。

GlusterFS比較早一點(diǎn),后來(lái)什么都有,軟件優(yōu)勢(shì)可能好一點(diǎn),它想替換Lustre和TFS,但發(fā)現(xiàn)性能跟Lustre和TFS還是有一點(diǎn)區(qū)別。Lustre我之前也一直在研究,但覺(jué)得太復(fù)雜了。我比較喜歡簡(jiǎn)單的東西,當(dāng)然復(fù)雜的東西也有人喜歡。

除了這四個(gè),Alluxio和OpenSDS大家也可以關(guān)注一下,Alluxio,全類型的分布式系統(tǒng),之前中興把Alluxio加在前端。OpenSDS用于數(shù)據(jù)治理,后端可以對(duì)接很多存儲(chǔ)系統(tǒng),傳統(tǒng)的、非傳統(tǒng)的、非主流的都可以,主要進(jìn)行數(shù)據(jù)處理,包括調(diào)度、分析等。

標(biāo)藍(lán)部分是大家還在用,但熱度已經(jīng)不如以前了。像HDFS還是不錯(cuò)的,幾個(gè)灰色部分像FastDFS、TFS是以前淘寶的, Swift現(xiàn)在用戶越來(lái)越少了,這個(gè)是開(kāi)源架構(gòu)的情況。包括MongoDB是文檔型數(shù)據(jù)庫(kù),MongoDB前段時(shí)間爆發(fā)了很多安全問(wèn)題,被黑客攻擊了,這是整個(gè)開(kāi)源SDS系統(tǒng)狀態(tài),大家可以了解一下。

分布式存儲(chǔ)的優(yōu)勢(shì)

為什么我們要選擇分布式存儲(chǔ),傳統(tǒng)存儲(chǔ)不好嗎?的確傳統(tǒng)存儲(chǔ)有傳統(tǒng)的好處,分布式有分布式的好處,在我看來(lái)有幾點(diǎn)。

第一點(diǎn)傳統(tǒng)存儲(chǔ)容量,性能有上限。一個(gè)柜子空間有限,但分布式有一千個(gè)、一萬(wàn)個(gè)節(jié)點(diǎn),雖然沒(méi)有這么多,但整體擴(kuò)展性遠(yuǎn)遠(yuǎn)高于傳統(tǒng)存儲(chǔ),從這一點(diǎn)來(lái)講容量性能比傳統(tǒng)存儲(chǔ)有更高的表現(xiàn)。

第二點(diǎn)高可靠性。不存在任何單點(diǎn)故障,尤其在冷存儲(chǔ)里,可以做12+4,甚至更多,他的可靠性比較高,尤其在對(duì)象存儲(chǔ)里,包括視頻間里。

第三點(diǎn)彈性擴(kuò)展。最小部署,按需擴(kuò)容,但是擴(kuò)展也是比較痛苦的,不是一下就可以完成的,好在彈性擴(kuò)展是OK的。

第四定降低成本。你跟領(lǐng)導(dǎo)說(shuō)的很好,都很好就是很貴,肯定不干,秒秒鐘把你的方案否了,因此成本是決定你方案能不能采納的關(guān)鍵因素。

為什么SDS大行其道?

第一,硬件成熟了,放在十年以前,放在2011年以前,那時(shí)候大家覺(jué)得X86不是很靠譜,那時(shí)候跟他說(shuō)軟硬件存儲(chǔ),還無(wú)法實(shí)現(xiàn),但現(xiàn)在不一樣了。

第二點(diǎn)高速網(wǎng)絡(luò)發(fā)展,最開(kāi)始中國(guó)第一條互聯(lián)網(wǎng)帶寬是64KB/s,對(duì)比現(xiàn)在,10兆、百兆、千兆、萬(wàn)兆,10萬(wàn)兆都有了,網(wǎng)絡(luò)是一個(gè)很重要的支撐。帶寬也很重要,帶寬不行一切免談,網(wǎng)絡(luò)瓶頸消除之后分布式也沒(méi)問(wèn)題了。

第三點(diǎn)閃存的革新性。以前硬盤是瓶頸,網(wǎng)絡(luò)也快了,硬盤也快了,那就剩下存儲(chǔ)了。我記得96年的時(shí)候是80兆的硬盤,現(xiàn)在隨便弄個(gè)U盤都比它大很多。硬盤的發(fā)展速度是非常非常慢的,也就是這些年SSD出來(lái)了以后有了突破,但是那么多年都沒(méi)有太大的變化。因此閃存是一個(gè)革新的進(jìn)展,前面這三個(gè)跟硬件都有關(guān),主機(jī)、網(wǎng)絡(luò)、SSD。

第四點(diǎn)云化數(shù)據(jù)中心,你需要彈性、性能、融合、管理,這是一個(gè)比較軟的東西,沒(méi)有這些東西行不行?也行。但人總有更高的需求,希望這個(gè)東西越來(lái)越靈活、越來(lái)越簡(jiǎn)單、成本越來(lái)越低。其實(shí)如果沒(méi)有這些我們的運(yùn)維復(fù)雜一點(diǎn)也是OK的,但我們還是希望有,包括從裸機(jī)到虛擬機(jī)到現(xiàn)在的容器,使整個(gè)運(yùn)維、業(yè)務(wù)系統(tǒng)越來(lái)越輕,越來(lái)越簡(jiǎn)單,這也是為什么大家愿意用SDS。

SDS的應(yīng)用場(chǎng)景

SDS應(yīng)用場(chǎng)景有哪些?哪些場(chǎng)景比較適合?大家關(guān)注的什么場(chǎng)景都可以,那總是有些場(chǎng)景比較適合,有些場(chǎng)景不大適合。我覺(jué)得我們跟IDC報(bào)告比較統(tǒng)一,目前從三塊來(lái)看,第一塊是文件存儲(chǔ),典型的VSS視頻監(jiān)控、Media? Streaming、HPC,主要是這三個(gè)場(chǎng)景,圈比較大,說(shuō)明它的市場(chǎng)占有率比較高。

然后增長(zhǎng)率比較快,廣電以前一直很多圖片、音頻、視頻,但是它的增長(zhǎng)速度慢下來(lái)。最近AI、大數(shù)據(jù)、科學(xué)計(jì)算都在不斷增長(zhǎng),所以HPC又熱起來(lái)了。我以前在中科院的時(shí)候我們做高等物理的高清計(jì)算,現(xiàn)在是做實(shí)時(shí)運(yùn)算,所以對(duì)存儲(chǔ)要求越來(lái)越快。

還有視頻監(jiān)控,室內(nèi)路外各種監(jiān)控且保存時(shí)間越來(lái)越長(zhǎng),清晰度要求越來(lái)越高,因此要求你的容量、性能會(huì)越來(lái)越高,這個(gè)是需求比較大的問(wèn)題。目前主要以軟件為主,有些已經(jīng)支持定向存儲(chǔ)了,比如電信的全球眼、移動(dòng)的千里眼,廣電里有些系統(tǒng)也開(kāi)始對(duì)接定向存儲(chǔ),所以目前仍然以軟件為主,以及有些局部應(yīng)用在跟對(duì)象存儲(chǔ)對(duì)接。

前面也有同事講到,你切到什么對(duì)象業(yè)務(wù)是要變化的,因?yàn)橐郧敖涌谑沁@樣的,傳到對(duì)象存儲(chǔ)很多業(yè)務(wù)要改,尤其傳統(tǒng)業(yè)務(wù)好幾十年,誰(shuí)都不愿意動(dòng),我以前一個(gè)代碼寫了好幾十年了,沒(méi)有人敢動(dòng),業(yè)務(wù)也是一樣的。

第三點(diǎn)是塊存儲(chǔ),目前我們覺(jué)得主要在DB和VDI領(lǐng)域應(yīng)用較多,從中可以看到占比,這個(gè)是SDS目前主要應(yīng)用場(chǎng)景。

關(guān)于SDS新的市場(chǎng),未來(lái)有沒(méi)有新的應(yīng)用場(chǎng)景?包括最近講的比較多的容器,以及混合云和多云環(huán)境,全棧云、行業(yè)云、邊緣計(jì)算。行業(yè)對(duì)存儲(chǔ)要求越來(lái)越高,傳統(tǒng)存儲(chǔ)行不行?估計(jì)可以,但可能沒(méi)有SDS做的更好,尤其存儲(chǔ)還提出了更多要求。

比如說(shuō)全棧云,基礎(chǔ)設(shè)施要解決好,有了全棧云,你不僅要管存儲(chǔ)基礎(chǔ)架構(gòu),還要將底層硬件、生態(tài)做好,上面的應(yīng)用也要管,因此小型企業(yè)可能做不了,大型企業(yè)會(huì)從上到下垂直全做,有時(shí)候你的計(jì)算要找廠商做,存儲(chǔ)找另外的廠商做,業(yè)務(wù)再找個(gè)廠商做,而全棧云全包。最典型的應(yīng)用是行業(yè)云,針對(duì)某一個(gè)行業(yè)。

其實(shí)解決基礎(chǔ)設(shè)施相對(duì)容易,那搞一個(gè)行業(yè)應(yīng)用,我們對(duì)存儲(chǔ)很懂,但對(duì)應(yīng)用不懂,因此全棧云經(jīng)常也會(huì)有很多生態(tài)合作,一家很難做到很好,但未來(lái)這是一個(gè)比較新的產(chǎn)品形態(tài),之前我們說(shuō)自己是SDS、全閃存、超融合。這種一般小型廠商玩不起,怎么跟阿里、華為、浪潮PK?因此這種全棧云不適合我們,我們小型企業(yè)還是把自己的部分做好。但是對(duì)于存儲(chǔ)來(lái)說(shuō)是機(jī)會(huì)。

因?yàn)楫a(chǎn)品形態(tài)發(fā)生變化,所以整個(gè)場(chǎng)景也有變化,比如說(shuō)邊緣計(jì)算,尤其是5G,帶寬突破后,各種移動(dòng)設(shè)備全都活了,現(xiàn)在都講5G,實(shí)際的場(chǎng)景就是邊緣計(jì)算。比如說(shuō)帶寬大了以后,邊緣計(jì)算可以直接反饋到數(shù)據(jù)中心。比如說(shuō)電信有些監(jiān)控,直接回到數(shù)據(jù)中心。

SDS應(yīng)用典型誤區(qū):別自己挖坑把自己坑了

下面講一些SDS應(yīng)用典型誤區(qū),我們實(shí)踐中經(jīng)常遇到這種情況,我們老說(shuō)別自己挖的坑把自己埋了,因此給大家一些建議,也是我們實(shí)踐中遇到的問(wèn)題。

第一個(gè)需求過(guò)剩,本來(lái)需要一個(gè)釘子,結(jié)果非要搞一個(gè)非常全面的東西,本來(lái)只需要定向存儲(chǔ),結(jié)果看到文件也要,看到塊也要,一定要抓住關(guān)鍵需求,但是大家總是想有總比沒(méi)有好,但是有的時(shí)候有也是負(fù)擔(dān)。

第二個(gè)選型錯(cuò)誤,我剛才列了120家企業(yè),實(shí)際上更多,你是選開(kāi)源還是商業(yè),因此選型要選對(duì),選不對(duì)是因?yàn)槟阈枨蠖x錯(cuò)誤。常有客戶說(shuō)要存儲(chǔ),要1T,其它什么都不跟你講。跟他慢慢聊,然后他說(shuō)不知道。所以不管是客戶還是廠商,可能都犯過(guò)這樣的錯(cuò)誤,我們也犯過(guò)。

第三個(gè)配置不對(duì)。各種東西一堆,軟件有軟件的操作,硬件有硬件的操作,你不是專家很難搞定,有些操作我也搞不清楚。碰到很多客戶,開(kāi)始跑的時(shí)候沒(méi)問(wèn)題,結(jié)果跑了一段時(shí)間反映跟預(yù)測(cè)的不一樣,跟預(yù)測(cè)一樣就怪了,因?yàn)楸旧砭筒粚?duì)。

大家經(jīng)常喜歡改一些東西,可能針對(duì)某個(gè)東西有幫助,但可能會(huì)給其它部分帶來(lái)變化,所以你不懂不要?jiǎng)?,尤其?duì)存儲(chǔ),改了之后可能會(huì)有大事發(fā)生,因此對(duì)存儲(chǔ)一定要有敬畏之心,不要沒(méi)事瞎調(diào)。

第四點(diǎn)是運(yùn)維,大家用傳統(tǒng)存儲(chǔ)都習(xí)慣了說(shuō)不行重啟一下,人生病了多喝開(kāi)水,大家都喜歡重啟,完了發(fā)現(xiàn)后面就出問(wèn)題了。而且有的運(yùn)維對(duì)產(chǎn)品根本不了解,他很隨意的關(guān)機(jī)、重啟,我也遇到過(guò)很多出問(wèn)題的,好多都是人為的。所以現(xiàn)在為什么用AI,因?yàn)橐o助你做一些事情。

機(jī)器相對(duì)穩(wěn)定,人是根據(jù)自身的經(jīng)驗(yàn)和情緒判斷,差別很大。

SDS需求分析

接下來(lái)說(shuō)從需求分析開(kāi)始,日常提問(wèn)用戶的是應(yīng)用場(chǎng)景是什么?應(yīng)用負(fù)載有什么特點(diǎn)?容量是多少?文件大小是多少?是小塊的東西還是大塊的東西,是虛擬化應(yīng)用還是傳統(tǒng)應(yīng)用?

因此經(jīng)常用戶上來(lái)就說(shuō)我要個(gè)存儲(chǔ),然后你的合作伙伴告訴你他要個(gè)存儲(chǔ),然后添油加醋的跟你說(shuō)。因此想要了解用戶最初要什么?場(chǎng)景要搞清楚。有時(shí)候他直接說(shuō)性能是幾千萬(wàn)還是一個(gè)億,你想前面客戶端來(lái)1億,來(lái)10萬(wàn)個(gè),你肯定達(dá)不到,保證你崩潰掉,因此性能是有條件的,在某些條件下是完全達(dá)不到的。

存儲(chǔ)的特點(diǎn)是什么?你需要什么特性,你需要做軟件復(fù)制嗎?你需要做快照、克隆、重刪、壓縮、加密、歸檔嗎?是不是都需要?用戶總會(huì)需要新的需要,尤其是開(kāi)放的合作,要了這個(gè)又要那個(gè),有時(shí)候是你沒(méi)有的,所以你一定要搞清楚。

配置包括軟件配置和方案配置,一定要根據(jù)需求提供你的方案。

然后是部署,你是裸金屬、超融合還是分離部署,資源怎么分配?超融合的時(shí)候資源是什么樣的?一定要在前期想清楚。

再是選型,現(xiàn)在很多人問(wèn)選擇,第一點(diǎn)是你主要需求是什么?你需要單一的還是統(tǒng)一的,如果都需要就分清楚類型。我發(fā)現(xiàn)80-90%用戶需要單一存儲(chǔ),要不然需要一個(gè)對(duì)象、需要塊兒,同時(shí)需要的有沒(méi)有?有,但比例很小,其實(shí)有些用戶可以分開(kāi),從最佳實(shí)踐來(lái)看還是建議分開(kāi)。

然后架構(gòu),現(xiàn)在好多架構(gòu)有中心的和無(wú)中心的,有分布式中心的,不同特點(diǎn)要搞清楚。所以我們經(jīng)常說(shuō)局部有中心,比方說(shuō)塊有中心、無(wú)中心差別不是特別大,但是如果是文件有中心和無(wú)中心差別很大,尤其對(duì)源數(shù)據(jù)的保護(hù)。

關(guān)于協(xié)議,大家爭(zhēng)論比較多的標(biāo)準(zhǔn)協(xié)議,經(jīng)常國(guó)內(nèi)我們見(jiàn)到更多的是私有協(xié)議,私有協(xié)議在安全和性能方面要好一點(diǎn),但有兼容性問(wèn)題。所以大廠經(jīng)常用標(biāo)準(zhǔn)接口多一點(diǎn),國(guó)內(nèi)企業(yè)用私有協(xié)議比較多一點(diǎn)。我的建議是能用標(biāo)準(zhǔn)協(xié)議就用標(biāo)準(zhǔn)協(xié)議,別給自己找麻煩,有特定條件下用私有協(xié)議。

然后存儲(chǔ)特性,你的存儲(chǔ)特點(diǎn)是什么?I/O特性以及數(shù)據(jù)服務(wù),這些是存儲(chǔ)選型關(guān)注的,有些是不同產(chǎn)品的特性。可能每個(gè)產(chǎn)品無(wú)法百分之百達(dá)到這個(gè)要求,要抓住主要矛盾和主要需求。

另外是開(kāi)源存儲(chǔ)or商業(yè)存儲(chǔ),國(guó)內(nèi)覺(jué)得開(kāi)源獲取比較容易,不需要什么成本。其實(shí)搞錯(cuò)了,開(kāi)源需要你對(duì)用人的要求,定制開(kāi)發(fā)需要專業(yè)技術(shù)人員來(lái)做,我們發(fā)現(xiàn)成本不低,你做開(kāi)源要能折騰,要有專業(yè)的技術(shù)人員來(lái)做。

因此選擇開(kāi)源存儲(chǔ)需謹(jǐn)慎,必須要有自己專業(yè)的團(tuán)隊(duì),或者有廠商支持。比如說(shuō)我提供開(kāi)源軟件提供服務(wù)支持,如果你自己的團(tuán)隊(duì)你沒(méi)有支撐你要謹(jǐn)慎,商業(yè)產(chǎn)品給你提供的就是這些東西,保證你的質(zhì)量,保證你的服務(wù)。

SDS集群配置,有節(jié)點(diǎn)配置、系統(tǒng)配置、存儲(chǔ)集群。節(jié)點(diǎn)有CPU、Core、Mem,網(wǎng)絡(luò)資源有三網(wǎng)、高速、綁定,存儲(chǔ)網(wǎng)絡(luò)建議分開(kāi),因?yàn)榍岸撕蠖藭?huì)形成干擾,所以要三網(wǎng)分離。你需不需要更高速的網(wǎng)絡(luò),需要多網(wǎng)絡(luò)綁定。以及硬盤資源,你是全硬盤HDD、SSD還是RAID。

集群也是,在能控制情況下盡量多個(gè)集群,壓力是不一樣的。剛才也說(shuō)了上一定數(shù)量級(jí)是不一樣的,一般我們需要最佳實(shí)踐,我覺(jué)得一個(gè)集群控制在128個(gè)左右是比較舒服的,多了是給自己找事。

命名空間也是,有的是大空間池化,進(jìn)來(lái)一個(gè)節(jié)點(diǎn)全部池化,開(kāi)始做均衡,有些是分多組的,有些是聯(lián)合的,比方說(shuō)你用亞馬遜是分中國(guó)區(qū)還是美國(guó)、歐洲的,是分區(qū)的。策略也是冗余或者高可用,尤其是標(biāo)準(zhǔn)協(xié)議。

系統(tǒng)配置分硬件配置、軟件配置和存儲(chǔ)最佳實(shí)踐,這個(gè)完全是要靠你實(shí)踐。

幾個(gè)SDS應(yīng)用實(shí)踐建議:

關(guān)于SDS新發(fā)展方向探索,這張圖是2018年的,大家一般喜歡看上升,大家最不喜歡是下降的,一般創(chuàng)業(yè)公司都在上升的坡上,下面這個(gè)是成熟的生態(tài),上到高峰之后有一部分企業(yè)會(huì)垮掉,這張圖看不看都可以,有一個(gè)趨勢(shì)前面友商也講到,就是全閃存,分兩種趨勢(shì),一種是全閃存,一種是分布式全閃存,我們要做很多重構(gòu),包括傳統(tǒng)編制方法都要改變。比方說(shuō)以前我們是一個(gè)隊(duì)列,之前用的一些類似于新的介質(zhì)比方說(shuō)NVMe,現(xiàn)在整個(gè)都變了,所以門檻100微秒以內(nèi)的,以前是500微秒、200微秒,所以它是有一定門檻的。

第二點(diǎn),智能存儲(chǔ),全球都在講這個(gè)事情,最簡(jiǎn)單的就是智能化運(yùn)維,這是傳統(tǒng)廠商都在做的事情。把存儲(chǔ)引擎智能化,實(shí)現(xiàn)功能,通過(guò)人工智能技術(shù)來(lái)做,這個(gè)講的比較虛,因?yàn)楝F(xiàn)在還沒(méi)有人定義標(biāo)準(zhǔn),各家廠商做的都不一樣。

第三點(diǎn),安全。以前是被動(dòng)式的,現(xiàn)在想基于這個(gè)東西做主動(dòng)防御。比如說(shuō)數(shù)據(jù)庫(kù)應(yīng)用,哪一天覺(jué)得不對(duì),覺(jué)得有異常,我可能保護(hù),我稱之為主動(dòng)式防御,目前我們?cè)谧鲞@方面的工作,首先要識(shí)別正常的I/O模型,異常的時(shí)候,觸發(fā)主動(dòng)措施。

關(guān)于TaoCloud/大道云行

最后簡(jiǎn)單做一下廣告,我們做什么事情,我們公司也是做軟件存儲(chǔ),我們跟其他廠商不一樣我們用三種產(chǎn)品做到存儲(chǔ),我們的文件是用S3/API、Object和EOSS,我們也有標(biāo)準(zhǔn)接口,文件提供標(biāo)準(zhǔn)接口,所以我們的接口比較全。

同時(shí)支持X86/飛騰、申威、龍芯,目前來(lái)看飛騰不錯(cuò),申威比它差一點(diǎn),目前我們做的工作是從數(shù)據(jù)到網(wǎng)卡,繞開(kāi)CPU,突破總帶寬,達(dá)到GB級(jí)的帶寬要求。

除了做正常管理還做了智能化運(yùn)維系統(tǒng)。上面也有幾個(gè)趨勢(shì),EB級(jí)存儲(chǔ),智能存儲(chǔ)、國(guó)產(chǎn)化存儲(chǔ)、混合云存儲(chǔ)。

我們現(xiàn)在做的工作,存儲(chǔ)的數(shù)據(jù)冷了以后可以歸檔到公有云存儲(chǔ),比方說(shuō)亞馬遜、阿里云,比方說(shuō)專注藍(lán)光存儲(chǔ)的華錄、紫晶,所以是一個(gè)分級(jí)和歸檔的功能。

但是我們也跟一些廠商直接把公有云存儲(chǔ)直接當(dāng)成我們軟件定義存儲(chǔ)的介質(zhì)來(lái)用。所以達(dá)到混合云生態(tài),這是我們整個(gè)生態(tài)目前,我們的特點(diǎn)是我們文件相對(duì)于做的好一點(diǎn),對(duì)象存儲(chǔ)做的比較有特點(diǎn),塊存儲(chǔ)主要是在行業(yè)里國(guó)產(chǎn)化的來(lái)做。

最后跟大家分享一下這兩張圖,前段時(shí)間我們公司開(kāi)一個(gè)技術(shù)會(huì)議也是這樣的,前途是光明的,道路是曲折的,SDS的發(fā)展之路是這樣的,想象很美好,但是中間有各種問(wèn)題要解決。但是也沒(méi)什么問(wèn)題,趨勢(shì)就是這樣的,趨勢(shì)是不可阻擋的,我們遇河搭橋,遇山開(kāi)路,但我們對(duì)存儲(chǔ)要有敬畏之心,存儲(chǔ)是很嚴(yán)謹(jǐn)?shù)氖虑?,我就講這么多,謝謝大家!

分享到

崔歡歡

相關(guān)推薦