即使不了解云,但在剛剛過去的618里,你或許會注意到,以往下單“卡機(jī)”、加載頁面等待漫長的情況似乎已經(jīng)減少了許多。
支撐著數(shù)億消費(fèi)者點(diǎn)下“支付”的那一刻,是云計(jì)算的典型應(yīng)用場景——成千上萬的服務(wù)器算力被瞬時調(diào)用起來,連接著銀行、電商平臺、消費(fèi)者,保證所有計(jì)算任務(wù)都能夠順利完成。
而如今,除了電商,越來越多的場景需要巨量算力:移動支付、游戲、影視……底層云計(jì)算技術(shù)的進(jìn)步,讓天馬行空的許多想象得以在互聯(lián)網(wǎng)中實(shí)現(xiàn)。
打造這個理想世界如同長征,云計(jì)算技術(shù)發(fā)展的千里之行,也是始于足下。
一、從“搬上云”到“長于云”
過去十年中,互聯(lián)網(wǎng)由PC時代、移動時代再到如今的5G時代,浪潮背后,離不開云計(jì)算技術(shù)的普及和快速發(fā)展。
互聯(lián)網(wǎng)的本質(zhì)就是一場技術(shù)“普惠”運(yùn)動。在移動互聯(lián)網(wǎng)時代,人們常將互聯(lián)網(wǎng)分為上半場和下半場。在上半場,手機(jī)終端的普及帶來了移動互聯(lián)網(wǎng)的繁榮,真正做到了讓技術(shù)普及到每個普通人身上。
而在底層,云計(jì)算技術(shù)也在同步完成革新,讓算力真正實(shí)現(xiàn)普惠。
云計(jì)算于2006年被提出,在發(fā)展的第一個十年里經(jīng)歷了從無到有的高速增長。以往,企業(yè)基礎(chǔ)設(shè)施的初期建設(shè)成本、電費(fèi)、運(yùn)營和網(wǎng)絡(luò)維護(hù)都是不菲的支出。但有了云計(jì)算后,即使是初出茅廬的小企業(yè),也能夠擁有和大企業(yè)一樣的計(jì)算能力,將業(yè)務(wù)“搬上云”。
隨著時間的推移,移動互聯(lián)網(wǎng)完成人與人的單點(diǎn)連接后,接力棒交給下半場——產(chǎn)業(yè)數(shù)字化轉(zhuǎn)型。以Docker為代表的容器技術(shù)在2013年左右開始普及,這相當(dāng)于讓云計(jì)算來到了2.0階段,企業(yè)從將業(yè)務(wù)“搬上云”到業(yè)務(wù)“長于云”。
而2020年開始的疫情加速了數(shù)字化轉(zhuǎn)型的一切進(jìn)程。“疫情,可以說讓企業(yè)數(shù)字化轉(zhuǎn)型進(jìn)程加速起碼5年。”一位數(shù)字化轉(zhuǎn)型服務(wù)商曾對36氪表示。
在后疫情時代,Web3.0、5G等新技術(shù)繼續(xù)風(fēng)風(fēng)火火地落地,人們開始暢想更加自由而有趣的虛擬世界,在這背后需要強(qiáng)有力的AI、大數(shù)據(jù)技術(shù)的支持。產(chǎn)業(yè)互聯(lián)網(wǎng)轉(zhuǎn)型也將更加深入,無論是金融、制造,還是能源等傳統(tǒng)行業(yè),都在經(jīng)歷一場十年未有之大變革——算力更為陡峭的成長曲線,幾乎已經(jīng)成為必然。
技術(shù)革新的速度還會更快,這對云上的“基礎(chǔ)設(shè)施”而言,也是一場真金淬火的試煉。
二、打好“云上地基”,存儲變革正當(dāng)時
從PC時代到現(xiàn)在的5G時代,云計(jì)算在互聯(lián)網(wǎng)普及上發(fā)揮著不可或缺的作用。回溯這段波瀾壯闊的時期,也正是國內(nèi)廠商踏上自研之路,攀登技術(shù)天梯的十年。
南京鵬云網(wǎng)絡(luò)科技有限公司(以下簡稱:鵬云網(wǎng)絡(luò))就是攀登這一天梯的團(tuán)隊(duì)之一。從成立到現(xiàn)在,鵬云網(wǎng)絡(luò)走過的十年,也伴隨著云計(jì)算市場從拓荒期走向繁榮期。
時間回到2014年夏天,南京,正值酷暑時節(jié)。
鵬云網(wǎng)絡(luò)創(chuàng)始人兼CEO陳靚正帶著團(tuán)隊(duì),在南京開始存儲軟件的研發(fā)。在一個架構(gòu)的問題上,陳靚和團(tuán)隊(duì)苦惱了整整一個月——每一天,大家都待在一起,討論該如何設(shè)計(jì)產(chǎn)品架構(gòu),但都不得其法。
“如果當(dāng)時這個問題沒有解決,感覺是真的走不下去了,最后的靈感迸發(fā),都建立在前期無數(shù)的探索之中。”陳靚對36氪回憶道。
一個月后的某個清晨,陳靚在炎熱中醒來,靈光閃現(xiàn)。小跑趕到公司后,他打開電腦寫下思路,經(jīng)過團(tuán)隊(duì)討論,架構(gòu)問題終于順利得到解決。在鵬云網(wǎng)絡(luò)團(tuán)隊(duì)研發(fā)產(chǎn)品期間,類似這樣量變達(dá)到質(zhì)變的時刻,并不在少數(shù)。
創(chuàng)立鵬云網(wǎng)絡(luò)之前,陳靚在美國學(xué)習(xí)工作多年,曾就職于貝爾實(shí)驗(yàn)室、亞馬遜等全球知名企業(yè),在亞馬遜 AWS 長期擔(dān)任核心架構(gòu)師,帶領(lǐng)團(tuán)隊(duì)進(jìn)行 S3 云存儲系統(tǒng)深度優(yōu)化,并主持 Glacier 存儲系統(tǒng)的設(shè)計(jì)和研發(fā)。
當(dāng)時,國外云計(jì)算市場發(fā)展得蒸蒸日上。反觀國內(nèi),隨著互聯(lián)網(wǎng)的發(fā)展,市場上已存在海量數(shù)據(jù),但存儲卻還處于早期,這讓陳靚動起了回國創(chuàng)業(yè)的念頭。
2013年,云計(jì)算圈子里一句流行的話是“云在天上飄”。大家都清楚這是未來的技術(shù)趨勢,但是都在摸索如何能讓云落地,無論是技術(shù)還是人才,國內(nèi)市場都還處在拓荒階段。不過,回國后遇到的困難,還是遠(yuǎn)超陳靚團(tuán)隊(duì)的想象。
“存儲系統(tǒng)屬于基礎(chǔ)軟件,研發(fā)周期長、難度大,這就導(dǎo)致自主研發(fā)并不是大多數(shù)人敢走的路。”陳靚說到。2014年開始,在國內(nèi)云存儲賽道中,出現(xiàn)了不少選擇開源路線的公司,但這并沒有動搖鵬云網(wǎng)絡(luò)自主研發(fā)的戰(zhàn)略。陳靚表示,堅(jiān)定自主研發(fā),主要是因?yàn)榭匆娺^國外存儲系統(tǒng)所走過的歷程——早在10年前,國外的互聯(lián)網(wǎng)大公司在底層存儲產(chǎn)品上幾乎都是自研。
而陳靚在AWS工作期間,就已經(jīng)意識到開源路線當(dāng)時所存在的許多局限性。更重要的還在于國內(nèi)外截然不同的市場屬性、企業(yè)文化、政策等許多因素,注定國內(nèi)客戶在采購云這件事情上,會更考慮穩(wěn)定可靠、自主可控。
從公司成立到研發(fā)出穩(wěn)定、能商用的第一款云存儲產(chǎn)品,鵬云網(wǎng)絡(luò)用了四年。自主架構(gòu)讓產(chǎn)品更穩(wěn)定,在性能上基本是當(dāng)時同類產(chǎn)品的2~5倍。“當(dāng)時團(tuán)隊(duì)的感覺,就是從至暗時刻,到突然看到巨大的光明未來。”陳靚說到。
發(fā)展至今,鵬云網(wǎng)絡(luò)已自主研發(fā)出ZettaStor系列存儲產(chǎn)品,其中包含了統(tǒng)一文件服務(wù)平臺FileCloud、分布式塊存儲系統(tǒng)DBS、分布式對象存儲系統(tǒng)DOS等多個產(chǎn)品。在商業(yè)落地上,鵬云網(wǎng)絡(luò)也參考國內(nèi)市場現(xiàn)狀,快速進(jìn)行布局。目前,鵬云網(wǎng)絡(luò)已經(jīng)服務(wù)了20多個重點(diǎn)行業(yè),超過200多家重點(diǎn)客戶。
鵬云網(wǎng)絡(luò)生態(tài)場景服務(wù)
這期間,用戶的用云需求也在不斷變化。2018年開始,To C端短視頻等風(fēng)口涌現(xiàn),大量異構(gòu)數(shù)據(jù)需要存儲,還有B端的產(chǎn)業(yè)數(shù)字化轉(zhuǎn)型,帶來的是巨量的算力需求。需求的變化,促使云計(jì)算產(chǎn)業(yè)快速革新,云計(jì)算從此步入云原生時代。
簡單而言,云原生是以容器、微服務(wù)、DevOps等技術(shù)為基礎(chǔ)建立的一套云技術(shù)產(chǎn)品體系,在云原生架構(gòu)下,可充分發(fā)揮彈性和分布式優(yōu)勢,實(shí)現(xiàn)快速部署、按需伸縮、不停機(jī)交付等。可以說,云原生技術(shù)引領(lǐng)了云計(jì)算未來的方向。
陳靚敏銳地捕捉到,云原生技術(shù)將為云計(jì)算帶來顛覆性的改變。2020年開始,陳靚就帶領(lǐng)團(tuán)隊(duì),投入到云原生存儲的研發(fā)中。
當(dāng)下,國內(nèi)大多數(shù)廠商做云原生存儲的一大路線,是將上一代的分布式存儲進(jìn)行改造。但由于改造的存儲系統(tǒng)不是真正的云原生存儲,無法發(fā)揮出容器靈活、扁平、輕量的特點(diǎn),在性能上多有限制。云原生基金會(CNCF)的報(bào)告也指出,存儲已成為云原生技術(shù)能否持續(xù)發(fā)展的主要挑戰(zhàn)之一。
陳靚表示,運(yùn)用云原生技術(shù)的企業(yè)通常把數(shù)據(jù)放在本地存儲上,而云原生靈活的特性導(dǎo)致微服務(wù)會隨時在不同服務(wù)器間跳動,當(dāng)微服務(wù)跳動時,存儲在本地的數(shù)據(jù)就無法被訪問了。相對于本地存儲的不可靠性,分布式存儲可以很好的彌補(bǔ)這一劣勢,但分布式存儲的性能又沒有本地存儲高。所以,如何統(tǒng)一本地和分布式的數(shù)據(jù)存儲架構(gòu),充分發(fā)揮兩者的優(yōu)勢,成為了云原生存儲的痛點(diǎn)。
針對這一痛點(diǎn),鵬云網(wǎng)絡(luò)認(rèn)為需要完全構(gòu)造一個新的云原生存儲系統(tǒng),將不同的存儲架構(gòu)統(tǒng)一管理起來,而不是用傳統(tǒng)分布式存儲的產(chǎn)品形態(tài)。
多年分布式存儲自研所帶來的技術(shù)沉淀,是鵬云網(wǎng)絡(luò)敢于創(chuàng)新的底氣所在。歷經(jīng)1年多的自主研發(fā),鵬云網(wǎng)絡(luò)云原生存儲產(chǎn)品ZettaStor HASP(以下簡稱:HASP)于2022年1月正式發(fā)布。
HASP相當(dāng)于在不同的數(shù)據(jù)存儲系統(tǒng)之上,搭建了一層高性能管理平臺。由于架構(gòu)都是自主研發(fā),HASP能對數(shù)據(jù)存儲形態(tài)做全新定義,實(shí)現(xiàn)數(shù)據(jù)本地存儲與多種不同存儲類型(包括公有云的存儲)之間的讀寫交互,讓跨異構(gòu)存儲資源的數(shù)據(jù)自由流動。
此外,HASP通過提供標(biāo)準(zhǔn)的Linux文件系統(tǒng)接口,為云原生應(yīng)用屏蔽了不同數(shù)據(jù)存儲系統(tǒng)的差異。在使用時,用戶最直觀的感知是,只需在一個標(biāo)準(zhǔn)的文件系統(tǒng)之上進(jìn)行操作,對底層數(shù)據(jù)存儲系統(tǒng)的使用不感知。
數(shù)據(jù)在云上的移動更為靈活,這對底層存儲的性能要求也會更高。陳靚表示,選擇何種文件系統(tǒng)對HASP的性能有直接的影響。
“在HASP研發(fā)初期,我們對市面上所有的開源文件系統(tǒng)進(jìn)行了調(diào)研,發(fā)現(xiàn)沒有一款能充分發(fā)揮NVMe SSD/SCM/PM等高速存儲介質(zhì)的性能,所以我們決定,自研一個高性能文件系統(tǒng)引擎,單就該文件系統(tǒng)而言,可申請的專利就達(dá)近50項(xiàng)。”陳靚向36氪介紹到。
在使用了自研的文件系統(tǒng)后,HASP能夠?qū)?shù)據(jù)存儲的性能提升三倍,同時還能節(jié)省存儲資源,保證體驗(yàn)不下降。
陳靚以金融行業(yè)舉例。許多金融機(jī)構(gòu)對業(yè)務(wù)的穩(wěn)定性有極高要求,為了保證數(shù)據(jù)安全,會產(chǎn)生大量的冗余——也就是足夠多的備份。一份緩存日志數(shù)據(jù)進(jìn)入系統(tǒng)后,首先經(jīng)過中間件,再落到最底層的存儲系統(tǒng)中,每經(jīng)過一層,數(shù)據(jù)都將備份。但HASP通過將底層的不同存儲系統(tǒng)統(tǒng)一管理起來,可以減少數(shù)據(jù)冗余,這樣在保證了數(shù)據(jù)可靠性的同時又能提供更高的性能。現(xiàn)在,HASP已經(jīng)在鵬云網(wǎng)絡(luò)現(xiàn)有的金融客戶中進(jìn)行使用。
十年的技術(shù)積累,讓鵬云網(wǎng)絡(luò)在云原生時代大規(guī)模爆發(fā)之際,拿到了一張?zhí)崆暗拈T票。
三、掌握數(shù)據(jù),掌握未來
2010年的中國IT領(lǐng)袖峰會上,曾有一場里程碑式的討論,馬云、馬化騰和李彥宏都對云計(jì)算發(fā)表了自己的看法。其他兩位均對云計(jì)算技術(shù)持保守態(tài)度,但馬云直言:“這是客戶需要,如果阿里不做云計(jì)算,將來會死掉。”
如今,中國的技術(shù)發(fā)展也來到這一當(dāng)口。只不過,關(guān)鍵詞要換成“自主可控”。
早在2019年,國務(wù)院發(fā)展中心《中國云產(chǎn)業(yè)發(fā)展白皮書》就重點(diǎn)指出,到2023年,我國政府和企業(yè)上云率將超過60%,全棧自主可控云計(jì)算平臺將成為政府和大型企業(yè)的主流IT基礎(chǔ)設(shè)施。同時,我國云產(chǎn)業(yè)鏈長期存在著核心技術(shù)自主研發(fā)程度較低,創(chuàng)新、應(yīng)用生態(tài)系統(tǒng)建設(shè)滯后的突出問題。
三年過去,“自主可控”更加箭在弦上。現(xiàn)在的數(shù)據(jù),無論是所有權(quán)、存儲、運(yùn)輸,都成為國家安全的重中之重。所有人都能感受到近兩年的風(fēng)向變化——疫情、國際關(guān)系、經(jīng)濟(jì)動蕩……
今年3月,F(xiàn)igma斷供等事件也重重敲擊著行業(yè)——喊了多年的“去IOE”,國內(nèi)的軟件公司,準(zhǔn)備好承接這一切了嗎?在未來越來越難以捉摸的時候,能抓住的只有當(dāng)下。自上層政策到具體落地,中國云產(chǎn)業(yè)的大船正在緩緩轉(zhuǎn)向。
“如今客戶側(cè)的態(tài)度有明顯變化,自主可控的意識自不必說,更重要的是客戶的辨識度也在迅速提升。”陳靚對36氪介紹。
尤其在中高端市場,鵬云網(wǎng)絡(luò)逐漸感受到客戶對自主架構(gòu)“更懂行”,更注重系統(tǒng)穩(wěn)定性以及產(chǎn)品架構(gòu)是否真的由廠商自主研發(fā),如果不是,會大大影響客戶的采購意愿。
陳靚認(rèn)為,中國云計(jì)算10年發(fā)展的進(jìn)步,讓鵬云網(wǎng)絡(luò)來到一個爆發(fā)前的節(jié)點(diǎn)。
鵬云網(wǎng)絡(luò)已經(jīng)為未來做好準(zhǔn)備。目前,鵬云網(wǎng)絡(luò)完成了覆蓋國產(chǎn)軟件全產(chǎn)業(yè)鏈的適配,包括飛騰、兆芯、龍芯、申威等芯片,麒麟、UOS等操作系統(tǒng)。“國內(nèi)的云市場將會走出和國外非常不一樣的道路——在公有云發(fā)展多年后,如今對‘自主可控’的要求,會讓正在轉(zhuǎn)型的大量企業(yè)考慮混合云、私有云架構(gòu),這對存儲產(chǎn)品的性能要求更高,也是鵬云網(wǎng)絡(luò)瞄準(zhǔn)的未來機(jī)遇。”陳靚表示。
同時,算力的提升,也為經(jīng)濟(jì)發(fā)展提供強(qiáng)大助力。今年3月,由IDC、浪潮信息、清華大學(xué)全球產(chǎn)業(yè)研究院聯(lián)合編制的報(bào)告顯示,計(jì)算力指數(shù)平均每提高1點(diǎn),數(shù)字經(jīng)濟(jì)和GDP將分別增長3.5‰和1.8‰。
可以想象,鵬云網(wǎng)絡(luò)新推出的云原生存儲產(chǎn)品ZettaStor HASP,正勾畫出一幅未來云計(jì)算的藍(lán)圖。
隨著監(jiān)管變化、數(shù)據(jù)挖掘和應(yīng)用革新,企業(yè)更強(qiáng)調(diào)對數(shù)據(jù)的掌控,數(shù)據(jù)的生命周期被拉得更長,數(shù)據(jù)的基礎(chǔ)設(shè)施正在被重構(gòu)。鵬云網(wǎng)絡(luò)的產(chǎn)品,能夠讓數(shù)據(jù)靈活地在云間遷移,同時做到性能與穩(wěn)定并存。在金融、制造、能源等無數(shù)正在經(jīng)歷數(shù)字化轉(zhuǎn)型的行業(yè)里,數(shù)據(jù)將煥發(fā)出無窮的生命力。
征途無疑是遙遠(yuǎn)的。上世紀(jì)的Oracle于1977年成立,耗時超過30年才奠定在數(shù)據(jù)庫領(lǐng)域的巨頭地位;而1979年成立的EMC,也經(jīng)歷了十年左右的發(fā)展才打破IBM的一家獨(dú)大。對于存儲這個古老的行業(yè),唯有不斷創(chuàng)新、堅(jiān)持投入,才可能釀出時間的美酒。
在云計(jì)算的下一個十年,賽點(diǎn)變成“自主可控”,對所有國產(chǎn)廠商而言,這都是一場耐力賽。