只有昨天的縝密“謀略”，才能“維持”未來(lái)的穩(wěn)定。前不久，阿里云和中國(guó)計(jì)算機(jī)行業(yè)商會(huì)信息存儲(chǔ)與安全專業(yè)委員會(huì)邀請(qǐng)了阿里云、字節(jié)跳動(dòng)、華中科技大學(xué)的多位專家，共同講解存儲(chǔ)系統(tǒng)的運(yùn)維在數(shù)字經(jīng)濟(jì)時(shí)代。

一、減少延遲以防止系統(tǒng)性能發(fā)生較大變化

運(yùn)維的本質(zhì)是對(duì)網(wǎng)絡(luò)、服務(wù)器、服務(wù)的生命周期的各個(gè)階段進(jìn)行運(yùn)維，使其在成本、穩(wěn)定性、效率等方面達(dá)到可以接受的狀態(tài)。在ICT行業(yè)，運(yùn)維人員經(jīng)常調(diào)侃“運(yùn)維是對(duì)應(yīng)用的承諾，一輩子都不會(huì)放棄”。他們就像數(shù)據(jù)中心和公司中 IT 資源的管家、保安和消防員。

阿里云智能高級(jí)技術(shù)專家、對(duì)象存儲(chǔ)研發(fā)負(fù)責(zé)人羅清超對(duì)此深有體會(huì)。他回憶了過(guò)去阿里巴巴清大客戶要求延遲和振動(dòng)保護(hù)的情況，并強(qiáng)調(diào)當(dāng)云存儲(chǔ)服務(wù)請(qǐng)求延遲和振動(dòng)嚴(yán)重時(shí)，應(yīng)用程序的整體性能會(huì)發(fā)生過(guò)山車式的變化。

云端的請(qǐng)求延遲包括網(wǎng)絡(luò)延遲和存儲(chǔ)延遲。云服務(wù)的網(wǎng)絡(luò)非常復(fù)雜，包括BGP()和數(shù)據(jù)中心的靜態(tài)網(wǎng)段和網(wǎng)絡(luò)。識(shí)別影響延遲和合理調(diào)度的串?dāng)_點(diǎn)對(duì)于防止交通擁堵至關(guān)重要。

存儲(chǔ)服務(wù)還需要處理媒體訪問(wèn)的延遲。機(jī)械/SSD也是一個(gè)復(fù)雜的系統(tǒng)。壓力越大，延遲越高。尤其是在分布式存儲(chǔ)系統(tǒng)中it運(yùn)維技術(shù)，會(huì)帶來(lái)病毒傳染效應(yīng)。為了減少延遲抖動(dòng)，對(duì)象存儲(chǔ)OSS從快速監(jiān)控、精準(zhǔn)告警、根因分析、優(yōu)化調(diào)度入手，將延遲抖動(dòng)控制在合理的剩余范圍內(nèi)，保證良好的客戶體驗(yàn)。

華北理工大學(xué)研究員、博士生導(dǎo)師吳飛笑著說(shuō)，因?yàn)樽约簛?lái)自大學(xué)，沒有親身感受到運(yùn)維人員的壓力，但他明白7*24隨叫隨到的難度，被稱為永動(dòng)機(jī)。目前云存儲(chǔ)的可靠性要求是 11 個(gè) 9s。固態(tài)硬盤和傳統(tǒng)機(jī)械硬盤是云存儲(chǔ)中最基本的數(shù)據(jù)存儲(chǔ)單元，維護(hù)起來(lái)并不容易。后者的存儲(chǔ)介質(zhì)由閃存組成。原則上，閃存就像一扇門。每次打開都會(huì)生銹。在使用的過(guò)程中，難免會(huì)造成老化，逐漸吱吱作響，故障層出不窮；前者就像一扇門。機(jī)械機(jī)器不斷擺動(dòng)，但也有停止的時(shí)候。在由數(shù)千個(gè)固態(tài)硬盤或光驅(qū)組成的存儲(chǔ)系統(tǒng)中，要保證如此高的可靠性，運(yùn)維人員的壓力是顯而易見的。

二、智能運(yùn)維的大趨勢(shì)是隨著時(shí)間而變化的

“如果要完善新的基礎(chǔ)設(shè)施，首先要從運(yùn)維中受益?！痹谄髽I(yè)數(shù)字化的過(guò)程中，運(yùn)維是一門工夫。

字節(jié)跳動(dòng)數(shù)據(jù)庫(kù)存儲(chǔ)技術(shù)負(fù)責(zé)人張磊表示，從傳統(tǒng)的自動(dòng)化運(yùn)維，到人工運(yùn)維，再到AIOps智能運(yùn)維，運(yùn)維技術(shù)在過(guò)去十年實(shí)現(xiàn)了跨越式發(fā)展。開發(fā)。字節(jié)云數(shù)據(jù)庫(kù)云存儲(chǔ)整個(gè)運(yùn)維系統(tǒng)的開發(fā)過(guò)程大致分為三個(gè)階段。

第一階段是2016年，整體的數(shù)據(jù)庫(kù)和存儲(chǔ)量都不是很大，團(tuán)隊(duì)運(yùn)維還處于“刀陶”的狀態(tài)，也就是基本由人來(lái)完成。

第二階段為2017年至2021年，業(yè)務(wù)規(guī)?？焖侔l(fā)展。云存儲(chǔ)系統(tǒng)也達(dá)到了EB級(jí)別。數(shù)據(jù)庫(kù)的規(guī)模是上千甚至上萬(wàn)套數(shù)據(jù)庫(kù)。因此，運(yùn)維團(tuán)隊(duì)轉(zhuǎn)而建立一些人工運(yùn)維平臺(tái)，依靠這個(gè)平臺(tái)解決運(yùn)營(yíng)問(wèn)題。

第三階段是從2021年年中開始，構(gòu)建基于人工智能等技術(shù)的第三代運(yùn)維系統(tǒng)。將運(yùn)維人員的知識(shí)和經(jīng)驗(yàn)與大數(shù)據(jù)和機(jī)器學(xué)習(xí)技術(shù)相結(jié)合，融入運(yùn)維系統(tǒng)中替代人力，從而更大規(guī)模地解決運(yùn)營(yíng)效率問(wèn)題。

在這三個(gè)階段，整個(gè)業(yè)務(wù)系統(tǒng)的發(fā)展呈現(xiàn)出兩個(gè)能力的轉(zhuǎn)變：一是運(yùn)維的文化、組織和能力的提升。從運(yùn)維到系統(tǒng)，成立專職運(yùn)維SRE團(tuán)隊(duì)進(jìn)行運(yùn)維；另一方面，整個(gè)運(yùn)維體系和一些面向服務(wù)的技術(shù)體系也在不斷推進(jìn)，比如從最初的管理十臺(tái)服務(wù)器到今天管理了幾十萬(wàn)臺(tái)服務(wù)器，這是技術(shù)不斷演進(jìn)的支撐。系統(tǒng)?？偠灾\(yùn)維的文化和組織，以及運(yùn)維的技術(shù)體系，這兩條路徑是齊頭并進(jìn)的。

三、快速定位診斷問(wèn)題根源

隨著業(yè)務(wù)上云，運(yùn)維逐漸“云化”。資源監(jiān)控、終端管控、安全保障等運(yùn)維服務(wù)轉(zhuǎn)化為云應(yīng)用，企業(yè)可按需訂閱。

張磊表示，他普遍關(guān)注服務(wù)的黃金指標(biāo)，尤其是一些與穩(wěn)定性相關(guān)的黃金指標(biāo)，因?yàn)閷?duì)于小型在線服務(wù)來(lái)說(shuō)，穩(wěn)定性可能是第一位的。據(jù)悉，他更關(guān)注自己常年依賴的服務(wù)的一些技術(shù)演進(jìn)路徑，以便提前做好規(guī)劃，確保運(yùn)維/運(yùn)營(yíng)系統(tǒng)在技術(shù)或產(chǎn)品形式變化。

羅清超強(qiáng)調(diào)，阿里云對(duì)象存儲(chǔ)OSS作為服務(wù)商，必須履行服務(wù)承諾的SLA（ Level ）和SLO（ Level ）兩個(gè)關(guān)鍵指標(biāo)。詳細(xì)來(lái)說(shuō)，OSS官網(wǎng)承諾99.995%業(yè)界領(lǐng)先的SLA，所以作為服務(wù)商，肯定會(huì)按照參考標(biāo)準(zhǔn)衡量請(qǐng)求的成功率，千方百計(jì)確保這個(gè)指標(biāo)。 SLO是更細(xì)化的服務(wù)項(xiàng)承諾，比如保證客戶請(qǐng)求的整體帶寬可以達(dá)到穩(wěn)定的Tbps級(jí)別，一些典型的請(qǐng)求信噪比可以保證在100ms左右，不會(huì)有太大的波動(dòng). .

近期，阿里云將發(fā)布可觀察服務(wù)，為客戶提供主流云產(chǎn)品的運(yùn)維知識(shí)。為對(duì)象存儲(chǔ)OSS提供劑量分析、性能監(jiān)控、安全分析、數(shù)據(jù)保護(hù)、異常檢查、訪問(wèn)分析等功能，從成本、性能、安全、數(shù)據(jù)保護(hù)、穩(wěn)定性、安全等六個(gè)維度為客戶提供支持。訪問(wèn)分析。管理能力。

吳飛覺得，為了支持應(yīng)用的快速發(fā)展，存儲(chǔ)技術(shù)也在不斷發(fā)展。從傳統(tǒng)的 C 盤陣列到集中式存儲(chǔ)，再到當(dāng)今系統(tǒng)中可能有數(shù)十或數(shù)萬(wàn)臺(tái)服務(wù)器的分布式存儲(chǔ)。從技術(shù)上講，首先要考慮的是如何確保數(shù)千臺(tái)服務(wù)器能夠可靠運(yùn)行。從運(yùn)維的角度來(lái)說(shuō)，就是應(yīng)該沒有故障或者故障少，或者故障要快速發(fā)現(xiàn)，從而達(dá)到快速修復(fù)、快速恢復(fù)、快速檢查等指標(biāo)。

近年來(lái)，人工智能的發(fā)展如火如荼，學(xué)術(shù)研究人員也在做利用人工智能提前預(yù)測(cè)系統(tǒng)故障的研究，希望在系統(tǒng)故障發(fā)生之前完成數(shù)據(jù)遷移，從而有效緩解用戶的壓力。運(yùn)維。

四、產(chǎn)學(xué)研用，建設(shè)成長(zhǎng)社區(qū)

運(yùn)維為業(yè)務(wù)系統(tǒng)提供的保障it運(yùn)維技術(shù)，離不開阿里云等服務(wù)商的布局，也離不開字節(jié)特等產(chǎn)品用戶的努力。高校和科研院所作為基礎(chǔ)理論技術(shù)和前沿技術(shù)研究的主體，在眾多關(guān)鍵前沿技術(shù)方面具有深厚的基礎(chǔ)技術(shù)儲(chǔ)備和豐富的理論研究基礎(chǔ)。因此，校企合作創(chuàng)新是產(chǎn)業(yè)發(fā)展中需要關(guān)注的藍(lán)籌股。

吳非說(shuō)，用“共同成長(zhǎng)體”來(lái)定義這樣的合作關(guān)系是微不足道的。這條鏈包括創(chuàng)新鏈、產(chǎn)業(yè)鏈和用戶鏈。正是因?yàn)檫@樣的聯(lián)盟，用戶端和研發(fā)端才聯(lián)動(dòng)起來(lái)，共同促進(jìn)彼此的發(fā)展。簡(jiǎn)單來(lái)說(shuō)就是產(chǎn)、學(xué)、研、用一體化，各方共同成長(zhǎng)，推動(dòng)技術(shù)的發(fā)展和落地。

例如，高校在研究云存儲(chǔ)的可靠性時(shí)，提出了一種新的算法。在推進(jìn)算法應(yīng)用的過(guò)程中，可能需要與字節(jié)跳動(dòng)、阿里云等企業(yè)合作，將算法部署到實(shí)際系統(tǒng)上。促進(jìn)產(chǎn)業(yè)發(fā)展。

吳飛還提到，校企界的跨界創(chuàng)新也成為高校專家學(xué)者專業(yè)發(fā)展規(guī)劃的重要組成部分。許多專家學(xué)者選擇在行業(yè)旨在推動(dòng)技術(shù)落地后重返學(xué)術(shù)界。這被稱為“學(xué)術(shù)假期”。她相信，未來(lái)學(xué)術(shù)界與產(chǎn)業(yè)界會(huì)進(jìn)一步深入融合。

張磊認(rèn)為，校企融合是科技誕生到其廣泛應(yīng)用的重要推動(dòng)力。近年來(lái)，云存儲(chǔ)系統(tǒng)的一些技術(shù)已經(jīng)固化。他首先希望學(xué)術(shù)界和研究界能在基礎(chǔ)設(shè)施領(lǐng)域帶來(lái)更多的突破：無(wú)論是存儲(chǔ)介質(zhì)，還是整個(gè)云存儲(chǔ)架構(gòu)的突破，或者是系統(tǒng)、運(yùn)維思路、方法上的一些突破，都能帶來(lái)一些突破。為行業(yè)注入新的活力。其次，行業(yè)也要精益求精，大膽嘗試新技術(shù)、新技能、新理念，融入合適的場(chǎng)景。由于字節(jié)跳動(dòng)等行業(yè)小企業(yè)，整體技術(shù)體量、服務(wù)器、數(shù)量存儲(chǔ)容量都比較大，雖然有特別好的技術(shù)杠桿效應(yīng)。雖然看起來(lái)是一個(gè)很小的技術(shù)優(yōu)化，但在大范圍的場(chǎng)景下只能形成一個(gè)非常大的價(jià)值。因此，學(xué)校和企業(yè)之間的相互支持是非常必要的。

羅清超強(qiáng)調(diào)，阿里云作為服務(wù)商，有兩個(gè)共同成長(zhǎng)的核心點(diǎn)：一是提供基礎(chǔ)服務(wù)，共同運(yùn)維能力；這反過(guò)來(lái)又有助于基地的發(fā)展。

針對(duì)兩位嘉賓提到的校企結(jié)合，羅清超表示，相互成長(zhǎng)進(jìn)化的兩個(gè)階段可能非常重要。第一階段，CCIA等組織為共同成長(zhǎng)提供基礎(chǔ)和生態(tài)。本次CCIA的良好運(yùn)行，可以為運(yùn)維與技術(shù)的共同成長(zhǎng)奠定堅(jiān)實(shí)的基礎(chǔ)。第二階段，共同成長(zhǎng)體必須產(chǎn)生成果。比如通過(guò)CCIA的組織，我們可以搭建溝通的橋梁，孵化一些在行業(yè)內(nèi)有影響力的標(biāo)準(zhǔn)藍(lán)皮書或技術(shù)創(chuàng)新理念。

結(jié)論：隨著高校的職能從人才培養(yǎng)和科研向社會(huì)服務(wù)延伸，企業(yè)、協(xié)會(huì)、學(xué)院之間的合作將進(jìn)一步推進(jìn)，這無(wú)疑將有助于形成良性發(fā)展的循環(huán)和良性循環(huán)。推動(dòng)儲(chǔ)備科技成果加快市場(chǎng)化。 ，而在這個(gè)過(guò)程中，用戶和廠商都將受益匪淺。

原文鏈接：