《2017年全球云計算開源大會主題分享：《運維一體之平臺一體化》》要點：
本文介紹了2017年全球云計算開源大會主題分享：《運維一體之平臺一體化》，希望對您有用。如果有疑問，可以聯(lián)系我們。

3月底有幸參加了全球云計算開源大會,并作了一個關(guān)于《運維一體之平臺一體化》的分享,現(xiàn)將PPT的內(nèi)容整理成文.

運維一體化 之 平臺一體化—-從標(biāo)題看可以看到兩個一體化,分別是運維一體化與平臺一體化.運維一體化是數(shù)據(jù)中心的運營體系,包括：人員組織一體化、流程一體化、平臺一體化三方面,其中平臺一體化偏向于運維工具與自動化方面的建設(shè).(平臺一體化涉及的內(nèi)容比較多,本文以30分鐘來摘幾個重點來分享)

一、轉(zhuǎn)型：

和目前大部份運維團隊一樣,我們的運維團隊也打著“救火”、“背鍋”、“低價值”等標(biāo)簽,團隊的特點歸納下有四個特點：

-被動救火式,以被動保障業(yè)務(wù)系統(tǒng)運行,日常計劃性工作容易被打斷、擱置；

-問題驅(qū)動式,以系統(tǒng)可用性、可靠性、業(yè)務(wù)請求等問題驅(qū)動運維工作；

-操作運維,重復(fù)性、操作類點主要工作量的運維模式；

-經(jīng)驗式運維,由人工經(jīng)驗驅(qū)動的運維模式,尤其是一些經(jīng)驗豐富的老員工的離職在短期內(nèi)會對運維質(zhì)量帶來一定的沖擊.

針對上面四個特點我們提出了四個轉(zhuǎn)型：

-分別是從被動救火式向主動精細化轉(zhuǎn)型,主動分析,主動優(yōu)化,驅(qū)動開發(fā),促進DEVOPS的落地；

-從問題驅(qū)動向價值驅(qū)動轉(zhuǎn)型,以業(yè)務(wù)體驗、服務(wù)滿意度、促進業(yè)務(wù)更好發(fā)展；

-從操作運維向運維開發(fā)轉(zhuǎn)型,通過為運維人員提供運維開發(fā)平臺,降低運維開發(fā)門檻,快速落地一些緊迫的運維工具,降低操作性、重復(fù)性的運維工作；

-從依靠經(jīng)驗向智能化驅(qū)動運維轉(zhuǎn)型,結(jié)合數(shù)據(jù)分析、知識庫、機器學(xué)習(xí)技術(shù)促進運維智能化.

在現(xiàn)有人力維持不變,運維質(zhì)量要求不斷提升的背景下,為實現(xiàn)上述面四個轉(zhuǎn)型目標(biāo),我們認(rèn)為首先要解放生產(chǎn)力,因為沒有人什么都轉(zhuǎn)型都實現(xiàn)不了.解決生產(chǎn)力當(dāng)前最主要的手段還需靠自動化,所以下面再說說我們自動化方面遇到的3個困難：

?–如何更好：雖然運維體系比較完整,但工具主要以商業(yè)軟件為主,以煙囪式建設(shè),信息無法互聯(lián)互通,無法實現(xiàn)1+1>2的效果；

-如何更快：運維工具拿來較多,自主研發(fā)少,無法快速滿足自身運維需求,還是存在較多人肉運維的工作；

-如何更重要：運維職業(yè)危機,傳統(tǒng)的運維操作為主的方式注定會成為歷史,取而代之的是精細化運營,如何既解決職業(yè)危機,又能創(chuàng)造更大的價值,是難題；

針對上面提到的四個轉(zhuǎn)型目標(biāo),以及自動化目前遇到的困難,我們制定了相關(guān)的技術(shù)及管理的改進方案：運維一體化.

二、一體化

在講一體化思路前,我先講講促進一體化思路形成的一些思路來源：

-《架構(gòu)即未來》這本書里提到的組織、流程、架構(gòu)的三位一體和我們運維一體化很吻合；

-騰訊藍鯨、云霽科技在運維自動化方面的整體解決方案引導(dǎo)著我制定平臺一體化的方案；

-googlesre高逼格的運維運營模式,促進我在運維開發(fā)方面的解決思路形成；

如上圖所示,我們的運維一體化的核心是組織、流程、工具三位一體,具體來講是以CMDB為基礎(chǔ),結(jié)合運維統(tǒng)一門戶、運維分析平臺、云平臺、監(jiān)控平臺、流程平臺、操作平臺、審計歸檔平臺,構(gòu)建運維工具一體化(即平臺一體化),并在工具一體化的同時,結(jié)合流程一體化,最終構(gòu)建組織、流程、工具三位一體的運營一體化的運營體系.運維一體化以運維向主動精細化運維、價值驅(qū)動、運維開發(fā)、智能化轉(zhuǎn)型為目標(biāo),為實現(xiàn)上述目標(biāo)首要的工作是需要解放運維生產(chǎn)力,通過“監(jiān)管控”運維自動化提高工作效率,通過自主的開發(fā)平臺實現(xiàn)敏捷的開發(fā)能力,通過運維分析實現(xiàn)運維智能化,輔助運維決策.

再重點講講分享的重點：平臺一體化,平臺一體化的思路是：6平臺 +1門戶+ 4原則.

-6平臺是：云平臺、監(jiān)控平臺、歸檔審計平臺、流程平臺、操作平臺、分析平臺這6個平臺分別對標(biāo)我們身體的骨、眼、神經(jīng)系統(tǒng)、循環(huán)系統(tǒng)、手、腦.其中監(jiān)控平臺、歸檔審計平臺、流程平臺、操作平臺又組成了我們常規(guī)講到的自動化中的“監(jiān)、管、控”.這6個平臺中每一個平臺又組成相關(guān)技術(shù)體系,具體每個平臺包括的體系內(nèi)容及技術(shù)架構(gòu)這里因時間問題不做深入解釋.

-1門戶是：統(tǒng)一門戶是運維可視化的關(guān)鍵,它集成了工具的可視化層,提供多維用戶、多種展示形式、以運維場景驅(qū)動建設(shè)等作用.

-4原則是：自主化,工具化、服務(wù)化、可視化,這4個原則后面會進一步介紹.

通過歸納這個6平臺+1門戶+4原則的平臺一體化思路,并將這個思路推廣到數(shù)據(jù)中心工具建設(shè)團隊中,使我們能否快速達成共識,提高協(xié)作效率.

下面這張PPT是對平臺一體化的進一步細化,概括了目前平臺一體化中的主要內(nèi)容,各位有興趣可以花時間看看.

三、建設(shè)原則

平臺一體化規(guī)劃重點解決各技術(shù)平臺間的信息互聯(lián)互通、統(tǒng)一展現(xiàn)和緊密聯(lián)動,對于各個平臺工具有著幾個原則“服務(wù)化、可視化、自主化、工具化”,即：

-自主化：構(gòu)建運維開發(fā)平臺降低運維工具開發(fā)門檻,促進平臺工具開發(fā)更加自主可控,更加敏捷；

-工具化：在運維團隊中建設(shè)工具建設(shè)文化,促進運維開發(fā)文化建設(shè)；

-服務(wù)化：拒絕推倒重建,整合好存量自動化工具,引入新的工具,實現(xiàn)工具間的互聯(lián)互通,數(shù)據(jù)共享；

-可視化：通過更加統(tǒng)一、清晰的可視化建設(shè)促進平臺的效益的產(chǎn)生；

下面對這4個原則,結(jié)合我們目前工具建設(shè)階段性的成效來做進一步的分享.

1、原則1：自主化

自主化包括開發(fā)能力自主化與架構(gòu)自主化.

1)開發(fā)能力的自主化,我們主要是通過建立運維開發(fā)平臺,這個開發(fā)平臺具有所見即所得的開發(fā)能力,PPT這幾張工具界面是我們目前實現(xiàn)的腳本與可視化開發(fā)工具,它們具備這些特點：

?????? -所見即所得的腳本開發(fā)能力：

腳本開發(fā)環(huán)境(含環(huán)境、測試、部署,以及日志、權(quán)限、代碼管理、腳本執(zhí)行統(tǒng)計等一籃子解決方案)；

標(biāo)準(zhǔn)組件化腳本可供調(diào)用,運維人員在開發(fā)過程中可以不寫具體的腳本,采用組件的方式在可視化界面上組合多個現(xiàn)成的腳本為一個腳本.

-所拖即所得的可視化開發(fā)能力：

實現(xiàn)運維工具的可視化展示(提供HTML5風(fēng)格可視化運維工具控件的拖拉生成統(tǒng)一風(fēng)格的代碼,運維開發(fā)人員無需關(guān)注HTML標(biāo)簽代碼與CS風(fēng)格S)；

實現(xiàn)可視化工具流程的配置能力,即工具上事件所需要的頁面流；

設(shè)計標(biāo)準(zhǔn)組件提高可視化開發(fā)效率；

運維一體化下的開發(fā)能力：

標(biāo)準(zhǔn)化腳本的服務(wù)化能力；

服務(wù)化腳本的接口注冊；

2)架構(gòu)自主化,我們在平臺建設(shè)過程中引入了互聯(lián)網(wǎng)分布式的架構(gòu),開源的技術(shù)架構(gòu)能讓我們對技術(shù)架構(gòu)更有可控性.以集中監(jiān)控系統(tǒng)為例,我們對原有的應(yīng)用主備、數(shù)據(jù)庫主備的架構(gòu)改造為分布式架構(gòu),現(xiàn)在這個系統(tǒng)采用WEB、應(yīng)用分布式,通過MYCAT分布式數(shù)據(jù)庫中間件實現(xiàn)數(shù)據(jù)庫分布式,采用ZK實現(xiàn)數(shù)據(jù)庫主節(jié)點的選取,通過MYSQL實現(xiàn)讀寫分離,目前我們的數(shù)據(jù)庫由17臺MYSQL組成,數(shù)據(jù)存儲由原來了一個月,到現(xiàn)在的一年以上,支持多指標(biāo)、多形式、多并發(fā)的監(jiān)控、分析的運維場景需要.

整體的架構(gòu)參見PPT這張圖.

我們的平臺一體化對于工具及技術(shù)主要以開源、國產(chǎn)為主,以下這張PPT是截止目前我們平臺的主要技術(shù)棧.

2、原則2：工具化

我們將工具分為重量型工具和輕量型工具,大致以這個思路區(qū)分：

-重量型工具：包括監(jiān)控類系統(tǒng)(集中監(jiān)控、性能監(jiān)控、基礎(chǔ)監(jiān)控、網(wǎng)絡(luò)安全監(jiān)控等)、自動化部署、日志系統(tǒng)、業(yè)務(wù)批次調(diào)度等等這些需要開發(fā)工作量比較大的系統(tǒng)；

-輕型工具：包括應(yīng)用服務(wù)啟停工具、數(shù)據(jù)維護工具、數(shù)據(jù)查詢工具、業(yè)務(wù)運營活動實時報表等和運維日常操作工作結(jié)合比較緊密且相對簡單的工具；

對于這兩類工具,我們綜合人員能力、投入產(chǎn)出等客觀因素求個平衡點,其中重量型工具以引入成熟系統(tǒng)進行二次開發(fā)為主,輕量型工具逐步以自主開發(fā)工具為主.

下面針對上面兩類工具分別舉例.

首先是重量型工具,以集中監(jiān)控為例,監(jiān)控架構(gòu)見這張PPT.

集中監(jiān)控的建設(shè)思路主要是以“不漏報、不誤報”加強“監(jiān)”的能力,通過監(jiān)控分析、學(xué)習(xí)能力補充自動化“控”的能力,實現(xiàn)智能化的主動預(yù)測、故障自愈、無人值守.目前我們的監(jiān)控體系己覆蓋從基礎(chǔ)設(shè)施、服務(wù)器存儲、系統(tǒng)軟件(含虛擬化、容器、系統(tǒng)軟件等)、應(yīng)用可用性、客戶體驗五個層次的對象,這些監(jiān)控對像由不同的監(jiān)控工具實現(xiàn)監(jiān)控數(shù)據(jù)的采集與事件分析.在監(jiān)控工具之上,由集中監(jiān)控實現(xiàn)監(jiān)控數(shù)據(jù)整合、事件整合、子系統(tǒng)接入、統(tǒng)一可視化、數(shù)據(jù)源采集、智能學(xué)習(xí)、智能基線、事件協(xié)同處理、事件聯(lián)動分析、新技術(shù)平臺監(jiān)控等平臺能力.后續(xù)需要在平臺能力之上建立智能學(xué)習(xí)型監(jiān)控,實現(xiàn)主動預(yù)測故障、故障自愈、無人值守.

下面圖中我取了幾張我們監(jiān)控有特色的幾個功能,分別是：

-集中的可視化,具備多用戶視角、多系統(tǒng)整合展示、多形式展示(WEB端、大屏,以及目前在開發(fā)的手持端監(jiān)控)

-體系化整合,整合存量系統(tǒng)(比如基礎(chǔ)監(jiān)控、性能監(jiān)控、應(yīng)用監(jiān)控等)、整合數(shù)據(jù)、整合事件等.

-將監(jiān)控能力下探到分行,可以實現(xiàn)分行終端的的監(jiān)控管理,模擬柜面終端的操作回放.

-深度關(guān)聯(lián)分析,相似事件統(tǒng)一匯總,比如我們在CMDB的基礎(chǔ)之上,建設(shè)應(yīng)用配置庫,應(yīng)用配置庫除了應(yīng)用服務(wù)、版本、程序等CI項外,還將應(yīng)用的縱向與橫向關(guān)系通過可視化拖拉的方式實現(xiàn).

-利用好監(jiān)控數(shù)據(jù),比如將監(jiān)控數(shù)據(jù)用于一鍵巡檢,業(yè)務(wù)運營活動自定義報表等.

-其它,比如這個事件豐富,我們將事件的信息展示,還將涉及的系統(tǒng)配置信息、關(guān)聯(lián)事件、事件具體數(shù)據(jù)、事件應(yīng)急、工單情況、涉及OS的資源、性能、事件處理情況、事件應(yīng)急工具等信息集中在一個視圖,以促進事件的快速定位與應(yīng)急恢復(fù).

講完重量型工具,現(xiàn)在舉例講講輕型工具,下面這張應(yīng)用工廠的界面可以很好的解釋我們的建設(shè)思路.參考APPSTORE,在團隊中建立工具開發(fā)文化,管理員可以開發(fā)工具,并發(fā)布到應(yīng)用工廠并供其它管理員使用,其它管理員可以對工具提建議或打分,這些打分可以作為該工具歡迎度進行獎勵.

下面這幾張圖以輕量型工具中的服務(wù)啟停為例,這個工具可以滿足關(guān)機維護、應(yīng)用投產(chǎn)、故障應(yīng)急等場景,支持單個或多個服務(wù)的環(huán)境保存、進程常規(guī)情況下的啟停、異常情況下啟停、啟停后多重形式的檢查方法.

這些小工具的建設(shè)一方面提高了團隊運維工作效率與標(biāo)準(zhǔn)化的落實,另一方面也有助于一些有想法、有能力的同事增加工作成就感.

3、原則3：服務(wù)化

服務(wù)化是為了實現(xiàn)工具間通訊的互聯(lián)互通,服務(wù)化一方面要求各工具對外提供API接口；另一方面是通過統(tǒng)一開發(fā)一個服務(wù)集成模塊實現(xiàn)工具監(jiān)控API接口的注冊、發(fā)現(xiàn)、鑒權(quán).

這個服務(wù)集成有2個主要功能：

-服務(wù)通訊總線,相當(dāng)于一個輕量型的ESB,工具間的通訊需要經(jīng)過服務(wù)集成模塊；

-服務(wù)注冊與發(fā)現(xiàn),提供可視化的界面為各個工具進行接口注冊,為調(diào)用起提供接口入?yún)⒄f明、調(diào)用說明等功能；

這個服務(wù)集成還提供多種通訊方式,RPC、MQ隊列等,可根據(jù)不同的通訊需要進行調(diào)用.

4、原則4：可視化

可視化方面我們主要以統(tǒng)一門戶為載體,在技術(shù)上我們選擇了以H5加CSS3(為移動端化作準(zhǔn)備),提供以下3個特性：

-提供指定服務(wù)：統(tǒng)一門戶提供所有工具菜單、生成訪問用TOKEN；

-頁面適應(yīng)性改造：統(tǒng)一風(fēng)格,并分步對存量工具進行風(fēng)格改造

-訪問適應(yīng)急改造：快速跳轉(zhuǎn)、多標(biāo)簽單點登錄、瀏覽器兼容；

在功能上,我們提供多種用戶視角,專業(yè)團隊視圖、管理視圖、業(yè)務(wù)視圖,下在這張界面是我們統(tǒng)一門戶待辦的視圖,它將不同用戶角色所關(guān)心的指標(biāo)集中在這個視圖,作為用戶控制臺.

接下來還將繼續(xù)做好自動化,解決工作上的痛點,解放生產(chǎn)力,后續(xù)再結(jié)合大數(shù)據(jù)去放眼智能運維.

文章來自微信公眾號：運維之路

轉(zhuǎn)載請注明本頁網(wǎng)址：
http://www.snjht.com/jiaocheng/4131.html