在中國信息通信研究院與中國通信企業(yè)協(xié)會共同主辦的第二屆“鼎新杯”數(shù)字化轉(zhuǎn)型應(yīng)用大賽中，北京移動和嘉為藍(lán)鯨聯(lián)合申報的“北京移動云計算智能運(yùn)維平臺建設(shè)項目”，從兩千余個申報案例中脫穎而出，最終榮獲大賽二等獎。

　　中國移動通信集團(tuán)北京有限公司(下稱北京移動)成立于1999年，隸屬于中國移動通信集團(tuán)公司，秉承“正德厚生，臻于至善”的企業(yè)核心價值觀，緊密圍繞“做世界一流企業(yè)，成為移動信息專家”的戰(zhàn)略定位，以卓越品質(zhì)鍛造一流信息服務(wù)，用創(chuàng)新精神努力實(shí)現(xiàn)從優(yōu)秀向卓越的新跨越，著力推動“移動改變生活”。

　　一、初探自動化，轉(zhuǎn)型亟需新動能

　　自成立以來，北京移動始終保持行業(yè)信息化領(lǐng)跑者的身份，堅持“以追求卓越，讓數(shù)字化生活更美好”為使命，志愿成為“客戶首選的數(shù)字化服務(wù)的引領(lǐng)者”。為快速響應(yīng)業(yè)務(wù)需求，IT團(tuán)隊前期從技術(shù)平臺建設(shè)切入，使用開源軟件搭建了基礎(chǔ)的自動化運(yùn)維系統(tǒng)，實(shí)現(xiàn)了腳本和文件的批量自動化，但仍存在如配置數(shù)據(jù)覆蓋不全、作業(yè)執(zhí)行管控手段欠缺、運(yùn)維場景化能力不足、技術(shù)架構(gòu)相對簡單等問題。

　　為提升系統(tǒng)穩(wěn)定性，保障業(yè)務(wù)穩(wěn)定運(yùn)行，北京移動攜手嘉為科技旗下研運(yùn)品牌嘉為藍(lán)鯨，打造智能運(yùn)維平臺，建設(shè)配置數(shù)據(jù)管理、監(jiān)控管理、日志管理、統(tǒng)一告警管理、自動化巡檢、運(yùn)營服務(wù)報表等運(yùn)維場景，實(shí)現(xiàn)管理流程創(chuàng)新，完善智能運(yùn)維能力，向著具備業(yè)務(wù)價值的運(yùn)維模式邁進(jìn)。

　　二、“平臺+應(yīng)用”，高效擴(kuò)展應(yīng)用場景

　　通過PaaS平臺+SaaS場景的方式構(gòu)建一體化運(yùn)維管理體系，1個基礎(chǔ)平臺融合了公共能力，支撐場景應(yīng)用的運(yùn)行、協(xié)同、服務(wù)。場景應(yīng)用包括了配置管理CMDB、IT監(jiān)控告警、日志平臺、自動化巡檢、運(yùn)營服務(wù)報表等5大應(yīng)用，后續(xù)可快速、靈活擴(kuò)展各類應(yīng)用。

　　1、平臺規(guī)模：當(dāng)前生產(chǎn)環(huán)境按支持納管200+節(jié)點(diǎn)服務(wù)器，納管8套應(yīng)用系統(tǒng)，部署運(yùn)行16個運(yùn)維場景工具;

　　2、平臺集成：與4A系統(tǒng)集成對接，與郵件系統(tǒng)集成實(shí)現(xiàn)消息通知;

　　3、統(tǒng)一管控：采用管控平臺納管不同網(wǎng)絡(luò)區(qū)域的主機(jī)。

　　三、提速運(yùn)維效能，保障業(yè)務(wù)穩(wěn)定運(yùn)行

　　1、CMDB自動采集，資源統(tǒng)一管理

　　構(gòu)建云運(yùn)維基石CMDB，實(shí)現(xiàn)資產(chǎn)數(shù)據(jù)的集中管理，為應(yīng)用提供各種運(yùn)維場景的配置數(shù)據(jù)服務(wù)。通過提供配置管理服務(wù)，以數(shù)據(jù)和模型相結(jié)合映射應(yīng)用間的關(guān)系，保證數(shù)據(jù)的準(zhǔn)確和一致性;并以整合的思路推進(jìn)，最終面向應(yīng)用消費(fèi)，發(fā)揮配置服務(wù)的價值，實(shí)現(xiàn)IT資源集中規(guī)范化管理和消費(fèi)。

　　·云平臺A創(chuàng)建模型涵蓋主機(jī)、業(yè)務(wù)、云虛擬資源、安全設(shè)備、基礎(chǔ)設(shè)施、網(wǎng)絡(luò)、服務(wù)器、云平臺等共30+個;同時完成VMware、華為云資源的接入;納管主機(jī)120+、接入業(yè)務(wù)6個;配置發(fā)現(xiàn)配置采集任務(wù)運(yùn)行次數(shù)270+;

　　·云平臺B創(chuàng)建模型包括數(shù)據(jù)中心、機(jī)房、機(jī)柜等共計30+個，完成模型數(shù)據(jù)錄入;

　　·自動采集錄入虛擬機(jī)實(shí)例近1600條，計算服務(wù)器160+條，存儲服務(wù)器110+條，虛擬資源卷1200+條。

　　2、海量對象納管，一體化監(jiān)控升級

　　基于平臺豐富的數(shù)據(jù)采集、數(shù)據(jù)處理及插件擴(kuò)展能力，集成現(xiàn)有監(jiān)控平臺，實(shí)現(xiàn)對各類網(wǎng)絡(luò)設(shè)備、主機(jī)設(shè)備、存儲設(shè)備、中間件、數(shù)據(jù)庫、關(guān)鍵應(yīng)用進(jìn)程的監(jiān)控告警。通過集中管理告警信息，并采取統(tǒng)一的收斂、屏蔽、關(guān)聯(lián)分析、自動化處理等手段提高告警有效性，減少誤告與漏告，實(shí)現(xiàn)告警從接入、收斂、處理、分派的閉環(huán)管理，提升了告警處理效能，保障系統(tǒng)穩(wěn)定運(yùn)行。

　　·監(jiān)控接入：納管4個業(yè)務(wù)系統(tǒng)，共計120+臺主機(jī)監(jiān)控、4個網(wǎng)絡(luò)端口撥測監(jiān)控、20+個進(jìn)程監(jiān)控，3個自定義腳本監(jiān)控，共計70+個監(jiān)控指標(biāo);

　　·告警接入：告警接入華為云、Zabbix、VMware等13個告警源，完全覆蓋1、2層硬件監(jiān)控，3層監(jiān)控覆蓋4個業(yè)務(wù)系統(tǒng)。

　　3、日志聯(lián)動告警，網(wǎng)絡(luò)健康隨時保障

　　完成日志監(jiān)控數(shù)據(jù)告警配置，可通過網(wǎng)絡(luò)設(shè)備的日志數(shù)據(jù)分析來獲取網(wǎng)絡(luò)設(shè)備健康狀態(tài)，同時，對網(wǎng)絡(luò)設(shè)備的日志級別進(jìn)行數(shù)量統(tǒng)計及監(jiān)控展示面板。共接入70+個網(wǎng)絡(luò)日志數(shù)據(jù)源，創(chuàng)建10個網(wǎng)絡(luò)任務(wù)接入任務(wù)，5個網(wǎng)絡(luò)日志數(shù)據(jù)儀表盤，3個日志關(guān)鍵字告警任務(wù)。

　　4、巡檢自動化，安全防范更高效

　　通過自定義巡檢腳本和腳本對象，進(jìn)行及時性、周期性等巡檢工作的自動化執(zhí)行，替代運(yùn)維人員日常手工巡檢，可根據(jù)不同運(yùn)維角色，自定義不同的巡檢工作計劃，并生成標(biāo)準(zhǔn)可視化報告。輔助運(yùn)維團(tuán)隊全面了解各類軟硬件資源的生產(chǎn)健康狀態(tài)，從全量的生產(chǎn)系統(tǒng)中提前發(fā)現(xiàn)隱患，保障業(yè)務(wù)穩(wěn)定性。

　　·巡檢模版：完成4個標(biāo)準(zhǔn)化主機(jī)巡檢腳本，Linux巡檢模版3個，各類巡檢指標(biāo)62個;

　　·巡檢任務(wù)：配置巡檢任務(wù)3個，32個主機(jī)巡檢對象。

　　5、數(shù)據(jù)可視化，IT運(yùn)行全掌握

　　北京移動原先并未使用專門的報表工具，用Excel手工記錄資源資產(chǎn)信息，工作量大且時效性低，準(zhǔn)確率也難以保證，制作、維護(hù)、查看均不方便。本項目基于藍(lán)鯨平臺，打造了一款輕量級、可自主分析的報表制作工具，實(shí)現(xiàn)對各類數(shù)據(jù)源的接入，幫助運(yùn)維人員全方位掌握IT資源的運(yùn)行狀態(tài)及資源使用情況。

　　·云平臺A：完成對接華為和VMware數(shù)據(jù)接口獲取數(shù)據(jù)。在運(yùn)營服務(wù)報表中創(chuàng)建華為報表數(shù)據(jù)源9個，VMware數(shù)據(jù)源7個，制作華為運(yùn)維報表8個;制作VMware運(yùn)維報表5個，包括日報，周報和月報，并實(shí)現(xiàn)字段篩選展示報表數(shù)據(jù);

　　·云平臺B：完成5個數(shù)據(jù)文件的解析，并封裝為報表數(shù)據(jù)源接口，并根據(jù)需求生成5個類別共8張自動化運(yùn)維報表，可根據(jù)時間或?qū)ο竺Q進(jìn)行篩選展示。

　　在數(shù)字化轉(zhuǎn)型浪潮中，北京移動率先出擊，打造了面向云計算運(yùn)維場景的智能運(yùn)維平臺，推進(jìn)更精細(xì)化、自動化、智能化運(yùn)維體系建設(shè)，強(qiáng)化系統(tǒng)風(fēng)險和故障的早發(fā)現(xiàn)、早定位、早處置，保障業(yè)務(wù)穩(wěn)定運(yùn)行，并建設(shè)完善的運(yùn)維開發(fā)能力，實(shí)現(xiàn)從傳統(tǒng)運(yùn)維向運(yùn)維開發(fā)的轉(zhuǎn)型。