從初期的幾台服務器發展到龐大的數據中心,面對海量數據,運營商單靠人工已經無法滿足在技術、業務、管理等方面的要求,标準化、自動化、架構優化、過程優化、降低OPEX已經成爲運營商IT智能轉型中的迫切訴求。
重慶電信在信息發展的工作中,服務器規模已經達到500+主機,數據處理任務規模達到10000+(實時任務100+,日任務達到4000+,月任務6000+)。随着行業标準越來越高,對數據時效(實時、日、月)、質量(執行計劃、過程管理)和安全(稽核、審計)的要求也越來越高。過去的運維手段與模式已經跟不上信息時代的發展,運維成本的持續增加也爲企業帶來了不小的負擔。
浩鲸科技結合多年運營商領域運營支撐經驗,提出了智能調度解決方案。通過智能調度平台,實現任務全生命周期管理、時效場景全覆蓋、過程監控、稽核與安全審計,賦能運營商智慧運維,有效協助提升運營商的數據處理效率,滿足運營商海量數據處理和複雜業務場景需求,提升運營商數據質量并保障數據資産安全。
任務全生命周期自動管理
智能調度平台對任務全生命周期進行靈活管理,實現任務的自動化全覆蓋,并對任務的各種狀态進行自動及智能化的轉換。
圖1智能調度任務全生命周期管理
任務實時管理和全覆蓋
智能調度平台對對任務時效的全覆蓋,無論是實時、還是小時/日/月/季/年的任務都可以靈活支撐,全面實現數據時效的管理。
圖2 智能調度實時任務全覆蓋
可視化執行計劃
智能調度平台可以實現數據節點實例預構建,輸入數據節點規格信息,生成節點實例及其賬期值、執行時間、依賴上環節對應的賬期值、節點實例标示、觸發策略、參數值等核心信息。爲調度提供有步驟、可執行計劃指導 ;通過預生成計劃,避免每次調度執行時重複、無序生成。
圖3 智能調度的執行計劃
360度數據分析
在調度執行過程中,透明可視化調度處理流程,提供監控分析視圖、異常處理機制、血緣分析視圖。以數據血緣關系爲基礎的,構建涵蓋數據标準/質量要求/安全策略、數據生産進度、質量、數據價值的360度數據視圖。
圖4 智能調度的360監控
全方位數據質量保障
基于數據資産關系整合計算類、稽核類和安全審計類任務,實現數據質量與安全的保證。
圖5 智能調度安全審計
2018年,智能調度平台在重慶電信得到深入應用。目前已承接了重慶電信企業信息化部的10000+數據加工處理任務,數據上傳中國電信集團時間由之前的5點提升到2點,同時數據質量覆蓋度提升至98%,運維人力資源節省60%。智能調度已成爲重慶電信企業信息化部運維利器,以高效、高質、敏捷、安全支撐了重慶電信内外部的數據需求,并實現行業對于智慧運營的訴求。