『壹』 說說數據中心日常維護工作的那些事兒
數據中心要保持穩定的運行,需要大量的專業技術人員。一般承擔重要業務的數據中心都是有人24小時值守,無人值守的數據中心一般只能承擔不重要業務,完全無人管理維護的數據中心幾乎沒有。所以數據中心日常維護工作煩瑣,但又很重要。隨著人們的工作生活對數據的完全依賴,承載數據計算、運行的數據中心正發揮著越來越重要的作用,這更突顯出維護工作的重要。
當一個數據中心建成投產後,維護工作就開始了,一直到數據中心的生命周期結束。一般我們可以將數據中心的維護工作分為四大類:一是日常檢查類;二是應用變更、部署類;三是軟、硬體升級類;四是突發故障處理類,下面就來詳細說一說這些維護工作,讓大家對維護工作有個了解。
日常檢查
“千里之堤,潰於蟻穴”。任何的故障在出現之前都可能會有所表現,小的隱患不消除,可能導致重大的故障出現,所以數據中心日常的例行檢查工作枯燥,但也很重要,可以及時發現一些運行中的隱患。根據數據中心承載業務重要性的不同,要對數據中心裡的所有運行的設備進行例行檢查。一些數據中心設備廠商提供了檢查軟體,比如網管軟體,安全防護軟體等。可以利用這些軟體對數據中心網路進行檢查,看日誌是否有異常告警,網路是否出現過短時中斷,埠是否出現UP/DOWN等。通過網路探測軟體看網路質量如何。檢查伺服器應用服務是否正常,CPU內存等利用率是否正常。對應用業務進行檢查,比如如果有搜索業務,就可以通過伺服器進行單詞搜索,看搜索的結果和延遲是否在正常的范圍之內。這些檢查每日都要重復檢查,一旦有異常及時處理與消除,必要時將重要業務切換到備用環境中,然後排除後再切回。
對數據中心的機房環境也要進行檢查,環境的溫度、濕度、灰塵是否合乎要求。空調、供電系統進行運行良好,設備運行是否過熱,地板、天窗、消防、監控都是檢查的部分。不合理的地方要及時進行整改,而不應該偷懶。經常到一些數據中心,就會發現值班維護人員很多都抱著電腦在瀏覽網頁,打游戲。對於日常檢查應付一下,甚至根本不去檢查,只要沒有出現故障,就打游戲消耗時間,這樣數據中心出現故障是遲早的事。一旦出現故障就毛手毛腳,甚至哪個業務走的哪個設備,哪個埠哪個網線都不清楚,本來一個小故障可能因為不熟悉導致大故障,因此日常檢查絕不能應付,雖然需要不斷重復,但卻很重要,在持續的檢查過程中,將會對數據中心的理解越來越深,這樣每次檢查都會有新的發現,在檢查中進行學習。
應用變更
數據中心承載的業務不會是一成不變的,隨著業務的多樣化,經常要對業務進行調整,包括伺服器和網路的設置。因此要對伺服器和網路設備操作很熟悉,主要需要掌握Linux伺服器命令和網路協議。要根據應用的需要,做出變更。這時就對維護人員提出了更高的要求,不僅是對數據中心原有業務要非常熟悉,還要對新上的應用業務有正確的理解,這樣才能在不影響原有業務的基礎上做調整。這樣的應用變更每個月可能都要做幾次,是數據中心維護人員的必修課,突顯了一個技術人員的基本技能水平。這時要對設備操作命令比較熟悉,懂得如何實現業務,要經常和設備廠商的技術人員打交道,通過交流盡快掌握設備操作方法。同時,由於設備廠商對應用業務缺乏了解,這就需要維護人員在應用業務和設備具體實現之間做好協調,處理。以最快的時間和最小的代價完成應用業務部署。
軟硬體升級
數據中心的設備一般運行周期是五年,不斷地有設備需要逐漸淘汰進行更換,也有一些設備因為存在軟體缺陷需要升級,因此軟硬體升級也是維護工作的一部分,尤其是軟硬體出現故障時,就必須要進行更換。有時為了不影響業務,往往還需要設備廠商提供軟體補丁來解決問題。數據中心的設備成百上千,出現軟硬體故障很正常,所以要不斷地進行軟硬體升級,這類工作往往都要在業務量最少的'凌晨之後進行,維護人員通宵熬夜是常有的事,維護人員要有一個良好的身體素質,否則會吃不消。軟硬體升級時需要做好回退機制,以防升級出現問題時無法回退,業務長時間無法恢復。當接手數據中心維護工作就會發現,怎麼會有那麼多的升級,幾乎每個月都要有升級操作,熬夜升級工作成了維護人員的家常便飯。
突發故障
沒有任何一個數據中心是不出故障的,在數據中心運行的過程中都會出現這樣那樣的問題。這時就顯示出維護人員的高技能水平,根據統計百分之八十的故障都是人為故障,所以維護人員的水平高低往往決定了一個數據中心運行的穩定程度。另外對於突發故障,高水平的維護人員可以靜下心來冷靜分析故障的觸發原因,迅速找到解決的方法,如果在短時間內找不到解決方法,也可以通過切換到備用設備上先恢復業務,再進行分析。這時擁有高水平的維護人員對於一個數據中心至關重要,在關鍵時刻就能派上用場。
雖然這些工作看起來有些平常,但千萬別小看它們。數據中心維護工作實際上非常重要,關乎著整個數據中心業務的正常運行。目前市場上這類專業人才非常搶手,尤其對於具有較深故障排查水平的人才比較缺乏。只有重視數據中心的維護工作,才能給數據中心一個平安。
『貳』 第九屆數據中心標准峰會舉行,騰訊數據中心智能化與未來探索
騰訊數據中心上海技術專場
11月24日,CDCC第九屆數據中心標准峰會在上海舉行。會上,騰訊雲正式發布騰訊智維全新產品體系,同時以一場技術專場,向外界分享騰訊數據中心在智能化領域的探索與實踐,探討雙碳背景下數據中心行業的未來趨勢。
展望
騰訊數據中心高級總監楊曉偉與智維平台研發中心總監岳上出席了本次大會。
楊曉偉指出,「數據中心基礎設施建設當前迎來高速發展的窗口期,在雙碳背景下,騰訊數據中心將結合自身豐富的技術優勢和運營管理實踐經驗,助力數據中心行業朝著綠色智能方向快步前行。」
岳上表示,「騰訊數據中心產品化發展戰略和優秀運營體系是騰訊智維得以快速發展的動力源泉。在雙碳的大變革下,我們藉助本次大會的平台,發布了全新的產品體系,技術體系和生態體系。在未來,我們有決心有能力,和生態夥伴一起,為數據中心行業的發展,為綠色數據中心和智能數據中心的達成貢獻力量。」