黃靚

摘 要：隨著當(dāng)今社會的不斷發(fā)展，科學(xué)技術(shù)也不斷的進(jìn)步，我們處于一個大數(shù)據(jù)的時代，充分發(fā)揮了大數(shù)據(jù)的優(yōu)勢和作用，并且被廣泛地應(yīng)用到人們的工作生活中，網(wǎng)絡(luò)的普及以及計算機(jī)軟件技術(shù)的應(yīng)用更為大數(shù)據(jù)平臺的運(yùn)行提供了動力支撐，大數(shù)據(jù)時代的快速發(fā)展使人們的生活以及工作變得更加便利快捷，不僅表現(xiàn)在人與人之間的信息往來方面，微信掃碼支付以及淘寶購物平臺等技術(shù)軟件無一不體現(xiàn)著數(shù)據(jù)時代的軟件技術(shù)的便捷性。數(shù)據(jù)軟件技術(shù)的應(yīng)用不僅提高了人們生活的便捷度以及質(zhì)量還為軟件開發(fā)商帶來了強(qiáng)大的經(jīng)濟(jì)效益。而如今，在當(dāng)今網(wǎng)絡(luò)技術(shù)迅速普及以及計算機(jī)技術(shù)快速升級的背景下，大量的數(shù)據(jù)都可以使用計算機(jī)作為依托從而得到處理以及分析，但是數(shù)據(jù)也分有用和無用，數(shù)據(jù)為人們提供便利的同時部分無用的數(shù)據(jù)也會人們帶來不便。文章根據(jù)現(xiàn)階段大數(shù)據(jù)平臺的發(fā)展現(xiàn)狀，提出大數(shù)據(jù)平臺的自動運(yùn)維及監(jiān)控技術(shù)中存在的問題，并針對性地提出合理化的解決措施。

關(guān)鍵詞：大數(shù)據(jù)平臺；自動化運(yùn)維；監(jiān)控；問題；解決措施

0 引言

近些年來，在互聯(lián)網(wǎng)的快速發(fā)展計算機(jī)技術(shù)的迅速普及的大背景下，大數(shù)據(jù)技術(shù)的發(fā)展勢頭十分迅猛。大數(shù)據(jù)技術(shù)在發(fā)展的同時也相應(yīng)的伴隨著發(fā)展問題的出現(xiàn)，其同樣面臨著十分重大的挑戰(zhàn)。其中最大的挑戰(zhàn)當(dāng)屬臨床醫(yī)學(xué)上的數(shù)據(jù)問題，其中的主要問題可以表現(xiàn)為數(shù)據(jù)信息的采集以及信息的存儲兩個方面，其中信息數(shù)據(jù)的采集問題主要表現(xiàn)為不知如何處理數(shù)據(jù)以及怎樣提取有效的信息，而信息存儲方面的問題則是不知道將采集到的信息如何進(jìn)行數(shù)據(jù)儲存，其次，存儲上的問題還包含了儲存的形式以及方式等方面。因此，建設(shè)數(shù)據(jù)平臺的自動化運(yùn)維及監(jiān)控技術(shù)就變得尤為重要。

1 自動化運(yùn)維所具備的優(yōu)勢

自動化簡化IT運(yùn)維具有降低成本、提高生產(chǎn)力、高可用、可靠性高以及性能優(yōu)化五大優(yōu)勢。自動化運(yùn)維可以降低IT運(yùn)維的風(fēng)險及壓力負(fù)擔(dān)，在一定程度上還可以提高IT運(yùn)維的工作質(zhì)量以及工作水平。

1.1 降低投入成本

降低成本的優(yōu)勢主要表現(xiàn)為其自動化運(yùn)維可以提高企業(yè)運(yùn)行的效率，減少工作人員認(rèn)為錯誤等問題的發(fā)生，與此同時可以降低人力的需求量進(jìn)而降低企業(yè)在人力需求等方面的投入成本進(jìn)而降低企業(yè)的IT投入成本。

1.2 提高企業(yè)的生產(chǎn)力及生產(chǎn)水平

生產(chǎn)力提高是指自動化的運(yùn)維技術(shù)不需要人工手動地進(jìn)行工作產(chǎn)出，原本復(fù)雜的傳統(tǒng)因為工作需要專門的運(yùn)維負(fù)責(zé)人員來進(jìn)行操作，而自動化運(yùn)維技術(shù)可以改變原有的運(yùn)維方式將運(yùn)維工作人員從復(fù)雜繁瑣的工作程序中釋放出來，那么原本負(fù)責(zé)運(yùn)維的工作人員就可以將其所具備的知識以及運(yùn)維技能施展于更具價值需求工作崗位中去。這樣一來，不僅降低了運(yùn)維工作所需要的工作時間，還可以為其他的工作崗位提供充足的動力。系統(tǒng)運(yùn)行過程中出現(xiàn)故障會為企業(yè)的名譽(yù)以及財產(chǎn)等方面造成巨大的損失。而通過利用自動化運(yùn)維技術(shù)可以實現(xiàn)自動化保存數(shù)據(jù)，在數(shù)據(jù)損失時，還具備自動化的恢復(fù)機(jī)制幫助企業(yè)進(jìn)行數(shù)據(jù)修復(fù)[1]。

1.3 高可用

自動化運(yùn)維技術(shù)具有高可用的優(yōu)勢，自動化運(yùn)維技術(shù)所具備的全天候系統(tǒng)監(jiān)控和遠(yuǎn)程通信技術(shù)可以在極大程度上降低網(wǎng)絡(luò)系統(tǒng)停機(jī)的概率以及縮短其停機(jī)的時間。即使系統(tǒng)出現(xiàn)故障，企業(yè)可以通過恢復(fù)機(jī)制將系統(tǒng)進(jìn)行快速的恢復(fù)，降低故障可能帶來的損失。

1.4 可靠性高

因為工作中常常會出現(xiàn)重復(fù)性的工作，重復(fù)性的工作在運(yùn)維人員工作過程中出現(xiàn)，運(yùn)維人員由于完成過該工作可能在重復(fù)操作的過程中就會出現(xiàn)警惕性放低的問題，如此一來就會在極大程度上提高運(yùn)維工作出錯的概率。而自動化運(yùn)維技術(shù)的應(yīng)用不存在這些人為錯誤的發(fā)生，剔除掉錯誤發(fā)生的人為因素便會極大程度地降低重復(fù)性工作錯誤發(fā)生的概率，進(jìn)而提高運(yùn)維工作的可靠性，與此同時還可以減輕運(yùn)維工作人員的工作負(fù)擔(dān)。

1.5 性能優(yōu)化

傳統(tǒng)運(yùn)維工作中的運(yùn)維方式主要依靠人工等方式進(jìn)行運(yùn)維操作，工作流程復(fù)雜繁瑣，執(zhí)行任務(wù)的效率低下。而自動化的運(yùn)維技術(shù)在發(fā)揮自身優(yōu)勢的同時還可以彌補(bǔ)傳統(tǒng)運(yùn)維效率低下等問題，在降低運(yùn)維人員需求量的同時提高運(yùn)維工作的工作效率以及質(zhì)量等工作性能。

2 自動化運(yùn)維監(jiān)控技術(shù)所具備的優(yōu)勢

傳統(tǒng)系統(tǒng)構(gòu)建中的運(yùn)行監(jiān)控系統(tǒng)可劃分為系統(tǒng)監(jiān)控、應(yīng)用監(jiān)控以及數(shù)據(jù)監(jiān)控等等監(jiān)控系統(tǒng)，其中的中間件監(jiān)控、應(yīng)用監(jiān)控、數(shù)據(jù)庫監(jiān)控以及網(wǎng)絡(luò)監(jiān)控等監(jiān)控方面的工作中要負(fù)責(zé)監(jiān)控的對象以及程序復(fù)雜繁瑣，只有做好多方面的監(jiān)控工作才能保證系統(tǒng)運(yùn)行的穩(wěn)定性以及可靠性。而自動化運(yùn)維監(jiān)控系統(tǒng)則將以上索要監(jiān)控的對象全都改變，其核心仍然是以保證網(wǎng)絡(luò)的高可用、高性能等方面為主，但自動化運(yùn)維監(jiān)控技術(shù)則將原本復(fù)雜多樣的監(jiān)控程序進(jìn)行了精簡，提高監(jiān)控效率的同時提高監(jiān)控質(zhì)量[2]。

3 大數(shù)據(jù)平臺在傳統(tǒng)IT運(yùn)維所面對的問題

3.1 IT運(yùn)維機(jī)制不完善，流程操作層面缺乏統(tǒng)一

傳統(tǒng)的IT運(yùn)維工作中缺乏完備的規(guī)范的IT運(yùn)維機(jī)制，并且其IT操作的運(yùn)維流程缺乏統(tǒng)一的規(guī)范，例如，在事件單提交的工作環(huán)節(jié)中，IT運(yùn)維工作會忽略事件預(yù)判以及優(yōu)先級設(shè)定方面的統(tǒng)一規(guī)范，利用運(yùn)維人員的工作經(jīng)驗以及主觀判斷來進(jìn)行事件的處理，此等運(yùn)維方式缺少整體統(tǒng)一的規(guī)范，雖然可以處理事件，但所處理的事件缺乏統(tǒng)一的參考依據(jù)，這樣會很容易因個體經(jīng)驗水平差異等人為因素造成整體IT運(yùn)維工作的低質(zhì)量，進(jìn)而影響IT運(yùn)維的整體效果。

3.2 IT運(yùn)維缺乏有效的完善的CMBD（配置項數(shù)據(jù)管理庫）

現(xiàn)階段的IT運(yùn)維并不具備完善及有效的配置項數(shù)據(jù)管理庫，其雖然配置收集了部分配置的數(shù)據(jù)信息，但僅僅是針對比較核心比較關(guān)鍵的IT設(shè)備設(shè)施而言。不夠完善的配置項數(shù)據(jù)管理庫很難為信息的全面化發(fā)展提供強(qiáng)大的數(shù)據(jù)信息支撐。

3.3 過度依賴核心工作人員，工作負(fù)擔(dān)重、效率低

傳統(tǒng)的IT運(yùn)維工作中，部分IT運(yùn)維的工作者所具備的IT運(yùn)維知識以及技能僅僅留存于頭腦之中，沒有做過系統(tǒng)化、規(guī)范化的整理以及記錄。知識也好，經(jīng)驗也罷僅僅留存在一個十分狹窄的范圍之內(nèi)，在較大的范圍中就無法得到大的發(fā)揮。那么這些IT運(yùn)維工作者的工作就會僅僅限定在一些技術(shù)性、知識性較為簡單的工作層面，疑難問題，例如，時間性質(zhì)的判定以及優(yōu)先級等難度較為大的問題就會全部推給技術(shù)水平高的核心人員來負(fù)責(zé)，這樣一來加重了核心人員的工作負(fù)擔(dān)，工作量的增加會加大程度上提高錯誤發(fā)生的概率，與此同時還會影響到IT運(yùn)維團(tuán)隊整體的工作效率以及質(zhì)量。

3.4 錯綜復(fù)雜的IT元素難以有效的監(jiān)控

IT運(yùn)維設(shè)施組成復(fù)雜多樣并且種類繁多，從基礎(chǔ)的機(jī)房動力環(huán)境到最終的實際應(yīng)用、從其配置的硬件到軟件、從后臺到前臺的支撐服務(wù)等IT運(yùn)維元素錯綜復(fù)雜，運(yùn)維工作的流程也十分的復(fù)雜，這就導(dǎo)致其錯綜復(fù)雜的IT元素很難實現(xiàn)高效率以及高質(zhì)量的監(jiān)控。就微觀層面而言，IT運(yùn)維設(shè)施的品牌及種類繁多，以信息的存儲為例，其品牌就包含了IBM、EMC以及華為等多個設(shè)施品牌。而運(yùn)維系統(tǒng)的監(jiān)控工作包含了硬盤的狀態(tài)、性能等多個方面的監(jiān)控對象，再加之 IT運(yùn)維設(shè)施品牌的繁多，每個品牌的硬盤結(jié)構(gòu)又大又不同，這就加劇了監(jiān)控工作的困難度。綜上可見，傳統(tǒng)的IT運(yùn)維中存在著多重弊端。推進(jìn)自動化運(yùn)維及監(jiān)控技術(shù)是十分必要的存在[3]。

4 大數(shù)據(jù)平臺所涉及的關(guān)鍵技術(shù)

4.1 大數(shù)據(jù)平臺的體系構(gòu)建

對大數(shù)據(jù)平臺的研究繼承性問題進(jìn)行集中性的探討分析過后，在其應(yīng)用領(lǐng)域中，大數(shù)據(jù)平臺具有數(shù)據(jù)關(guān)聯(lián)緊密、集成規(guī)模大等特點，并且大數(shù)據(jù)的應(yīng)用匯方向更加傾向于企業(yè)的商業(yè)決策以及股市的行情分析等數(shù)據(jù)集成量較大的行業(yè)。

4.2 自動化運(yùn)維功能設(shè)計

自動化運(yùn)維平臺在進(jìn)行功能設(shè)計的時候可以將自動化運(yùn)維平臺的功能劃分為巡查管理、設(shè)備管理、運(yùn)維監(jiān)控、數(shù)據(jù)庫管理、信息管理等方面。

4.2.1 巡查管理

設(shè)置專門負(fù)責(zé)巡查的管理部門，將運(yùn)維工作中所產(chǎn)出的數(shù)據(jù)進(jìn)行整合然后統(tǒng)一分送到相應(yīng)的巡查管理部門，由管理部門的人員進(jìn)行統(tǒng)一的檢查后上交給核心負(fù)責(zé)人員進(jìn)行審批，以此來提高數(shù)據(jù)的可靠性。

4.2.2 設(shè)備管理

通過集中化的平臺以及集中化的設(shè)備信息處理系統(tǒng)來獲取查詢服務(wù)器的運(yùn)行信息。

4.2.3 運(yùn)維監(jiān)控

采取互聯(lián)網(wǎng)構(gòu)建的監(jiān)控系統(tǒng)實時地對數(shù)據(jù)庫的數(shù)據(jù)進(jìn)行全天候的監(jiān)控，以此來保證數(shù)據(jù)信息的可靠性。

4.2.4 知識庫及信息管理

要對IT運(yùn)維工作的知識以及工作經(jīng)驗進(jìn)行統(tǒng)一的規(guī)范化整理，然后建立起統(tǒng)一的知識庫，以便為IT運(yùn)維人員提供查閱各類知識信息的有效途徑。首先，對于數(shù)據(jù)集成量較大的企業(yè)，其企業(yè)內(nèi)部的決策數(shù)據(jù)、運(yùn)維條例以及經(jīng)營體系等方面都需要進(jìn)行集中性的信息化處理，在確定沒有問題之后在進(jìn)行發(fā)布，以此來保證數(shù)據(jù)信息的精準(zhǔn)度。其次，大數(shù)據(jù)平臺的自動化運(yùn)維數(shù)據(jù)處理還包含了數(shù)據(jù)匹配安全性、數(shù)據(jù)監(jiān)控處理以及監(jiān)控系統(tǒng)的冗余等多方面的數(shù)據(jù)處理優(yōu)勢。

5 結(jié)語

綜上所述，大數(shù)據(jù)平臺數(shù)據(jù)信息的精準(zhǔn)度等問題應(yīng)受到高度的重視，自動化運(yùn)維及監(jiān)控技術(shù)可以提高數(shù)據(jù)信息的精準(zhǔn)度，提高數(shù)據(jù)信息的可靠性，使其實現(xiàn)高可用、高效率。其所構(gòu)建的監(jiān)控技術(shù)也轉(zhuǎn)變了原有監(jiān)控技術(shù)中復(fù)雜繁多的監(jiān)控特點，呈現(xiàn)出精簡高效的監(jiān)控系統(tǒng)，為各行各業(yè)數(shù)據(jù)平臺的穩(wěn)定運(yùn)行提供了保障。大數(shù)據(jù)平臺自動化運(yùn)維技術(shù)及監(jiān)控技術(shù)的發(fā)展還需要進(jìn)行不斷的優(yōu)化和升級，這就要求相關(guān)的技術(shù)人員要時刻關(guān)注數(shù)據(jù)平臺的運(yùn)行狀態(tài)，及時發(fā)現(xiàn)并處理運(yùn)行過程中出現(xiàn)的問題，以此來保證自動化運(yùn)維及監(jiān)控技術(shù)能夠高效貫徹的實施。

[參考文獻(xiàn)]

[1]曹鐵男，李昊，喇元.大數(shù)據(jù)平臺的自動化運(yùn)維及監(jiān)控技術(shù)分析[J].電子世界，2021（5）：19-20.

[2]廖鵬.基于大數(shù)據(jù)平臺的自動化運(yùn)維及監(jiān)控技術(shù)[J].造紙裝備及材料，2020（6）：33-35.

[3]王二輝，周高強(qiáng)，李英杰，等.基于大數(shù)據(jù)平臺的自動化運(yùn)維及監(jiān)控技術(shù)研究[J].通訊世界，2020（1）：158-159.

（編輯 傅金睿）

Research on automatic operation and monitoring technology based on Big Data platform

Huang Liang

（Hubei Second Normal University， Huangliang 430205， China）

Abstract：With the continuous development of today’s society and the continuous progress of science and technology， we are in an era of Big Data， giving full play to the advantages and functions of Big Data， which is widely used in people’s work and life. The popularity of the network and the application of computer software technology provide a driving force for the operation of Big Data platform. The rapid development of Big Data era makes people’s life and work more convenient and fast， not only in the information exchange between people， WeChat scan code payment and Taobao shopping platform， etc. The application of data software technology not only improves the convenience and quality of people’s lives， but also brings powerful economic benefits to software developers. Nowadays， with the rapid popularization of network technology and the rapid upgrading of computer technology， a large amount of data can be processed and analyzed by using computers， but the data is also useful and useless， and some useless data will bring inconvenience to people while providing convenience for people. According to the development status of Big Data platform at present， this paper puts forward the problems existing in automatic operation and maintenance and monitoring technology of Big Data platform， and puts forward reasonable solutions.

Key words：Big Data platform； automated operation and maintenance； monitoring； problem； solutions