文/陳云云

在當(dāng)前社會物聯(lián)網(wǎng)發(fā)展中，許多人們利用互聯(lián)網(wǎng)等通信技術(shù)方法，通過新的手段緊密連接傳感器，控制器，機(jī)器，人和物。形成人與物，物與物互聯(lián)，實現(xiàn)信息快速，實現(xiàn)遠(yuǎn)程管理控制和智能化網(wǎng)絡(luò)。本文現(xiàn)在分析了物聯(lián)網(wǎng)中大數(shù)據(jù)的發(fā)展，并總結(jié)了它使用的關(guān)鍵技術(shù)。

1 物聯(lián)網(wǎng)中大數(shù)據(jù)處理的水平和狀態(tài)

1.1 物聯(lián)網(wǎng)大數(shù)據(jù)應(yīng)用設(shè)計本身存在一定缺陷，缺乏與實際情況的整合

影響物聯(lián)網(wǎng)大數(shù)據(jù)在生活中應(yīng)用的關(guān)鍵原因之一是計算機(jī)本身的關(guān)鍵技術(shù)設(shè)計不完善。有些缺陷與大數(shù)據(jù)信息的實際情況無法結(jié)合。這對大數(shù)據(jù)的保存和傳播產(chǎn)生了不利影響。這一點原因也是極其關(guān)鍵的。同時，由于我國信息量眾多，人流眾多，大眾對于不同信息的觀眾程度和好奇度提升，因此，計算機(jī)關(guān)鍵技術(shù)應(yīng)結(jié)合應(yīng)用的實際情況。

1.2 大數(shù)據(jù)處理過程的管理不與信息管理相結(jié)合

計算機(jī)伴隨著現(xiàn)代化科學(xué)技術(shù)的發(fā)展慢慢的在人們的日常生活中普及化，為人們的生活和工作提供了極大的便利。但是，由于中國物聯(lián)網(wǎng)大數(shù)據(jù)產(chǎn)業(yè)發(fā)展緩慢，它仍然屬于傳統(tǒng)的基礎(chǔ)產(chǎn)業(yè)。各種技術(shù)通常是傳統(tǒng)的，這導(dǎo)致對該行業(yè)中相關(guān)管理者缺乏了解。分配給這部分的資金投入較少，使得工作仍主要依賴人工。此現(xiàn)象在我國的社會基層普遍性存在。同時在這個過程中也耗費了很大的人力和物力以及財力。同時領(lǐng)導(dǎo)層對該工作的重視程度不夠，也就導(dǎo)致資金來源缺乏，很多設(shè)備供應(yīng)不上，缺少高技術(shù)人才。

1.3 物聯(lián)網(wǎng)大數(shù)據(jù)在應(yīng)用前缺乏安全的數(shù)據(jù)處理

由于物聯(lián)網(wǎng)大數(shù)據(jù)的投入使用是一個很嚴(yán)謹(jǐn)?shù)墓ぷ?，所以計算機(jī)關(guān)鍵技術(shù)在投入到正式應(yīng)用之前，要求相關(guān)技術(shù)人員對關(guān)鍵計算機(jī)技術(shù)應(yīng)用的各個方面進(jìn)行反復(fù)檢查，并將做好數(shù)據(jù)處理工作，與此同時還要對獲取到的數(shù)據(jù)參數(shù)進(jìn)行多維分析，進(jìn)行綜合考慮各個方面的具體情況，最終得出結(jié)論是否能夠投入使用當(dāng)中。盡管如此，在目前我國大部分地區(qū)都只關(guān)注相關(guān)的產(chǎn)業(yè)進(jìn)步及經(jīng)濟(jì)利益，完全將一些基本的安全保障忽視掉了。

1.4 相關(guān)人員的專業(yè)水平相對較低，缺乏監(jiān)督

作為一個基礎(chǔ)產(chǎn)業(yè)，物聯(lián)網(wǎng)大數(shù)據(jù)產(chǎn)業(yè)在中國當(dāng)前仍舊處于一個低水平的狀態(tài)，而且在這方面工作的相關(guān)人員在社會地位的分配方面也比較低，如此使得員工在自身的工作熱情度大大減退，并且從源頭上制約了行業(yè)的發(fā)展。大家對自己的職業(yè)本質(zhì)尚不清楚。此外，許多工人的知識和技能熟練程度低也很常見。相對而言工作效率比較低，并且絕大多數(shù)員工也不是很了解自己的工作，針對一些先進(jìn)的技術(shù)也并不具備很高的掌握度。綜合素質(zhì)普遍低下。

2 基于物聯(lián)網(wǎng)大數(shù)據(jù)處理的關(guān)鍵技術(shù)研究

針對以上的一些有關(guān)物聯(lián)網(wǎng)大數(shù)據(jù)在現(xiàn)實生活中的實際應(yīng)用，再結(jié)合物聯(lián)網(wǎng)大數(shù)據(jù)在當(dāng)今時代的發(fā)展，筆者通過分析提出了幾點改進(jìn)措施。

2.1 大數(shù)據(jù)關(guān)鍵技術(shù)

2.1.1 大數(shù)據(jù)采集技術(shù)

數(shù)據(jù)的采集通常可以劃分為設(shè)備數(shù)據(jù)的收集以及web數(shù)據(jù)的爬取兩大類。而且針對不同的區(qū)域其所對應(yīng)的數(shù)據(jù)采集方法亦不相同，我們比較常用的數(shù)據(jù)收集軟件包括Splunk、Scoop、Flume、Logstash、Ketl等各種各樣的網(wǎng)絡(luò)爬蟲以及網(wǎng)站公開APL等方式。從中獲取到的大數(shù)據(jù)依據(jù)其結(jié)構(gòu)的不同，又可以劃分為結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)以及半結(jié)構(gòu)化數(shù)據(jù)等等。

2.1.2 大數(shù)據(jù)存儲技術(shù)

針對不同的大數(shù)據(jù)要求其需要具備具有差異性的存儲介質(zhì)以及組織管理形式。另外數(shù)據(jù)存儲介質(zhì)包括內(nèi)存和磁盤以及磁帶等；而主要的數(shù)據(jù)組織管理形式又包括了依行組織，依列組織，依健值組織，依關(guān)系組織等。如果在當(dāng)大數(shù)據(jù)的處理只是為了響應(yīng)用戶的簡單查詢和處理請求的時候，同時數(shù)據(jù)量又在其輕型的存儲范圍能力以內(nèi)，那么可以把大數(shù)據(jù)存儲到輕型的數(shù)據(jù)庫內(nèi)。其中輕型數(shù)據(jù)庫包括關(guān)系型數(shù)據(jù)庫(SQL)，非關(guān)系型數(shù)據(jù)庫(NΟSQL)，和新型數(shù)據(jù)庫等(NEWSQL)等等。

2.1.3 大數(shù)據(jù)分析處理技術(shù)

第一步就是要對大數(shù)據(jù)進(jìn)行預(yù)處理，即就是通過數(shù)據(jù)的清理和集成以及數(shù)據(jù)規(guī)約或者數(shù)據(jù)轉(zhuǎn)換來有效提升數(shù)據(jù)質(zhì)量，進(jìn)而為數(shù)據(jù)的處理和數(shù)據(jù)的分析以及數(shù)據(jù)的可視化做好準(zhǔn)備工作。因此，預(yù)處理技術(shù)又可以劃分為四種類型:即數(shù)據(jù)清理技術(shù)和數(shù)據(jù)集成技術(shù)以及數(shù)據(jù)規(guī)約技術(shù)與數(shù)據(jù)轉(zhuǎn)換技術(shù)。以目前的發(fā)展境況分析看來，對于流式數(shù)據(jù)的預(yù)處理技術(shù)可以主要劃分為基于數(shù)據(jù)的技術(shù)以及基于任務(wù)的技術(shù)。

2.1.4 大數(shù)據(jù)可視化技術(shù)

使降低大數(shù)據(jù)的使用難度，進(jìn)而有效地在大數(shù)據(jù)和用戶之間進(jìn)行信息的傳遞，這些都使得大數(shù)據(jù)的可視化成為必要性工作內(nèi)容。數(shù)據(jù)的可視化具體運(yùn)用計算機(jī)圖形學(xué)以及圖像處理技術(shù)，有效的將數(shù)據(jù)成功轉(zhuǎn)換為圖形或者圖像在計算機(jī)屏幕上顯示出來，再做交換處理。此外對于大數(shù)據(jù)的可視化處理和傳統(tǒng)的數(shù)據(jù)可視化他們的不同點就在于關(guān)于大數(shù)據(jù)可視化技術(shù)其主要考慮到的即大數(shù)據(jù)的4V特征，如此便能夠支持交互且進(jìn)行實時更新。

2.2 物聯(lián)網(wǎng)關(guān)鍵技術(shù)應(yīng)用對策

2.2.1 改進(jìn)設(shè)計方案，結(jié)合事實

物聯(lián)網(wǎng)大數(shù)據(jù)的實際實踐表明，合理的系統(tǒng)與方法對于大數(shù)據(jù)的應(yīng)用起決定性作用。所以計算機(jī)關(guān)鍵技術(shù)可以在這兩個方面進(jìn)行改進(jìn)，來提高和實際情況的融合程度。對計算機(jī)關(guān)鍵技術(shù)的要求是：有必要快速轉(zhuǎn)換信息，輸入各種類型的信息，并控制不良信息。增加這方面的投入，需要大量引進(jìn)先進(jìn)技術(shù)和人才。

2.2.2 進(jìn)行信息化管理方式

在計算機(jī)關(guān)鍵技術(shù)在物聯(lián)網(wǎng)大數(shù)據(jù)中得到廣泛應(yīng)用后，其管理亦可以與計算機(jī)的關(guān)鍵技術(shù)進(jìn)行有機(jī)結(jié)合，即就是需要采取某種計算機(jī)程序展開具體的管理工作，再者就需要一定數(shù)量的計算機(jī)設(shè)備的工作支持。第一步就是公司需要對其系統(tǒng)的日常維護(hù)任務(wù)進(jìn)行進(jìn)一步設(shè)計。當(dāng)這些系統(tǒng)投入使用之后，又可以對其進(jìn)行合理化設(shè)計，再者就是從科學(xué)的角度進(jìn)行判斷和分析，毫無疑問，科學(xué)是第一生產(chǎn)力，如此為了進(jìn)一步提升生產(chǎn)效率，又需要我們提升專業(yè)設(shè)備的普及率，并且保障每位員工熟練掌握專業(yè)設(shè)備，以此提高工作效率。

2.2.3 增加數(shù)據(jù)處理環(huán)節(jié)，做好后期工作

由于數(shù)據(jù)處理鏈接是物聯(lián)網(wǎng)中大數(shù)據(jù)應(yīng)用的進(jìn)一步保證，所以，針對鏈接的存在就尤為重要，然而為了更進(jìn)一步地增加這種聯(lián)系，又需要將其完全付諸于實踐，這樣就極為有必要提升企業(yè)內(nèi)部對于這種聯(lián)系的認(rèn)識，而且還要注意到他所帶來的重要作用。如此，倘若想要施加安全數(shù)據(jù)來處理此環(huán)節(jié)，最主要的就是要依靠人工，進(jìn)而成立專門的部門，對計算機(jī)關(guān)鍵技術(shù)及融合度比較高的相關(guān)程序進(jìn)行系統(tǒng)性的數(shù)據(jù)處理，為更好的應(yīng)用打下基礎(chǔ)。不僅如此，組織相關(guān)技術(shù)人員在分析過程中還需要特別建立起數(shù)據(jù)以及物理建構(gòu)模型標(biāo)準(zhǔn)，并形成同時進(jìn)行設(shè)計和安全數(shù)據(jù)處理的情況。

2.2.4 提高基層員工的學(xué)習(xí)積極性

有關(guān)物聯(lián)網(wǎng)技術(shù)人員工作水平的提高屬于是確保工作效率及數(shù)據(jù)安全的直接有效的方法。而如果想要提高自身的技能，就必須要結(jié)合幾個方面展開：第一步，經(jīng)銷商要綜合根據(jù)自身工作的具體內(nèi)容不斷在工作過程中加以實踐，同時還要進(jìn)行相關(guān)的知識經(jīng)驗的積累。同時，由于計算機(jī)關(guān)鍵技術(shù)是一種高新技術(shù)，對于基層的員工可能缺乏使用的基礎(chǔ)知識，所以這一個部分也要開展相關(guān)的培養(yǎng)工作。增加員工的數(shù)量，同時要提高工作效率，保質(zhì)保量，定期開展工作經(jīng)驗交流會。創(chuàng)新屬于是極其有效的一種方式，所以我們才鼓勵基層的員工進(jìn)行創(chuàng)新，而針對此學(xué)習(xí)積極性的提升又非常重要。同時，要加強(qiáng)企業(yè)領(lǐng)導(dǎo)甚至基層員工對工作的重視，或?qū)斫獾恼`解。

3 結(jié)束語

本文闡述了物聯(lián)網(wǎng)大數(shù)據(jù)當(dāng)前的相撞和所處水平，存在某些問題，包括物聯(lián)網(wǎng)在設(shè)計時其本身存在的一些問題缺陷，缺乏與實際情況的結(jié)合、大數(shù)據(jù)處理過程的管理沒有與信息化管理結(jié)合、在應(yīng)用前缺少安全數(shù)據(jù)處理環(huán)節(jié)、相關(guān)人員的專業(yè)水平比較低，缺乏監(jiān)管等等，我們提出了相應(yīng)的改進(jìn)方法：對設(shè)計方案進(jìn)行改進(jìn)，結(jié)合實情、進(jìn)息化管理方式、加數(shù)據(jù)處理環(huán)節(jié)，做好后期工作、提高基層員工的學(xué)習(xí)積極性等。讓物聯(lián)網(wǎng)大數(shù)據(jù)時代更加前進(jìn)一步。