王強(qiáng)

摘要：我們已經(jīng)進(jìn)入物聯(lián)網(wǎng)時(shí)代，物聯(lián)網(wǎng)那個(gè)是一把雙刃劍，但是我們可以將物聯(lián)網(wǎng)時(shí)代下產(chǎn)生的影響應(yīng)該全面來(lái)看待，它給我們也提出了各種挑戰(zhàn)，首先，物聯(lián)網(wǎng)將生活中的人與物聯(lián)網(wǎng)聯(lián)系起來(lái)，產(chǎn)生了大量的數(shù)據(jù)，這是我們遇到的第一大問(wèn)題，但是物聯(lián)網(wǎng)也給我們提供了具體的解決措施—云計(jì)算技術(shù)、分布式技術(shù)，他已經(jīng)漸漸成為物聯(lián)網(wǎng)時(shí)代的一項(xiàng)基本計(jì)算技術(shù)。其次物聯(lián)網(wǎng)上出現(xiàn)了大量良莠不齊的信息，所以我們應(yīng)加強(qiáng)物聯(lián)網(wǎng)的監(jiān)管以及安全技術(shù)，最后，由于信息量的巨大，物聯(lián)網(wǎng)數(shù)據(jù)的查詢、分析以及處理也是一大難題。

關(guān)鍵詞：物聯(lián)網(wǎng)；大數(shù)據(jù)處理；關(guān)鍵技術(shù)

中圖分類號(hào)：TP393 文獻(xiàn)標(biāo)識(shí)碼：A 文章編號(hào)：1009-3044（2018）12-0029-03

1物聯(lián)網(wǎng)以及大數(shù)據(jù)處理的發(fā)展現(xiàn)狀

隨著物聯(lián)網(wǎng)技術(shù)的完善，社會(huì)經(jīng)濟(jì)也得到了很大的進(jìn)步，物聯(lián)網(wǎng)帶來(lái)的收入就接近3000億美元，相信未來(lái)物聯(lián)網(wǎng)將會(huì)帶來(lái)更加長(zhǎng)遠(yuǎn)的發(fā)展，很多的領(lǐng)域的企業(yè)將互聯(lián)網(wǎng)技術(shù)深入到自己的發(fā)展中來(lái)，所以物聯(lián)網(wǎng)也是推動(dòng)企業(yè)進(jìn)步的一大動(dòng)力，當(dāng)然物聯(lián)網(wǎng)的發(fā)展也給我們提供了更多的要求和挑戰(zhàn)，事物與事物之間聯(lián)系的加強(qiáng)，產(chǎn)生了大量的數(shù)據(jù)需要我們?nèi)ソ鉀Q，這個(gè)過(guò)程物聯(lián)網(wǎng)也給我們提供了更多的思路去解決。

1.1物聯(lián)網(wǎng)的發(fā)展現(xiàn)狀

1）國(guó)外物聯(lián)網(wǎng)的發(fā)展?fàn)顩r

國(guó)外很重視物聯(lián)網(wǎng)的發(fā)展，他們對(duì)物聯(lián)網(wǎng)進(jìn)行了大量的研究，政府方面建立了相關(guān)的實(shí)驗(yàn)室，加大對(duì)無(wú)線傳感器網(wǎng)絡(luò)的研究。除此之外，各大高校與相關(guān)的軟件公司或者硬件公司進(jìn)行相關(guān)的研究，比如說(shuō)微軟、因特爾等。這是國(guó)外大多數(shù)國(guó)家發(fā)展物聯(lián)網(wǎng)的大體路線。歐盟在物聯(lián)網(wǎng)方面一直處于領(lǐng)先地位，歐洲啟動(dòng)了物聯(lián)網(wǎng)行動(dòng)計(jì)劃，該項(xiàng)計(jì)劃主要針對(duì)物聯(lián)網(wǎng)的發(fā)展?jié)摿?，以及物?lián)網(wǎng)發(fā)展中的問(wèn)題比如說(shuō)隱私問(wèn)題、數(shù)據(jù)問(wèn)題、監(jiān)管問(wèn)題等，提出具體措施為行動(dòng)方案，建立管理機(jī)制，技術(shù)創(chuàng)新等。

2）國(guó)內(nèi)物聯(lián)網(wǎng)的發(fā)展?fàn)顩r

在20世紀(jì)末的時(shí)候，我國(guó)已經(jīng)開(kāi)始關(guān)注到物聯(lián)網(wǎng)的發(fā)展。在這個(gè)新興的領(lǐng)域，我國(guó)已經(jīng)走在世界的前段，我國(guó)就對(duì)物聯(lián)網(wǎng)的發(fā)展給予了相當(dāng)?shù)年P(guān)注，在這個(gè)過(guò)程中，政府發(fā)揮了很重要的作用，溫家寶同志視察物聯(lián)網(wǎng)研發(fā)中心時(shí)提出發(fā)展物聯(lián)網(wǎng)應(yīng)該樹(shù)立長(zhǎng)遠(yuǎn)目光，江蘇省在物聯(lián)網(wǎng)的發(fā)展中也有了更加明確的內(nèi)容，勢(shì)頭良好。我國(guó)國(guó)家整體的形式就是快速發(fā)展的轉(zhuǎn)型期，但科技領(lǐng)域仍處于初級(jí)階段，物聯(lián)網(wǎng)那個(gè)狀態(tài)下的經(jīng)濟(jì)發(fā)展還沒(méi)有成型，但是我們能夠肯定的是物聯(lián)網(wǎng)發(fā)展?jié)摿Σ豢晒懒俊?/p>

1.2大數(shù)據(jù)處理的發(fā)展現(xiàn)狀

物聯(lián)網(wǎng)時(shí)代的到來(lái)帶來(lái)了大量的數(shù)據(jù)，尤其在中國(guó)這個(gè)人口大國(guó)，大數(shù)據(jù)的環(huán)境下，很多的領(lǐng)域都面臨著挑戰(zhàn)，在競(jìng)爭(zhēng)中失去優(yōu)勢(shì)。我們應(yīng)該轉(zhuǎn)危為安，利用大數(shù)據(jù)來(lái)發(fā)揮我們，而不是被他阻擋住。

很多的企業(yè)面對(duì)大量的數(shù)據(jù)出現(xiàn)了很多的問(wèn)題，比如對(duì)數(shù)據(jù)的處理能力弱，利用率低、混亂，高成本高消耗等等，國(guó)內(nèi)的IT行業(yè)針對(duì)這些問(wèn)題應(yīng)該做出相應(yīng)的調(diào)整。政府正對(duì)大數(shù)據(jù)時(shí)代處理的問(wèn)題也提供了相應(yīng)的對(duì)策，進(jìn)行大數(shù)據(jù)研究，引導(dǎo)企業(yè)發(fā)展，“十二五”計(jì)劃中也涉及大數(shù)據(jù)處理方面的問(wèn)題，發(fā)展原則是以市場(chǎng)為中心，創(chuàng)新技術(shù)，政府引導(dǎo)發(fā)展。當(dāng)前大數(shù)據(jù)發(fā)展的主要問(wèn)題有數(shù)據(jù)量龐大、復(fù)雜、技術(shù)不完善，而用戶的要求越來(lái)越高，政府針對(duì)大數(shù)據(jù)處理提出一下幾點(diǎn)建議，首先盡心數(shù)據(jù)分析技術(shù)的創(chuàng)新，這個(gè)過(guò)程設(shè)計(jì)到智能技術(shù)。其次是數(shù)據(jù)的處理技術(shù)與他技術(shù)的發(fā)展，三是對(duì)大數(shù)據(jù)技術(shù)的運(yùn)用技術(shù)的開(kāi)發(fā)。

2物聯(lián)網(wǎng)以及大數(shù)據(jù)處理的介紹

大數(shù)據(jù)具有的特點(diǎn)就是數(shù)據(jù)量的龐大，所以他更加需要現(xiàn)代的機(jī)遇物聯(lián)網(wǎng)基礎(chǔ)上各種技術(shù)的發(fā)展來(lái)實(shí)現(xiàn)大數(shù)據(jù)處理技術(shù)的發(fā)展，比如說(shuō)數(shù)據(jù)庫(kù)技術(shù)，數(shù)字化技術(shù)，云計(jì)算技術(shù)等等，近些年，隨著物聯(lián)網(wǎng)以及大數(shù)據(jù)處理的技術(shù)發(fā)生了變化，這些你內(nèi)在的問(wèn)題更加亟待解決，在這一領(lǐng)域的研究者要解決這些問(wèn)題，就要先從本質(zhì)上去發(fā)覺(jué)，我們對(duì)他們的概念，定義甚至它的特點(diǎn)應(yīng)該做一個(gè)明確的了解。

2.1物聯(lián)網(wǎng)的介紹

1）物聯(lián)網(wǎng)的概念

物聯(lián)網(wǎng)聽(tīng)起來(lái)跟互聯(lián)網(wǎng)有點(diǎn)相似，她就是在互聯(lián)網(wǎng)、傳統(tǒng)通信技術(shù)的基礎(chǔ)上發(fā)展起來(lái)的，將一切無(wú)關(guān)聯(lián)的人、事、物聯(lián)系起來(lái)，也就是我們常說(shuō)的T2T、 H2T、H2H之間的互聯(lián)，這樣可以使事物之間的鏈接更加簡(jiǎn)化，這也是它的技術(shù)目的，物聯(lián)網(wǎng)一般為無(wú)線網(wǎng)，物聯(lián)網(wǎng)可以通過(guò)一個(gè)中心數(shù)據(jù)端將繁雜的事物集中一個(gè)中心實(shí)現(xiàn)統(tǒng)一的控制。比如現(xiàn)在比較關(guān)注的家庭的智能控制。

2）物聯(lián)網(wǎng)的特點(diǎn)

首先，它是感知技術(shù)的集合，具有實(shí)時(shí)性的特點(diǎn)。物聯(lián)網(wǎng)是基于互聯(lián)網(wǎng)技術(shù)發(fā)展起來(lái)的，但是它還是有很多自身的特點(diǎn)，與互聯(lián)網(wǎng)相比，他還集合了其他的技術(shù)，比如說(shuō)有移動(dòng)網(wǎng)絡(luò)技術(shù)，數(shù)字化技術(shù)，虛擬技術(shù)等等，不同的技術(shù)的原理以及發(fā)揮的效果不一樣，但我們知道融合了各種優(yōu)秀元素的技術(shù)應(yīng)該是更加完善的，融合了多種技術(shù)的物聯(lián)網(wǎng)技術(shù)傳播訊息更加的及時(shí)、快速，我們可以不斷地更新數(shù)據(jù)。

第二，它是建立在互聯(lián)網(wǎng)的基礎(chǔ)上發(fā)展起來(lái)的，所以它具有互聯(lián)網(wǎng)的某些特征——虛擬性、不可控性、大數(shù)據(jù)等。物聯(lián)網(wǎng)那個(gè)主要依托的依舊是互聯(lián)網(wǎng)，借助有線以及無(wú)線網(wǎng)絡(luò)實(shí)現(xiàn)的發(fā)展，將很多信息傳遞到接受者的彼端，物聯(lián)網(wǎng)那個(gè)傳播的信息量是巨大的，所以又稱為大數(shù)據(jù)處理，物聯(lián)網(wǎng)環(huán)境下信息的傳播并不是完美無(wú)缺的，由于所處環(huán)境的虛擬性，還產(chǎn)生了一定的危機(jī)，我們同時(shí)需要加強(qiáng)網(wǎng)絡(luò)監(jiān)管。

最后，物聯(lián)網(wǎng)處理技術(shù)具有普通媒體具有的傳播信息的作用，它還能夠?qū)崿F(xiàn)智能技術(shù)控制與管理。只要是媒體就有傳播信息的作用，這個(gè)不言而喻，我們?cè)谏衔囊呀?jīng)說(shuō)過(guò)，物聯(lián)網(wǎng)是各種感知技術(shù)的集合，所以物聯(lián)網(wǎng)那個(gè)能夠?qū)崿F(xiàn)智能的控制與管理也是必須的，他可以利用數(shù)字化技術(shù)、云計(jì)算技術(shù)、遠(yuǎn)程控制技術(shù)實(shí)現(xiàn)這些目的。

2.2 大數(shù)據(jù)處理的介紹

1）大數(shù)據(jù)處理的概念

“大數(shù)據(jù)”根據(jù)它的名稱我們也能夠略知一二，他又稱為巨量資料、稱大數(shù)據(jù)或海量資料，這指的是物聯(lián)網(wǎng)狀態(tài)下產(chǎn)生的繁雜的大量的數(shù)據(jù)，它是不能夠通過(guò)普通軟件工具處理，只有利用物聯(lián)網(wǎng)技術(shù)（云計(jì)算）基礎(chǔ)上創(chuàng)新技術(shù)，整合共享，反復(fù)利用能夠?qū)崿F(xiàn)利用的能夠創(chuàng)造巨大財(cái)富的超大規(guī)模資訊。

2）大數(shù)據(jù)處理的特點(diǎn)

首先，我們說(shuō)的數(shù)量大，大數(shù)據(jù)是在物聯(lián)網(wǎng)那個(gè)技術(shù)的狀態(tài)下誕生的，在這個(gè)過(guò)程中然而自然的利用到大量的數(shù)據(jù)。其次我們物聯(lián)網(wǎng)狀態(tài)下產(chǎn)生的數(shù)據(jù)書(shū)量大，從而產(chǎn)生的種類也多，其中一個(gè)原因是涉及很多的社會(huì)領(lǐng)域，其次承載數(shù)據(jù)的載體也多種多樣，比如說(shuō)企業(yè)的發(fā)展，以及社會(huì)的經(jīng)濟(jì)狀況等等。第三，價(jià)值密度低。就是大量的數(shù)據(jù)可以被利用的有價(jià)值的信息很少，這就需要依靠有效的技術(shù)手段進(jìn)行篩選。第四，大數(shù)據(jù)容易被處理。大數(shù)據(jù)是在物聯(lián)網(wǎng)的基礎(chǔ)上產(chǎn)生的，同時(shí)它也需要依靠物聯(lián)網(wǎng)來(lái)處理，物聯(lián)網(wǎng)的特點(diǎn)就是處理速度快，因?yàn)樗梢耘c其他的技術(shù)相結(jié)合。

3 物聯(lián)網(wǎng)與大數(shù)據(jù)處理的關(guān)系

物聯(lián)網(wǎng)已經(jīng)進(jìn)入到市場(chǎng)領(lǐng)域，影響到我們的經(jīng)濟(jì)發(fā)展，主要用于遠(yuǎn)程監(jiān)控，環(huán)境管理等，應(yīng)用較多的有通信、機(jī)械、醫(yī)療等領(lǐng)域，這些利用物聯(lián)網(wǎng)感知系統(tǒng)下產(chǎn)生的大量數(shù)據(jù)為依托，開(kāi)發(fā)具有潛力的信息，占領(lǐng)市場(chǎng)并與各個(gè)領(lǐng)域相融合，開(kāi)發(fā)出更大的利益，這就是互聯(lián)網(wǎng)促進(jìn)大數(shù)據(jù)的發(fā)揮在那，從而帶動(dòng)社會(huì)經(jīng)濟(jì)常態(tài)發(fā)展，除了物聯(lián)網(wǎng)狀態(tài)下，大數(shù)據(jù)創(chuàng)造大量的商業(yè)利益之外，它也帶來(lái)了很多的挑戰(zhàn)，物聯(lián)網(wǎng)那個(gè)產(chǎn)生的大量數(shù)據(jù)由于煩瑣以及復(fù)雜。

3.1 大數(shù)據(jù)為物聯(lián)網(wǎng)那個(gè)創(chuàng)造大量的商業(yè)價(jià)值

大數(shù)據(jù)時(shí)代，主要是來(lái)自物聯(lián)網(wǎng)通過(guò)感知技術(shù)將各種人、事、物聯(lián)系而產(chǎn)生的，它來(lái)自各種各樣的領(lǐng)域，經(jīng)濟(jì)領(lǐng)域、政治領(lǐng)域、科技領(lǐng)域，所以它在整理以及檢索方面有一定的難度，但是將大數(shù)據(jù)如果處理好，會(huì)形成很多的商業(yè)模式，就會(huì)產(chǎn)生巨大的商業(yè)效益。具體舉例來(lái)說(shuō)，比如說(shuō)在汽車的開(kāi)發(fā)生產(chǎn)方面，我們可以通過(guò)物聯(lián)網(wǎng)進(jìn)行試產(chǎn)定位，策略決策，從物聯(lián)網(wǎng)那個(gè)終端搜集信息、數(shù)據(jù)，然后利用物聯(lián)網(wǎng)技術(shù)進(jìn)行信息的有效整合、分析，從而確定我們的消費(fèi)人群，以及市場(chǎng)定位。物聯(lián)網(wǎng)通過(guò)對(duì)數(shù)據(jù)的處理，產(chǎn)生了特定的商業(yè)價(jià)值。

3.2 物聯(lián)網(wǎng)不能夠全面的大數(shù)據(jù)問(wèn)題

大數(shù)據(jù)環(huán)境是在物聯(lián)網(wǎng)技術(shù)狀態(tài)下產(chǎn)生的，物聯(lián)網(wǎng)是一種感知技術(shù)的集合，所以在這種技術(shù)下產(chǎn)生的大數(shù)據(jù)也是繁雜的，所以大數(shù)據(jù)處理起來(lái)也是不容易的，物聯(lián)網(wǎng)環(huán)境下產(chǎn)生的數(shù)據(jù)具有大量、非結(jié)構(gòu)化、碎片化的數(shù)據(jù)，在處理方面即使是物聯(lián)網(wǎng)技術(shù)也會(huì)遇到很多的問(wèn)題，目前我國(guó)的物聯(lián)網(wǎng)，中國(guó)物聯(lián)網(wǎng)數(shù)據(jù)處理技術(shù)仍處在起步階段，我們需要更多的投入來(lái)創(chuàng)新大數(shù)據(jù)處理技術(shù)。

3.3 物聯(lián)網(wǎng)對(duì)大數(shù)據(jù)處理的促進(jìn)作用

1）物聯(lián)網(wǎng)形成產(chǎn)業(yè)鏈

我們已經(jīng)了解到物聯(lián)網(wǎng)的信息包含社交網(wǎng)絡(luò)信息，以及感知信息兩種，在這種狀態(tài)下，產(chǎn)生了大量涉及社會(huì)各個(gè)領(lǐng)域的非結(jié)構(gòu)化、碎片化的數(shù)據(jù)。物聯(lián)網(wǎng)產(chǎn)生的數(shù)據(jù)給我們生活的各個(gè)領(lǐng)域帶來(lái)了各種各樣的影響，其中教育、醫(yī)療、電器等領(lǐng)域都有涉及，物聯(lián)網(wǎng)將涉及的領(lǐng)域的數(shù)據(jù)結(jié)合起來(lái)，給某些企業(yè)帶來(lái)了更大的商業(yè)利益，因?yàn)樗梢宰屍髽I(yè)更好的分析自身所處的經(jīng)濟(jì)環(huán)境，合理定位自己的市場(chǎng)價(jià)值，延伸自己的生產(chǎn)鏈，從而促進(jìn)自身社會(huì)價(jià)值以及商業(yè)價(jià)值的發(fā)展。據(jù)有關(guān)部門(mén)預(yù)測(cè)，隨著互聯(lián)網(wǎng)以及云計(jì)算的發(fā)展，我國(guó)物聯(lián)網(wǎng)那個(gè)將有一個(gè)更好的發(fā)展勢(shì)頭，同時(shí)也會(huì)擴(kuò)大現(xiàn)有的市場(chǎng)規(guī)模，同時(shí)物聯(lián)網(wǎng)所形成的產(chǎn)業(yè)鏈各個(gè)環(huán)節(jié)的牽絆將會(huì)減少，才能夠?qū)崿F(xiàn)數(shù)據(jù)的高效率利用，以及物聯(lián)網(wǎng)的更大發(fā)展。物聯(lián)網(wǎng)進(jìn)入商業(yè)領(lǐng)域沒(méi)有什么不可能。這樣物聯(lián)網(wǎng)就容易成為世界的中心，變成商業(yè)發(fā)展的動(dòng)力，讓更多企業(yè)的發(fā)展與物聯(lián)網(wǎng)結(jié)合起來(lái)。物聯(lián)網(wǎng)能夠促進(jìn)并帶動(dòng)大數(shù)據(jù)發(fā)展。大數(shù)據(jù)的采集和感知技術(shù)的發(fā)展是緊密聯(lián)系的。

2）物聯(lián)網(wǎng)產(chǎn)生大數(shù)據(jù)

大數(shù)據(jù)的出現(xiàn)是由于各方面的影響，電子商務(wù)的發(fā)展促進(jìn)了互聯(lián)網(wǎng)經(jīng)濟(jì)與傳統(tǒng)經(jīng)濟(jì)的結(jié)合，這種經(jīng)濟(jì)的模式下，更容易催生大數(shù)據(jù)。我們已經(jīng)說(shuō)了物聯(lián)網(wǎng)形成了產(chǎn)業(yè)鏈?zhǔn)窃诋a(chǎn)生的大數(shù)據(jù)的狀態(tài)下產(chǎn)生的，所以產(chǎn)業(yè)鏈的發(fā)展依托的是大數(shù)據(jù)，所以我們還是應(yīng)該從物聯(lián)網(wǎng)時(shí)代產(chǎn)生了大數(shù)據(jù)說(shuō)起，物聯(lián)網(wǎng)通過(guò)感知技術(shù)的結(jié)合產(chǎn)生了社交網(wǎng)絡(luò)數(shù)據(jù)以及傳感感知數(shù)據(jù)，數(shù)據(jù)量想當(dāng)龐大，復(fù)雜，加上云計(jì)算技術(shù)以及互聯(lián)網(wǎng)技術(shù)的發(fā)展，數(shù)據(jù)也變得更加復(fù)雜多樣，這些數(shù)據(jù)會(huì)涉及教育、醫(yī)療、電氣等各個(gè)領(lǐng)域，這些大數(shù)據(jù)的出現(xiàn)給了我們很多發(fā)展的機(jī)會(huì)，我們可以對(duì)這些數(shù)據(jù)進(jìn)行反洗，真核，尋求規(guī)律性以及價(jià)值型，從而促進(jìn)相關(guān)行業(yè)的發(fā)展，比如說(shuō)我們?cè)谡{(diào)查我們的汽車的生產(chǎn)改進(jìn)方面，我們可以通過(guò)物聯(lián)網(wǎng)進(jìn)行較差，然后進(jìn)行數(shù)據(jù)的整合，從而確定我們的改進(jìn)方法，以及消費(fèi)群體等。

4 基于物聯(lián)網(wǎng)大數(shù)據(jù)處理的關(guān)鍵技術(shù)

物聯(lián)網(wǎng)環(huán)境下大數(shù)據(jù)的發(fā)展已經(jīng)是社會(huì)發(fā)展的主流，他的發(fā)展給社會(huì)的各個(gè)領(lǐng)域帶來(lái)了改變，醋精了商業(yè)產(chǎn)業(yè)鏈的發(fā)展，開(kāi)創(chuàng)了新的盛業(yè)模式，提升了企業(yè)的價(jià)值，但是由于數(shù)據(jù)量的巨大，在分析檢索方面也給我們帶來(lái)了很多的挑戰(zhàn)，但是目前的很多技術(shù)尚不能解決這些問(wèn)題，我們應(yīng)該在新時(shí)代潮流下積極尋求以及創(chuàng)新大數(shù)據(jù)處理的方法，不僅需要有關(guān)研發(fā)部門(mén)的支持，還需要政府的相關(guān)政策支持，我們相信蘊(yùn)藏著巨大潛力的大數(shù)據(jù)與一定會(huì)被我們的技術(shù)所利用，促進(jìn)我們社會(huì)的發(fā)展，下面我就針對(duì)基于物聯(lián)網(wǎng)形勢(shì)下，大數(shù)據(jù)處理技術(shù)的創(chuàng)新展開(kāi)詳述。

4.1 移動(dòng)通信網(wǎng)絡(luò)中大數(shù)據(jù)處理的關(guān)鍵技術(shù)——云計(jì)算

云計(jì)算作為一種物聯(lián)網(wǎng)技術(shù)，產(chǎn)生大量繁雜、碎片化以及非結(jié)構(gòu)化的大量數(shù)據(jù)，兩者都源于物聯(lián)網(wǎng)，都有相同之處。所以大數(shù)據(jù)的處理一定會(huì)應(yīng)用到云計(jì)算技術(shù)。大數(shù)據(jù)與云計(jì)算產(chǎn)生的環(huán)境具有相似性。我們已經(jīng)鏈接到大數(shù)據(jù)也分為結(jié)構(gòu)化以及非結(jié)構(gòu)化的數(shù)據(jù)，如果簡(jiǎn)單的利用原始的技術(shù)加以處理會(huì)大大的加大處理的難度以及人工成本，有了云計(jì)算以后，加上物聯(lián)網(wǎng)技術(shù)。云計(jì)算應(yīng)用原理是，云計(jì)算是承載了大量分散的決策中心，團(tuán)結(jié)的力量總是強(qiáng)大的，無(wú)數(shù)個(gè)決策中心對(duì)數(shù)據(jù)的處理最終會(huì)形成一個(gè)超級(jí)決策，所以云集在數(shù)據(jù)的整理、計(jì)算以及決策方面發(fā)揮了巨大的作用。大數(shù)據(jù)的價(jià)值也是無(wú)窮的，只要?jiǎng)?chuàng)新技術(shù)加以合理的利用。大數(shù)據(jù)處理的兩大趨勢(shì)分別是數(shù)據(jù)極度膨脹，數(shù)據(jù)在整理分析方面的難度以及數(shù)據(jù)分析深度增加，這也就給我們?cè)诖髷?shù)據(jù)的處理的實(shí)效性方面帶來(lái)了很大的挑戰(zhàn)，所以我們應(yīng)該順應(yīng)時(shí)代發(fā)展的潮流，更大的開(kāi)發(fā)物聯(lián)網(wǎng)基礎(chǔ)上的云計(jì)算技術(shù)，谷歌在處理分析大數(shù)據(jù)方面推出了——分布式文件系統(tǒng)、 并行編程模型、 并行執(zhí)行引擎注等技術(shù)

4.2 數(shù)據(jù)篩選——數(shù)據(jù)清洗技術(shù)、去冗余技術(shù)

下面我們來(lái)具體地介紹云計(jì)算在數(shù)據(jù)的整理方面具體應(yīng)用到了那些技術(shù)，在物聯(lián)網(wǎng)的環(huán)境，產(chǎn)生了涉及社會(huì)各個(gè)領(lǐng)域的大量復(fù)雜并且難以判斷的信息，這些信息具有的特征主要是可靠性低、數(shù)據(jù)的不正確，存在誤差等問(wèn)題，難以判斷其價(jià)值性，在這個(gè)過(guò)程中，移動(dòng)網(wǎng)絡(luò)通信利用數(shù)據(jù)都安靜型信息的篩選，這時(shí)候我們就需要通過(guò)數(shù)據(jù)清洗技術(shù)對(duì)虛假，不良的社會(huì)信息進(jìn)行淘汰，遺留下有價(jià)值的可供我們利用的信息，其次就是去冗余技術(shù)主要是提取信息中最有精華的部分，其實(shí)數(shù)據(jù)清洗技術(shù)在很早的時(shí)候已經(jīng)出現(xiàn)了，但是它出現(xiàn)的環(huán)境主要針對(duì)的是傳統(tǒng)的結(jié)構(gòu)化的數(shù)據(jù)，但針對(duì)物聯(lián)網(wǎng)狀態(tài)下出現(xiàn)的大量的碎片化以及非結(jié)構(gòu)化的數(shù)據(jù)，我們需要進(jìn)一步開(kāi)發(fā)適應(yīng)社會(huì)發(fā)展的數(shù)據(jù)清洗技術(shù)以及去冗余技術(shù) 。

4.3數(shù)據(jù)儲(chǔ)存——分布式技術(shù)

1）分布式文件系統(tǒng)，是一個(gè)龐大的軟件框架，所以在硬件方面的成本會(huì)比較低，利用分布式文件系統(tǒng)這種軟件更具有靈活性，顧客可以自由的修改自己的代碼，它主要的任務(wù)是對(duì)大數(shù)據(jù)進(jìn)行計(jì)算以及儲(chǔ)存。

2）分布式緩存 也是分布式技術(shù)的一種，并且它在大數(shù)據(jù)處理技術(shù)方面的應(yīng)用越來(lái)越廣泛，它的出現(xiàn)可以減輕儲(chǔ)存大量信息的數(shù)據(jù)庫(kù)的負(fù)載，他可以通過(guò)利用你內(nèi)存對(duì)數(shù)據(jù)以及對(duì)象進(jìn)行緩存，從而減少數(shù)據(jù)進(jìn)入數(shù)據(jù)庫(kù)的次數(shù)以及數(shù)量，這樣就大大提高了物聯(lián)網(wǎng)運(yùn)轉(zhuǎn)的速度，提升了物聯(lián)網(wǎng)的性能，所以我們可以說(shuō)分布式緩存是一個(gè)技術(shù)大數(shù)據(jù)值得被應(yīng)用，可靠地存儲(chǔ)引擎。

3）分布式數(shù)據(jù)庫(kù)又是分布式技術(shù)的一個(gè)種類，這一種技術(shù)又是主要根據(jù)大數(shù)據(jù)時(shí)代的特點(diǎn)而產(chǎn)生的一種技術(shù)，它主要的任務(wù)是對(duì)大數(shù)據(jù)的查詢，并且是數(shù)據(jù)大規(guī)模的進(jìn)行處理以及完全無(wú)共享架構(gòu)，建立在谷歌系統(tǒng)基礎(chǔ)上的分布式數(shù)據(jù)庫(kù)系統(tǒng)，專門(mén)的人員可以進(jìn)行數(shù)據(jù)的提取、轉(zhuǎn)換和開(kāi)發(fā)。除了此種數(shù)據(jù)庫(kù)系統(tǒng)，還有非關(guān)系型數(shù)據(jù)庫(kù)系統(tǒng)。非關(guān)系性的數(shù)據(jù)庫(kù)系統(tǒng)主要用于數(shù)據(jù)的存儲(chǔ)，它具有高可靠性、可伸縮等特點(diǎn)。他可以構(gòu)建大規(guī)模結(jié)構(gòu)化的存儲(chǔ)型集群，將大量的數(shù)據(jù)集合起來(lái)。

4.4 數(shù)據(jù)處理——文本信息處理技術(shù)

1）遺傳算法

該種大數(shù)據(jù)處理方法主要依據(jù)生物學(xué)中優(yōu)勝劣汰的原理，從而產(chǎn)生的一種隨機(jī)化搜索方法，主要針對(duì)的是數(shù)據(jù)的檢索，利用這種技術(shù)我們可以再大數(shù)據(jù)環(huán)境下自動(dòng)獲取和指導(dǎo)優(yōu)化的搜索空間，遺傳算法這種技術(shù)易被廣泛地應(yīng)用與機(jī)器學(xué)習(xí)、信號(hào)處理等領(lǐng)域。

2）數(shù)據(jù)挖掘

數(shù)據(jù)挖掘的方法主要有：

第一、分類分析。文本處理技術(shù)利用的原理之一是利用分類分析，是對(duì)大量的數(shù)據(jù)在分類的基礎(chǔ)上，對(duì)數(shù)據(jù)進(jìn)行分析，我們常見(jiàn)的應(yīng)用主要有我們通過(guò)數(shù)據(jù)分類預(yù)測(cè)我們的消費(fèi)人群，購(gòu)買(mǎi)率、流失率等；還有聚類分析，它是一種集合分析的方法，和分類分析有點(diǎn)相似，內(nèi)部的對(duì)象都是具有相似性。

第二、關(guān)聯(lián)規(guī)則學(xué)習(xí)。關(guān)聯(lián)規(guī)則學(xué)習(xí)就是加強(qiáng)各種數(shù)據(jù)之間的聯(lián)系，通常見(jiàn)到的例子就是市場(chǎng)購(gòu)物分析，銷售者可以確定那些產(chǎn)品可以一起購(gòu)買(mǎi)以及如何使用信息，可以進(jìn)行數(shù)據(jù)的融合和集成。

第三、情感分析。情感分析不再知識(shí)利用數(shù)據(jù)進(jìn)行理性的分析，而是更加深入的進(jìn)行感性分析，我們利用文字處理技術(shù)從數(shù)據(jù)當(dāng)中提取主觀信息，來(lái)實(shí)現(xiàn)自然語(yǔ)言處理和分析方法的應(yīng)用 ，情感的分析內(nèi)容主要是對(duì)數(shù)據(jù)表達(dá)情感的特征和作品等，我們?cè)趹?yīng)用方面主要的實(shí)例有對(duì)我們同常用的社交軟件，我們用的qq、微信等確定客戶的態(tài)度。

第四、空間分析?？臻g分析主要是利用的是數(shù)據(jù)的空間特性，因?yàn)閿?shù)據(jù)通常來(lái)源于各種地理位置信息系統(tǒng)，主要的應(yīng)用實(shí)例有空間回歸或模擬，除了空間分析之外，還有時(shí)間序列分析。

4.5 可視化技術(shù)

可視化技術(shù)又是大數(shù)據(jù)處理的一大手段，可視化是數(shù)據(jù)蓬勃發(fā)展的重要領(lǐng)域，可視化技術(shù)可以建立圖片、圖畫(huà)等，這樣可以將各種數(shù)據(jù)更加直接生動(dòng)的進(jìn)行理解溝通、傳遞給別人，幫助讀者迅速感知文本中最突出的概念；還有一種是聚類分析可視化技術(shù)，是在聚類分析的技術(shù)上的可視化技術(shù)，我們?cè)谏衔囊呀?jīng)說(shuō)過(guò)聚類分析是數(shù)據(jù)的集合，加上可視化技術(shù)之后我們的聚類分析會(huì)更加的生動(dòng)形象。

5結(jié)論

隨著物聯(lián)網(wǎng)時(shí)代的不斷發(fā)展，人與人的聯(lián)系更加密切，產(chǎn)生了大量可以值得我們?nèi)ダ玫臄?shù)據(jù)，由此，我們進(jìn)入了大數(shù)據(jù)時(shí)代，大量的數(shù)據(jù)給我們的生活提供了諸多的便利，我們可以利用數(shù)據(jù)來(lái)開(kāi)發(fā)市場(chǎng)促進(jìn)，商業(yè)發(fā)展，改善執(zhí)政水平，提升素質(zhì)等等，但是它們帶來(lái)了更多的挑戰(zhàn)，我們呢這篇文章主要針對(duì)物聯(lián)網(wǎng)時(shí)代以及大數(shù)據(jù)的特點(diǎn)進(jìn)行了詳述，還有物聯(lián)網(wǎng)對(duì)大數(shù)據(jù)之間的關(guān)系，后來(lái)又詳述了物聯(lián)網(wǎng)下大數(shù)據(jù)處理的關(guān)鍵技術(shù)，我們主要說(shuō)了云計(jì)算技術(shù)，數(shù)據(jù)處理技術(shù)等等，我們利用這些技術(shù)可以更好地對(duì)大量繁雜、碎片化的數(shù)據(jù)進(jìn)行分析，利用，但是由于社會(huì)的發(fā)展，數(shù)據(jù)也變得更加復(fù)雜，大數(shù)據(jù)處理也會(huì)受到限制，有待進(jìn)一步開(kāi)發(fā)，所以在新環(huán)境下，開(kāi)發(fā)適應(yīng)社會(huì)發(fā)展的大數(shù)據(jù)處理技術(shù)。

參考文獻(xiàn)：

[1] 孟小峰，慈祥.大數(shù)據(jù)管理：概念，技術(shù)與挑戰(zhàn)[J].計(jì)算機(jī)研究與發(fā)展，2013.

[2] 孫敏.無(wú)線自組織網(wǎng)絡(luò)中基于網(wǎng)絡(luò)編碼的可靠中繼多播方案[J].計(jì)算機(jī)系統(tǒng)應(yīng)用，2011，20（5）：60-63.

[3] 樊昌信，曹麗娜.通信原理[M].北京：國(guó)防工業(yè)出版社，2008.

[4] 梅德明.大數(shù)據(jù)時(shí)代語(yǔ)言生態(tài)研究[J].外語(yǔ)電化教育，2014（1）.

[5] Titov I， McDonald R. Modeling online reviews with multi-grain topicmodels[C]//Proceedings of the 17th international conference on World Wide Web. ACM，2008： 111-120.

[6] 孟小峰，慈祥.大數(shù)據(jù)管理：概念，技術(shù)與挑戰(zhàn)[J].計(jì)算機(jī)研究與發(fā)展，2013.