大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)探討

《大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)探討》由會(huì)員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫(kù)。

1、大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)探討摘要：科學(xué)技術(shù)的發(fā)展使得計(jì)算機(jī)的信息處理技術(shù)也呈現(xiàn)出好的發(fā)展勢(shì)頭，網(wǎng)絡(luò)技術(shù)也快速發(fā)展。當(dāng)前人們的接受的信息量逐漸增大，信息的儲(chǔ)存需求也擴(kuò)大。以互聯(lián)網(wǎng)為主要內(nèi)容的計(jì)算機(jī)發(fā)展十分快速，微信、微博、物聯(lián)網(wǎng)、電子商務(wù)等提出使得人們的生活發(fā)生了極大的改變，同時(shí)也帶來(lái)了海量的數(shù)據(jù)。大數(shù)據(jù)時(shí)代的到來(lái)使得計(jì)算機(jī)處理技術(shù)成為重要關(guān)注的內(nèi)容，能夠更好地促進(jìn)網(wǎng)絡(luò)技術(shù)發(fā)展。本文就大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)進(jìn)行簡(jiǎn)要的闡述分析。關(guān)鍵詞：大數(shù)據(jù)時(shí)代；計(jì)算機(jī)信息處理；技術(shù)中圖分類號(hào)：TP311.13文獻(xiàn)標(biāo)識(shí)碼：A文章編號(hào):1671-2064(2017)08-

2、0035-02如今數(shù)字化、信息化的發(fā)展水平逐漸提高，信息數(shù)據(jù)快速增長(zhǎng)，計(jì)算機(jī)技術(shù)在社會(huì)生產(chǎn)生活各個(gè)領(lǐng)域都有廣泛的應(yīng)用，能夠?qū)崿F(xiàn)信息的有效交換，檢索和儲(chǔ)存信息，并利用計(jì)算機(jī)技術(shù)科學(xué)的處理數(shù)據(jù)信息，實(shí)現(xiàn)資源的優(yōu)化配置，促使社會(huì)效益的順利提升。在大數(shù)據(jù)背景下，信息數(shù)據(jù)的數(shù)量增多，形式多樣化，計(jì)算機(jī)信息技術(shù)技術(shù)也遇到了較高的要求，因此需要科學(xué)的研究大數(shù)據(jù)時(shí)代的計(jì)算機(jī)信息處理技術(shù)，更好地滿足人們的實(shí)際需要。1大數(shù)據(jù)概述分析大數(shù)據(jù)，從直觀上理解就是數(shù)據(jù)信息量十分巨大，在大數(shù)據(jù)背景下，信息海量，這就要求計(jì)算機(jī)硬件以及軟件設(shè)備也有較強(qiáng)能力，但是對(duì)于目前的計(jì)算機(jī)硬軟件設(shè)備而言，

3、還不能在短時(shí)間內(nèi)對(duì)行數(shù)據(jù)進(jìn)行讀取、儲(chǔ)存和處理，也不能將準(zhǔn)確、全面的數(shù)據(jù)服務(wù)提供給用戶。一般而言，數(shù)據(jù)量達(dá)到10TB(約1.0x104GB)到1PB(約1.0x108GB)以上時(shí)，就可以被叫做大數(shù)據(jù)。從2005年到2015年，10年間的全球數(shù)據(jù)量總130EB增長(zhǎng)到7910EB［l］。(1EB=1O24PB=1O18)如下圖1所/J^O大數(shù)據(jù)中包含龐大的信息量，能夠快速的處理信息，并且呈現(xiàn)出多樣化的結(jié)構(gòu)形式。大數(shù)據(jù)時(shí)代下的計(jì)算機(jī)信息量能夠超?A1ZP(約1.0x1012GB)的數(shù)量級(jí)。與傳統(tǒng)1TB(約1.0x103GB)數(shù)量級(jí)相比，是呈幾何式翻倍的［2］。而且大數(shù)

4、據(jù)中的信息流都是實(shí)時(shí)儲(chǔ)存，傳輸速度比較快，要使用大數(shù)據(jù)處理設(shè)備才能夠?qū)@些信息流進(jìn)行實(shí)時(shí)高速的處理。大數(shù)據(jù)中有很多組成內(nèi)容，如視頻、音頻、圖像、網(wǎng)頁(yè)等，格式存在差異，因此在信息處理過(guò)程中難度也比較大。2大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)2.1數(shù)據(jù)感知以及獲取DeepWed是一種網(wǎng)絡(luò)深層的空間利用技術(shù)，在數(shù)據(jù)過(guò)程中有著自身的特點(diǎn)，數(shù)據(jù)規(guī)模比較大，呈現(xiàn)出高頻率的動(dòng)態(tài)性變化，并且分布的范圍也比較廣。實(shí)用DeepWed技術(shù)能夠高效的利用數(shù)據(jù)信息，集成數(shù)據(jù)信息，使得數(shù)據(jù)信息能夠被科學(xué)的抽取以及整合，保證數(shù)據(jù)信息能夠?qū)崿F(xiàn)綜合性的利用，并進(jìn)行動(dòng)態(tài)化的處理。2.2分布式的儲(chǔ)存處理數(shù)

5、據(jù)信息這種對(duì)數(shù)據(jù)信息進(jìn)行分布式的處理方式是Google公司提出的，將GPS技術(shù)作為代表，并在IBM、百度等數(shù)據(jù)企業(yè)都有著廣泛的應(yīng)用，有助于實(shí)現(xiàn)持續(xù)化的發(fā)展。分布式的數(shù)據(jù)信息處理儲(chǔ)存技術(shù)將列作為基礎(chǔ)單位，進(jìn)而儲(chǔ)存數(shù)據(jù)，對(duì)數(shù)據(jù)信息進(jìn)行壓縮操作，實(shí)現(xiàn)快循環(huán)，保證不同服務(wù)器間數(shù)據(jù)信息能夠?qū)崿F(xiàn)快速的傳輸與處理。利用這種形式能夠使得行列混合的數(shù)據(jù)儲(chǔ)存結(jié)構(gòu)在一定程度上得到改善，能夠在短時(shí)間內(nèi)加載大量的數(shù)據(jù)信息，在對(duì)數(shù)據(jù)信息處理查詢時(shí)不會(huì)花費(fèi)大量的時(shí)間，并且也能夠提高磁盤空間的利用率。2.3數(shù)據(jù)索引技術(shù)BigTable是Google設(shè)計(jì)的一種分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)，能夠?qū)Ａ繑?shù)據(jù)

6、進(jìn)行處理的一種非關(guān)系型的數(shù)據(jù)庫(kù)。是當(dāng)前最為主要的一種網(wǎng)絡(luò)數(shù)據(jù)索引技術(shù)。利用互補(bǔ)式聚簇索引和聚簇索引動(dòng)態(tài)化的索引數(shù)據(jù)。以索引順序?qū)?shù)據(jù)結(jié)構(gòu)進(jìn)行儲(chǔ)存的是聚簇索引。將副本作為索引列的，在互補(bǔ)的形式下進(jìn)行索引的就是互補(bǔ)式聚簇索引。結(jié)合不同的查詢結(jié)果估算方式，保證數(shù)據(jù)信息能夠得到很好的查詢與規(guī)劃。2.4數(shù)據(jù)挖掘技術(shù)以信息知識(shí)內(nèi)容作為主要依據(jù)的數(shù)據(jù)挖掘技術(shù)主要涉及兩個(gè)方面，網(wǎng)絡(luò)信息搜索技術(shù)和實(shí)體關(guān)聯(lián)技術(shù)。網(wǎng)絡(luò)中的搜索信息主要是通過(guò)排序?qū)W習(xí)算法，將媒體信息量作為關(guān)注數(shù)據(jù)，將此作為樣本學(xué)習(xí)算法數(shù)據(jù)，實(shí)現(xiàn)數(shù)據(jù)的排序，實(shí)現(xiàn)逐點(diǎn)、逐對(duì)、逐列，利用生物界的進(jìn)化發(fā)展搜索信息，從而使得平

7、臺(tái)需要得以滿足。關(guān)聯(lián)分析要提取信息需要，并對(duì)這些數(shù)據(jù)進(jìn)行科學(xué)的處理，從而能夠獲得潛在的知識(shí)與數(shù)據(jù)，從而更好地應(yīng)用。比如在市場(chǎng)銷售管理中，條碼技術(shù)的發(fā)展使得數(shù)據(jù)收集更加容易，并且也比較快速，條碼中儲(chǔ)存了大量的交易資料。如，關(guān)聯(lián)規(guī)則可以表示“購(gòu)買了項(xiàng)目A和B的顧客中有95%的人又購(gòu)買了C和D”[3]。這種關(guān)聯(lián)能夠?qū)⑿畔?shù)據(jù)提供給商品的銷售、布置、生產(chǎn)等，使這些環(huán)節(jié)有科學(xué)的依據(jù)作為指導(dǎo)，促使市場(chǎng)銷售更具針對(duì)性。2.5數(shù)據(jù)接口ALE-ldoc數(shù)據(jù)接口技術(shù)的數(shù)據(jù)支撐系統(tǒng)是分布——集成式SAP系統(tǒng)，將數(shù)據(jù)接口提供給SAP的中間環(huán)節(jié)，保證不同空間的系統(tǒng)也能夠建立起關(guān)系，強(qiáng)化

8、系統(tǒng)間的聯(lián)系性。利用接口技術(shù)中的ALE