身處在大數(shù)據(jù)時(shí)代,其實(shí)我們的許多行為都會(huì)被計(jì)入到大數(shù)據(jù)之中,比如你每天買了什么東西,支付了多少金額,這些都會(huì)被統(tǒng)計(jì),從而被判斷出你是多大年紀(jì),是否從事工作,收入如何等,如支付寶每年發(fā)布的賬單,其實(shí)就是一個(gè)大數(shù)據(jù)的體現(xiàn)。
大數(shù)據(jù)技術(shù),就是從各種類型的數(shù)據(jù)中快速獲得有價(jià)值信息的技術(shù)。大數(shù)據(jù)領(lǐng)域已經(jīng)涌現(xiàn)出了大量新的技術(shù),它們成為大數(shù)據(jù)采集、存儲(chǔ)、處理和呈現(xiàn)的有力武器。 智能職涯(bigdata-job)總結(jié)了大數(shù)據(jù)處理關(guān)鍵技術(shù)一般包括:大數(shù)據(jù)采集、大數(shù)據(jù)預(yù)處理、大數(shù)據(jù)存儲(chǔ)及管理、大數(shù)據(jù)分析及挖掘、大數(shù)據(jù)展現(xiàn)和應(yīng)用(大數(shù)據(jù)檢索、大數(shù)據(jù)可視化、大數(shù)據(jù)應(yīng)用、大數(shù)據(jù)安全等)。 簡(jiǎn)單介紹與喜愛大數(shù)據(jù)所需要的一些基礎(chǔ)技術(shù): 跨粒度計(jì)算(In-DatabaseComputing) Z-Suite支持各種常見的匯總,還支持幾乎全部的專業(yè)統(tǒng)計(jì)函數(shù)。得益于跨粒度計(jì)算技術(shù),Z-Suite數(shù)據(jù)分析引擎將找尋出最優(yōu)化的計(jì)算方案,繼而把所有開銷較大的、昂貴的計(jì)算都移動(dòng)到數(shù)據(jù)存儲(chǔ)的地方直接計(jì)算,我們稱之為庫(kù)內(nèi)計(jì)算(In-Database)。這一技術(shù)大大減少了數(shù)據(jù)移動(dòng),降低了通訊負(fù)擔(dān),保證了高性能數(shù)據(jù)分析。 并行計(jì)算(MPP Computing) Z-Suite是基于MPP架構(gòu)的商業(yè)智能平臺(tái),她能夠把計(jì)算分布到多個(gè)計(jì)算節(jié)點(diǎn),再在指定節(jié)點(diǎn)將計(jì)算結(jié)果匯總輸出。Z-Suite能夠充分利用各種計(jì)算和存儲(chǔ)資源,不管是服務(wù)器還是普通的PC,她對(duì)網(wǎng)絡(luò)條件也沒有嚴(yán)苛的要求。作為橫向擴(kuò)展的大數(shù)據(jù)平臺(tái),Z-Suite能夠充分發(fā)揮各個(gè)節(jié)點(diǎn)的計(jì)算能力,輕松實(shí)現(xiàn)針對(duì)TB/PB級(jí)數(shù)據(jù)分析的秒級(jí)響應(yīng)。 |
雷蛇黑寡婦標(biāo)準(zhǔn)版和V... <詳情>
家里為何會(huì)突然出現(xiàn)很... <詳情>