隨著云計(jì)算技術(shù)、物聯(lián)網(wǎng)技術(shù)的興起,企業(yè)需要應(yīng)對(duì)的數(shù)據(jù)規(guī)模越來(lái)越大、數(shù)據(jù)格式越來(lái)越復(fù)雜、數(shù)據(jù)收集速度越來(lái)越快,也使得它和傳統(tǒng)意義的業(yè)務(wù)數(shù)據(jù)相比,有了明顯的特點(diǎn)。今天企業(yè)對(duì)大數(shù)據(jù)分析的意義也有了新的理解。
應(yīng)對(duì)這些特點(diǎn),計(jì)算機(jī)界、科技界也需要與時(shí)俱進(jìn),在技術(shù)上做一些創(chuàng)新和變革,使得這些數(shù)據(jù)能夠成為企業(yè)真正的數(shù)據(jù)資產(chǎn)。我們經(jīng)常也會(huì)做一些數(shù)據(jù)分析,著眼于對(duì)已經(jīng)發(fā)生的事情的一些歸納、總結(jié)。現(xiàn)在我們探討大數(shù)據(jù),人們更關(guān)心數(shù)據(jù)如何創(chuàng)造一個(gè)未來(lái)。對(duì)于我們講的數(shù)據(jù)的部分,不僅僅是關(guān)注過(guò)去,還關(guān)注于對(duì)未來(lái)的價(jià)值創(chuàng)造,這是大數(shù)據(jù)的一個(gè)新的使命, 甲骨文中國(guó)區(qū)技術(shù)總經(jīng)理兼大數(shù)據(jù)和商務(wù)分析業(yè)務(wù)總經(jīng)理高禮強(qiáng)如此說(shuō)。
面對(duì)企業(yè)對(duì)大數(shù)據(jù)處理的新要求,以及大數(shù)據(jù)的新的使命,甲骨文對(duì)數(shù)據(jù)的收集、管理、分析,最后形成價(jià)值,有著自己的理解。
從數(shù)據(jù)到智慧:大數(shù)據(jù)分析的四個(gè)層次
甲骨文認(rèn)為,從原始的數(shù)據(jù)到如何形成為企業(yè)的數(shù)據(jù)資本、數(shù)據(jù)的智慧,從技術(shù)處理上要經(jīng)過(guò)四個(gè)環(huán)節(jié):
第一、數(shù)據(jù)的形成。現(xiàn)今企業(yè)面臨的數(shù)據(jù)源非常繁雜,也非常多,也傳統(tǒng)的數(shù)據(jù)來(lái)源相比,有了革命性的變化。如何采集內(nèi)、外應(yīng)用系統(tǒng)的,以及外部合作伙伴的數(shù)據(jù),使這些不同形態(tài)的數(shù)據(jù)最終形成一個(gè)可管理,放置在數(shù)據(jù)湖中 這樣的數(shù)據(jù)的收集、獲取、整理的過(guò)程,正式數(shù)據(jù)形成的過(guò)程。
第二、數(shù)據(jù)到信息。數(shù)據(jù)形成后,在數(shù)據(jù)湖中的類型是多種多樣的,有關(guān)系型數(shù)據(jù)的、有非關(guān)系型數(shù)據(jù)的,即有表格形式 有行有列的,是很工整的高價(jià)值的數(shù)據(jù),也圖片、視頻的形態(tài)不一的數(shù)據(jù),如何把這些數(shù)據(jù)有序地管理起來(lái),是數(shù)據(jù)到信息的過(guò)程。
第三、信息到知識(shí)。所有信息匯總以后,要經(jīng)過(guò)數(shù)據(jù)探索的過(guò)程。因?yàn)槿绻麛?shù)據(jù)只的累積起來(lái),而不積極探索它、利用它、分析它,這些數(shù)據(jù)仍然只是沉睡的金礦。這個(gè)探索的過(guò)程是從信息到知識(shí)的概念。
第四、知識(shí)到智慧。探索出來(lái)的結(jié)果,我們要把它使用起來(lái),引領(lǐng)企業(yè)的業(yè)務(wù)流程的改進(jìn),新業(yè)務(wù)的產(chǎn)生,把這些東西形成新的價(jià)值,這是大數(shù)據(jù)運(yùn)用的一個(gè)更高的階段 從知識(shí)到智慧。
基于以上四個(gè)層面,甲骨文看到企業(yè)需要這樣一個(gè)大數(shù)據(jù)平臺(tái) 它的能力要非常完整。正如甲骨文亞太地區(qū)大數(shù)據(jù)和分析專家團(tuán)隊(duì)總監(jiān)Barba Jan-Haleem所說(shuō), 從甲骨文的角度,包括很多越來(lái)越多的客戶的角度來(lái)看,他們會(huì)認(rèn)為大數(shù)據(jù)不單單是包括非結(jié)構(gòu)化數(shù)據(jù),同一時(shí)間還會(huì)包括結(jié)構(gòu)化數(shù)據(jù),所以大數(shù)據(jù)應(yīng)該是所有數(shù)據(jù)的一個(gè)全集。同一時(shí)間,針對(duì)所有數(shù)據(jù)來(lái)說(shuō),甲骨文希望給到他們的不單單是甲骨文接近40年的管理數(shù)據(jù)的經(jīng)驗(yàn),同時(shí)希望把結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)整合在一起,讓它發(fā)揮更大的價(jià)值,產(chǎn)生真正的數(shù)據(jù),為客戶提供業(yè)務(wù)創(chuàng)新的價(jià)值點(diǎn)。
甲骨文大數(shù)據(jù)管理平臺(tái)
甲骨文大數(shù)據(jù)管理平臺(tái)建立了一種數(shù)據(jù)湖。這一大數(shù)據(jù)湖具備了處理不同數(shù)據(jù)的這樣一種能力,形象地講,就是不同技術(shù)的組合,它包含有傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)的技術(shù),有以Hadoop為代表的新的分布式計(jì),還有一些特殊的高并發(fā)處理能力的像NoSQL的數(shù)據(jù)庫(kù)能力。這樣的一個(gè)多種技術(shù)組合平臺(tái),讓企業(yè)具備了處理全數(shù)據(jù)的能力。
由上圖的參考架構(gòu)中,我們可以看出大數(shù)據(jù)的管理是甲骨文在大數(shù)據(jù)解決方案的核心部分。在這一部分?jǐn)?shù)據(jù)水庫(kù)能夠把全數(shù)據(jù)管理起來(lái),可以基于甲骨文技術(shù),可以基于甲骨文與其合作伙伴的技術(shù),如Cloudera,更可以基于企業(yè)自己搭建Hadoop平臺(tái)。甲骨文可以提供技術(shù)力量,把企業(yè)的軟硬件、網(wǎng)絡(luò)、Hadoop和不同的技術(shù)進(jìn)行銜接。
另外,在數(shù)據(jù)的探索中,如何把數(shù)據(jù)變成有用的信息和知識(shí)。甲骨文大數(shù)據(jù)平臺(tái)提供了多種直觀、可視化的工具,有基于甲骨文收購(gòu)的Endeca平臺(tái)之上的Hadoop版本 Hadoop可視化探索平臺(tái),它使企業(yè)大數(shù)據(jù)探索過(guò)程簡(jiǎn)化為五步,即連接企業(yè)的大數(shù)據(jù)數(shù)據(jù)源、可視化展示大數(shù)據(jù)湖全景、數(shù)據(jù)的轉(zhuǎn)換和整理過(guò)程、探索數(shù)據(jù)中的規(guī)律,相關(guān)性、發(fā)布和分享探索結(jié)果。還有Big Data Discovery大數(shù)據(jù)發(fā)現(xiàn)工具,其機(jī)制在業(yè)內(nèi)還沒有完全一致的。
甲骨文大數(shù)據(jù)平臺(tái)設(shè)計(jì)三要素
事實(shí)上,在從概念到具體落實(shí)到大數(shù)據(jù)處理方案的設(shè)計(jì)、執(zhí)行以及開發(fā)時(shí),甲骨文始終遵循著三個(gè)關(guān)鍵點(diǎn):
數(shù)據(jù)的平等性:這個(gè)平等是指甲骨文希望給客戶的方案能夠平等地處理各種類型的數(shù)據(jù):結(jié)構(gòu)化、非結(jié)構(gòu)化、半結(jié)構(gòu)化,無(wú)論這些數(shù)據(jù)是來(lái)自于數(shù)據(jù)庫(kù)、傳感器數(shù)據(jù)還是網(wǎng)絡(luò)日志,還是用戶的點(diǎn)擊流。
數(shù)據(jù)的流動(dòng)性:甲骨文希望客戶的數(shù)據(jù)能像錢在所有的銀行和客戶之間一樣流動(dòng)起來(lái),在商業(yè)活動(dòng)中流動(dòng)起來(lái)。甲骨文希望幫助客戶把數(shù)據(jù)也流動(dòng)起來(lái)產(chǎn)生價(jià)值。
數(shù)據(jù)的安全性:這一安全包括客戶把數(shù)據(jù)放在甲骨文的云端、工程一體機(jī),以及放在客戶自己的硬件里面,甲骨文都希望幫客戶把這個(gè)數(shù)據(jù)安全性做到最好。
這一大數(shù)據(jù)端到端的方案,除了包括數(shù)據(jù)的采集、管理、分析,甲骨文還引入了第三個(gè)功能 數(shù)據(jù)實(shí)驗(yàn)室。數(shù)據(jù)的采集是幫助各位獲得它需要的數(shù)據(jù),包括傳感器數(shù)據(jù)、網(wǎng)絡(luò)數(shù)據(jù)或者是機(jī)器數(shù)據(jù)、業(yè)務(wù)系統(tǒng)數(shù)據(jù);數(shù)據(jù)管理是管理各種類型的數(shù)據(jù),幫企業(yè)更好地把數(shù)據(jù)管理、存儲(chǔ)起來(lái);分析部分就是通過(guò)數(shù)據(jù)來(lái)改變工作場(chǎng)所和勞動(dòng)力。那么,分析步驟之前,甲骨文為什么引入了這個(gè)數(shù)據(jù)實(shí)驗(yàn)?
數(shù)據(jù)實(shí)驗(yàn):作用幾何?
數(shù)據(jù)實(shí)驗(yàn)室有幾點(diǎn):第一是針對(duì)原始數(shù)據(jù):第二幫助用戶探索原始數(shù)據(jù)中的價(jià)值,發(fā)現(xiàn)原始數(shù)據(jù)中的價(jià)值后,可以把這些數(shù)據(jù)放到以前的數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市里面做商務(wù)智能數(shù)據(jù)可視化或者是分析的過(guò)程。 數(shù)據(jù)實(shí)驗(yàn)室有點(diǎn)像指南針,能夠以最快的時(shí)間、最小的投入來(lái)告訴你業(yè)務(wù)的方向?qū)Σ粚?duì)。數(shù)據(jù)分析和數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市就如果GPS,它會(huì)把明確的路徑顯示出來(lái)告訴我們從A到B,有多遠(yuǎn)的距離 但這一方法準(zhǔn)備前期工作的時(shí)間會(huì)比較長(zhǎng),如建模、數(shù)據(jù)整理等,在數(shù)據(jù)實(shí)驗(yàn)室中這是不需要發(fā)生的,數(shù)據(jù)實(shí)驗(yàn)室可以直接對(duì)原始數(shù)據(jù)進(jìn)行實(shí)驗(yàn)。創(chuàng)新數(shù)據(jù)實(shí)驗(yàn)可以幫助企業(yè)通過(guò)類似于高級(jí)分析、機(jī)器學(xué)習(xí)或者是更新的大數(shù)據(jù)技術(shù)來(lái)實(shí)現(xiàn)數(shù)據(jù)的價(jià)值,然后把這些數(shù)據(jù)的價(jià)值用到人們的日常工作中 不僅只是提供可視化,還保留整個(gè)過(guò)程的自動(dòng)化。
實(shí)際上,為實(shí)現(xiàn)這一功能,甲骨文提供了大量的組件,用戶還可以根據(jù)具體的業(yè)務(wù)需求,去裁剪此大數(shù)據(jù)解決方案,來(lái)適應(yīng)其直接需求。
文章編輯:CobiNet(寧波)
本公司專注于電訊配件,銅纜綜合布線系列領(lǐng)域產(chǎn)品研發(fā)生產(chǎn)超五類,六類,七類屏蔽網(wǎng)線/屏蔽模塊及相關(guān)模塊配件, 我們是萬(wàn)兆屏蔽模塊,10G屏蔽模塊,屏蔽線生產(chǎn)廠家。
歡迎來(lái)電咨詢0574 88168918,郵箱sales@cobinet.cn,網(wǎng)址m.czchengbang.com
?2016-2019寧波科博通信技術(shù)有限公司版權(quán)所有浙ICP備16026074號(hào)