復(fù)雜性將影響大數(shù)據(jù)部署
- 來(lái)源:中國(guó)信息化周報(bào) smarty:if $article.tag?>
- 關(guān)鍵字:大數(shù)據(jù)產(chǎn)業(yè),十三五,信息安全 smarty:/if?>
- 發(fā)布時(shí)間:2016-12-15 16:35
日前發(fā)布的《2017~2022年中國(guó)大數(shù)據(jù)產(chǎn)業(yè)發(fā)展前景與投資戰(zhàn)略規(guī)劃分析報(bào)告》顯示,中國(guó)大數(shù)據(jù)產(chǎn)業(yè)市場(chǎng)在未來(lái)五年內(nèi),仍將保持著高速增長(zhǎng)。預(yù)計(jì)2016年年末,市場(chǎng)規(guī)模將達(dá)到2485億元,而隨著各項(xiàng)政策的配套落實(shí)及推進(jìn),到2020年,中國(guó)大數(shù)據(jù)產(chǎn)業(yè)規(guī)模或達(dá)13626億元。
管理數(shù)據(jù)的效率需提升
有專(zhuān)家認(rèn)為,通過(guò)大數(shù)據(jù)技術(shù)使人們可以利用以前不能有效利用的多種數(shù)據(jù)類(lèi)型,抓住被忽略的機(jī)遇,使企業(yè)機(jī)構(gòu)變得更加智能和高效。大數(shù)據(jù)的重心將從數(shù)據(jù)的存儲(chǔ)和傳輸過(guò)渡到數(shù)據(jù)的挖掘與應(yīng)用,這將深刻地影響企業(yè)的商業(yè)模式,既可直接為企業(yè)帶來(lái)利潤(rùn),也可通過(guò)正反饋為企業(yè)帶來(lái)難以復(fù)制的競(jìng)爭(zhēng)優(yōu)勢(shì)。據(jù)麥肯錫測(cè)算,大數(shù)據(jù)的應(yīng)用每年潛在可為美國(guó)醫(yī)療健康業(yè)和歐洲政府分別節(jié)省3000億美元和1000億歐元,利用個(gè)人位置信息潛在可創(chuàng)造出6000億美元的消費(fèi)者剩余。因此大數(shù)據(jù)應(yīng)用有遠(yuǎn)超萬(wàn)億美元的市場(chǎng)。
大數(shù)據(jù)產(chǎn)業(yè)鏈參與者眾多,覆蓋面廣。按照產(chǎn)品形態(tài),主要分為硬件、基礎(chǔ)軟件和應(yīng)用軟件三大領(lǐng)域。綜合各領(lǐng)域國(guó)內(nèi)外競(jìng)爭(zhēng)態(tài)勢(shì),商業(yè)智能、信息安全和云計(jì)算將是數(shù)據(jù)挖掘和應(yīng)用環(huán)節(jié)國(guó)內(nèi)相對(duì)受益的三駕馬車(chē)。中國(guó)智能市場(chǎng)已步入成長(zhǎng)期,“十三五”期間潛在空間將超過(guò)300億元;信息安全“十三五”期間潛在空間將超過(guò)4000億元;云計(jì)算剛進(jìn)入成長(zhǎng)期。
據(jù)測(cè)算,到2020年,全球需要管理的數(shù)據(jù)量將達(dá)到35ZB,相較于2011年將增長(zhǎng)50倍,而同期IT從業(yè)人員將僅增加1.5倍,意味著人均管理數(shù)據(jù)量將膨脹近33倍。雖然目前看來(lái),人力資源的配給與現(xiàn)有的數(shù)據(jù)庫(kù)管理技術(shù)基本是匹配的,但是未來(lái),如果人類(lèi)管理數(shù)據(jù)的效率不能保持同步提升,在大數(shù)據(jù)時(shí)代將無(wú)法對(duì)數(shù)據(jù)進(jìn)行有效管理。
傳統(tǒng)數(shù)據(jù)庫(kù)的管理能力無(wú)法應(yīng)付大數(shù)據(jù)體量的數(shù)據(jù)。人們和機(jī)器制造越來(lái)越多的業(yè)務(wù)數(shù)據(jù)對(duì)IT系統(tǒng)帶來(lái)了更大的挑戰(zhàn),數(shù)據(jù)的存儲(chǔ)和安全以及在未來(lái)訪(fǎng)問(wèn)和使用這些數(shù)據(jù)已成為難點(diǎn)。目前成熟的經(jīng)典數(shù)據(jù)庫(kù)技術(shù)——結(jié)構(gòu)化數(shù)據(jù)查詢(xún)語(yǔ)言SQL,在設(shè)計(jì)的一開(kāi)始是沒(méi)有考慮非結(jié)構(gòu)化數(shù)據(jù)的,也就是說(shuō)以前計(jì)算機(jī)人員討論數(shù)據(jù)的時(shí)候,數(shù)據(jù)的范圍限定在結(jié)構(gòu)化數(shù)據(jù)范疇以?xún)?nèi)。
真正的挑戰(zhàn)是洞察
大數(shù)據(jù)和分析法的質(zhì)量,不如分析的目的來(lái)得重要。最有趣的緊張態(tài)勢(shì)和爭(zhēng)論,始終圍繞著組織是否會(huì)因使用分析法而獲得最大報(bào)酬,以使既有的流程行為更完善,或者改變公司人員的行為。
許多企業(yè)投下數(shù)百萬(wàn)美元用于大數(shù)據(jù)、大數(shù)據(jù)分析,并雇用數(shù)據(jù)分析家,但卻感到很受挫。無(wú)可否認(rèn),他們現(xiàn)在得到了更多、更好的數(shù)據(jù)。他們的分析師和分析法也是一流的。但經(jīng)理人對(duì)業(yè)務(wù)的想法和爭(zhēng)論,似乎與過(guò)去的類(lèi)型仍一樣,只是他們使用的數(shù)據(jù)與分析法都比以前好得多。最終的決定可能更加由數(shù)據(jù)驅(qū)動(dòng),但組織文化給人的感覺(jué)仍然相同。正如一位CIO最所言,“我們現(xiàn)在可以做實(shí)時(shí)的分析,那是我在五年前根本無(wú)法想象的,但這樣所帶來(lái)的影響力,仍與我的預(yù)期差距很遠(yuǎn)”。
“要等到管理階層確認(rèn)想要改變、并清楚知道影響的行為是什么之后,我們才會(huì)去做分析或商業(yè)情報(bào)的工作”,一位金融服務(wù)公司的CIO說(shuō),“提高合乎法規(guī)的情況和改善財(cái)務(wù)報(bào)告,是很容易獲得的成果。但是,這只意味著我們使用分析法去做我們已經(jīng)做得比以前好的事情。”
真正的挑戰(zhàn)是洞察,利用大數(shù)據(jù)和分析法,以改善解決問(wèn)題和決策的方式,會(huì)掩蓋組織里一個(gè)現(xiàn)實(shí)情況,那就是新的分析法往往需要新的行為。公司人員可能需要作更多分享和協(xié)力合作;各部門(mén)可能需要設(shè)置不同的或互補(bǔ)的業(yè)務(wù)流程;經(jīng)理人和高級(jí)主管可能需要確保,現(xiàn)有的激勵(lì)措施不會(huì)破壞分析帶來(lái)的成長(zhǎng)機(jī)會(huì)和效率。
例如,一家醫(yī)療用品供貨商整合有關(guān)“能帶來(lái)最多利潤(rùn)的客戶(hù)”和“最賺錢(qián)產(chǎn)品”的分析,必須對(duì)業(yè)務(wù)人員與技術(shù)支持團(tuán)隊(duì)進(jìn)行完整的再教育,兩者都是為了“打擾”并“教育”客戶(hù)有關(guān)附加價(jià)值較高的產(chǎn)品。這家公司了解,這些分析法不應(yīng)該只是被用來(lái)支持現(xiàn)有的銷(xiāo)售和服務(wù)實(shí)務(wù),而應(yīng)該被視為一種契機(jī),可推動(dòng)新型的促進(jìn)式和顧問(wèn)式銷(xiāo)售及支持組織。
諷刺的是,大數(shù)據(jù)和分析法的質(zhì)量,不如分析的目的來(lái)得重要。最有趣的緊張態(tài)勢(shì)和爭(zhēng)論,始終圍繞著組織是否會(huì)因使用分析法而獲得最大報(bào)酬,以使既有的流程行為更完善,或者改變公司人員的行為。但大致的共識(shí)是,最有成效的對(duì)話(huà)聚焦于分析如何改變行為,而非解決問(wèn)題。
得到正確的答案,甚至是問(wèn)正確的問(wèn)題,原來(lái)不是擁有高ROA企業(yè)的主要關(guān)切點(diǎn)。無(wú)可否認(rèn),數(shù)據(jù)與分析法的問(wèn)題、答案,都是重要的。但更重要的是,這些問(wèn)題、答案及分析法,如何與個(gè)人與機(jī)構(gòu)的行為協(xié)調(diào)一致(或彼此沖突)。有時(shí)候,即使是最好的分析法也可能引發(fā)適得其反的行為。
大數(shù)據(jù)實(shí)現(xiàn)空間化表達(dá)
對(duì)于國(guó)民經(jīng)濟(jì)的發(fā)展,測(cè)繪地理信息技術(shù)發(fā)揮的作用越來(lái)越大。測(cè)繪行業(yè)的人不要固步自封,要跳出測(cè)繪看測(cè)繪,把測(cè)繪技術(shù)用到國(guó)民經(jīng)濟(jì)的發(fā)展當(dāng)中才能發(fā)揮真正的價(jià)值。
地圖服務(wù)模式創(chuàng)新如今已進(jìn)入大數(shù)據(jù)思維模式的成熟發(fā)展階段,大數(shù)據(jù)分析方法融入測(cè)繪地理信息行業(yè),強(qiáng)調(diào)了數(shù)據(jù)、業(yè)務(wù)、空間三個(gè)維度的結(jié)合,能夠真正解決問(wèn)題。中科宇圖大地圖可以提升大數(shù)據(jù)的宏觀定性,也是微觀定量分析的基礎(chǔ)。如何把大數(shù)據(jù)從定性到定量發(fā)展,空間數(shù)據(jù)、地圖能夠發(fā)揮作用。通過(guò)大地圖的創(chuàng)新模式,大數(shù)據(jù)的分析方法從平面走向了立體這樣的一個(gè)思維模式,這種空間位置的動(dòng)態(tài)演變與時(shí)間序列的動(dòng)態(tài)演變過(guò)程相結(jié)合的模式,這才是地圖與大數(shù)據(jù)真正的結(jié)合點(diǎn)。
實(shí)際上,地圖技術(shù)應(yīng)用存在著四大痛點(diǎn),即地圖專(zhuān)業(yè)技術(shù)壁壘、解決了地圖經(jīng)費(fèi)的高投入、地圖數(shù)據(jù)使用保密、地圖行業(yè)數(shù)據(jù)共享的難題?;诖?,中國(guó)測(cè)繪地理信息學(xué)會(huì)創(chuàng)立了地圖大數(shù)據(jù)的創(chuàng)新工作委員會(huì),通過(guò)在政府、科研機(jī)構(gòu)、行業(yè)及從事大數(shù)據(jù)的公司之間架設(shè)起交流的橋梁,促進(jìn)大數(shù)據(jù)技術(shù)與測(cè)繪技術(shù)融合,并通過(guò)非營(yíng)利的運(yùn)作,物聯(lián)網(wǎng)技術(shù)、云計(jì)算技術(shù)、大數(shù)據(jù)挖掘的技術(shù)、空間技術(shù)、物聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)、智能化采集技術(shù)、模型技術(shù)等核心技術(shù)的共同研究,搭建基于數(shù)據(jù)采集、運(yùn)行管理以及應(yīng)用的科學(xué)決策不同的相關(guān)的體系,建立并完善一個(gè)基于地圖與大數(shù)據(jù)真正整合的不同的資源體系。大數(shù)據(jù)應(yīng)用層面,障礙重重。
無(wú)獨(dú)有偶,大數(shù)據(jù)應(yīng)用過(guò)程中也同樣存在諸多問(wèn)題。清華大學(xué)教授黨安榮指出,大數(shù)據(jù)應(yīng)用并未深入到各行各業(yè)的應(yīng)用中去,而基于大數(shù)據(jù)的服務(wù)體系也并未建立起來(lái),如何聚合大數(shù)據(jù)服務(wù)還是個(gè)難題。與此同時(shí),如何將含有人本信息的信息以及反映的過(guò)程和他的實(shí)時(shí)的交互結(jié)合在一起,形成動(dòng)態(tài)化的相關(guān)應(yīng)用模式,并最終形成流程化應(yīng)用,值得探討。
大數(shù)據(jù)的應(yīng)用范圍之廣,黨安榮教授大數(shù)據(jù)以人居環(huán)境研究中的應(yīng)用實(shí)踐揭示了大數(shù)據(jù)應(yīng)用的重要意義。隨著GPS數(shù)據(jù)日益增多,國(guó)內(nèi)北斗衛(wèi)星系統(tǒng)的逐步完善,智慧城市的大規(guī)模建設(shè),物聯(lián)網(wǎng)的發(fā)展,大數(shù)據(jù)也逐漸多起來(lái),并進(jìn)入到了遙感大數(shù)據(jù)新時(shí)代。在宏觀應(yīng)用方面,夜光遙感數(shù)據(jù)能夠直接反映城鎮(zhèn)化的水平,而人口遷徙則反映了城鎮(zhèn)建設(shè)的系統(tǒng)或者經(jīng)濟(jì)系統(tǒng)的發(fā)展水平;在微觀應(yīng)用方面,通過(guò)各樣的傳感器形成物聯(lián)網(wǎng),進(jìn)一步形成云計(jì)算,可以用來(lái)了解小區(qū)的氣候環(huán)境以及動(dòng)態(tài)變化。
如果用地圖可視化的方式來(lái)進(jìn)行大數(shù)據(jù)表達(dá),只需要在數(shù)據(jù)其他的屬性等等這些緯度之上再加一個(gè)空間的緯度,再加一個(gè)時(shí)間的緯度即可。只有用專(zhuān)業(yè)的分析工具進(jìn)行分析,打造出各種各樣的呈現(xiàn)方式,才能夠便于公眾的決策,利于廣泛應(yīng)用。
如今,大數(shù)據(jù)應(yīng)用程序比常規(guī)應(yīng)用程序復(fù)雜10倍,開(kāi)發(fā)人員通常需要了解大量的技術(shù),以使大數(shù)據(jù)能夠正常工作。
大數(shù)據(jù)的應(yīng)用仍然太難了。盡管有很多的炒作的成分,但大多數(shù)企業(yè)仍然努力從他們的數(shù)據(jù)中獲得價(jià)值。而Dresner咨詢(xún)服務(wù)公司得出結(jié)論:“盡管長(zhǎng)時(shí)間的意識(shí)培養(yǎng)和炒作,大數(shù)據(jù)分析的實(shí)際部署目前并不廣泛適用于大多數(shù)組織。”
■本報(bào)記者 楊光
