從2012年開(kāi)始,幾乎人人(至少是互聯(lián)網(wǎng)界)言必稱大數(shù)據(jù),似乎不和大數(shù)據(jù)沾點(diǎn)邊都不好意思和別人聊天。從2016年開(kāi)始,大數(shù)據(jù)系統(tǒng)逐步開(kāi)始在企業(yè)中進(jìn)入部署階段,大數(shù)據(jù)的炒作逐漸散去,隨之而來(lái)的是應(yīng)用的蓬勃發(fā)展期,一些代表成熟技術(shù)的標(biāo)志性IPO在國(guó)內(nèi)外資本市場(chǎng)也不斷出現(xiàn)。轉(zhuǎn)眼間,大數(shù)據(jù)幾年前經(jīng)歷的泡沫正在無(wú)可爭(zhēng)議地轉(zhuǎn)移到人工智能身上。可以說(shuō),在過(guò)去的一年,AI所經(jīng)歷的共同意識(shí)“大爆炸”與當(dāng)年的大數(shù)據(jù)相比,有過(guò)之而無(wú)不及。最近風(fēng)口又轉(zhuǎn)移到區(qū)塊鏈上了,某種程度上也成為業(yè)內(nèi)人士焦慮的一種誘因了。
但無(wú)論技術(shù)熱點(diǎn)如何變換,我們能看到的是,隨著行業(yè)沉下心來(lái)進(jìn)行實(shí)質(zhì)的落地,大數(shù)據(jù)生態(tài)也越來(lái)越細(xì)分。今天就我和大家來(lái)談?wù)劥髷?shù)據(jù)領(lǐng)域的一些新變化、新趨勢(shì)。
三、數(shù)據(jù)科學(xué)自動(dòng)化 Security
數(shù)據(jù)科學(xué)家(Data Scientist)依然是市場(chǎng)上炙手可熱的爭(zhēng)奪對(duì)象。但是我們?cè)谥車鷧s很少見(jiàn)到這類人,哪怕是財(cái)富前1000強(qiáng)的公司也為無(wú)法招到更多“數(shù)據(jù)科學(xué)家”而感到困擾。而在一些組織里,數(shù)據(jù)科學(xué)部門(mén)正在從使能者演變?yōu)槠款i。
與此同時(shí),AI的大眾化以及自服務(wù)工具的蔓延使得數(shù)據(jù)科學(xué)技能有限的數(shù)據(jù)工程師,甚至是數(shù)據(jù)分析師在執(zhí)行一些基本操作時(shí)變得更加容易了,而這些操作直到最近仍然是數(shù)據(jù)科學(xué)家的領(lǐng)地。在自動(dòng)化工具的幫助下,企業(yè)大量的大數(shù)據(jù)工作,尤其是那些簡(jiǎn)單枯燥的工作,將由數(shù)據(jù)工程師和數(shù)據(jù)分析師進(jìn)行處理,而不必麻煩有著深厚技術(shù)技能的數(shù)據(jù)科學(xué)家。當(dāng)然,即便如此,數(shù)據(jù)科學(xué)家目前還不需要太過(guò)“恐懼”。
在可預(yù)見(jiàn)的未來(lái)里,自服務(wù)工具和自動(dòng)化模型將會(huì)“增強(qiáng)”數(shù)據(jù)科學(xué)家而不是消滅他們,會(huì)解放他們,讓他們把焦點(diǎn)放在需要判斷、創(chuàng)造力、社會(huì)化技能或者需要垂直行業(yè)知識(shí)的任務(wù)上,那樣才能更加體現(xiàn)科學(xué)家的名號(hào)。
四、大數(shù)據(jù)管理員的崛起
大數(shù)據(jù)管理員(BDA)也對(duì)標(biāo)于數(shù)據(jù)庫(kù)管理員(DBA),雖然兩個(gè)英文字母只是變換了一下順序,但是其內(nèi)涵相差甚遠(yuǎn)。一個(gè)非常明顯的趨勢(shì)是,企業(yè)將對(duì)一個(gè)新崗位角色產(chǎn)生需求,即大數(shù)據(jù)管理員。DBA大家已經(jīng)非常熟悉,但它與大數(shù)據(jù)時(shí)代下的數(shù)據(jù)管理員,有非常大的差別。
數(shù)據(jù)管理員處于數(shù)據(jù)使用者和數(shù)據(jù)工程師之間。為了取得成功,數(shù)據(jù)管理員在進(jìn)行大數(shù)據(jù)系統(tǒng)的維護(hù)工作之外,還必須了解數(shù)據(jù)的含義以及掌握應(yīng)用于數(shù)據(jù)中的一些技術(shù)。
這數(shù)據(jù)管理員需要清楚整個(gè)組織內(nèi)需要執(zhí)行的數(shù)據(jù)分析類型,哪些數(shù)據(jù)集非常適用于這項(xiàng)工作,以及如何將數(shù)據(jù)從原始狀態(tài)轉(zhuǎn)換為數(shù)據(jù)使用者執(zhí)行這項(xiàng)工作所需的形態(tài)和形式。數(shù)據(jù)管理員應(yīng)使用像自助服務(wù)數(shù)據(jù)平臺(tái)這樣的系統(tǒng)來(lái)加快數(shù)據(jù)使用者訪問(wèn)基本數(shù)據(jù)集的端到端流程,而無(wú)需制作無(wú)數(shù)的數(shù)據(jù)副本。
結(jié)語(yǔ)
以上四個(gè)方面是數(shù)據(jù)科學(xué)在實(shí)踐發(fā)展中提出的新需求,誰(shuí)能在這些方面得到好的成績(jī),誰(shuí)便會(huì)在這個(gè)大數(shù)據(jù)時(shí)代取得領(lǐng)先的位置。
我們擁有國(guó)內(nèi)頂級(jí)的設(shè)計(jì)、技術(shù)團(tuán)隊(duì)和多年互聯(lián)網(wǎng)軟件開(kāi)發(fā)經(jīng)驗(yàn)。