2016年新年伊始,在主題為Hello,DT World的論壇上,阿里云發(fā)布了大數(shù)據(jù)開發(fā)平臺:數(shù)加。這是一個包含計算引擎、開發(fā)組件、可視化工具在內(nèi)的一站式開發(fā)平臺,將大大降低開發(fā)者使用大數(shù)據(jù)的門檻,同時也將讓數(shù)據(jù)分析和數(shù)據(jù)預(yù)測的成本降至10%。 大數(shù)據(jù)的口號
2016年新年伊始,在主題為“Hello,DT World”的論壇上,阿里云發(fā)布了大數(shù)據(jù)開發(fā)平臺:“數(shù)加”。這是一個包含計算引擎、開發(fā)組件、可視化工具在內(nèi)的一站式開發(fā)平臺,將大大降低開發(fā)者使用大數(shù)據(jù)的門檻,同時也將讓數(shù)據(jù)分析和數(shù)據(jù)預(yù)測的成本降至10%。
大數(shù)據(jù)的口號喊了多年,到如今依然熱度不減,哪怕在2015年資本市場的“寒冬”下,中國大數(shù)據(jù)領(lǐng)域的創(chuàng)新公司仍獲得近50億人民幣的投資??蓪?shí)際上,大數(shù)據(jù)在開發(fā)層面和應(yīng)用層面一直未有本質(zhì)的創(chuàng)新,人類已挖掘的數(shù)據(jù)財富更是不到百萬分之一。
“數(shù)加”的發(fā)布,對阿里云來說,無疑是對數(shù)據(jù)和計算本質(zhì)的重新思考:把云計算的“云”和大數(shù)據(jù)“大”去掉,讓數(shù)據(jù)被更好地計算,從而創(chuàng)造出經(jīng)濟(jì)和社會價值。
事實(shí)上,人類社會的發(fā)展自始至終離不開數(shù)據(jù)與計算工具的進(jìn)化。
在《人類簡史》這本書里,歷史學(xué)家尤瓦爾·赫拉利描述了的“智人”的進(jìn)化過程,很大程度上源自計數(shù)工具的推動,即便是麻繩、石頭這樣簡陋的計數(shù)工具。到了公元前2700年,古蘇美爾人發(fā)明了算盤,開創(chuàng)了世界上首批先進(jìn)的計算系統(tǒng)。而利用算盤,古蘇美爾人和古巴比倫人在天文、航海方面有了深刻研究,這些由算盤計算出來的天文、航海數(shù)據(jù)也成為早年商貿(mào)活動的重要參考。
如果把歷史鏡頭拉近,當(dāng)1946年馮·諾伊曼推出**臺現(xiàn)代意義的計數(shù)設(shè)備——計算機(jī)的時候,人類的又一場變革大幕正在開啟。正是在計算機(jī)強(qiáng)大計算能力的幫助下,登月計劃才會成為現(xiàn)實(shí),也正是利用計算機(jī),人類對于生命科學(xué)的研究才能在過去二十年取得突飛猛進(jìn)的發(fā)展。
從互聯(lián)網(wǎng)時代開始,尤其到了移動互聯(lián)網(wǎng)以及社交媒體時代,人類社會的數(shù)據(jù)增長進(jìn)入到一個前所未有的爆發(fā)階段。根據(jù)IDC的數(shù)字世界研究報告顯示,僅僅在2013年,人類產(chǎn)生、復(fù)制和消費(fèi)的數(shù)據(jù)量達(dá)到4.4ZB。而到2020年,數(shù)據(jù)量將增長10倍,達(dá)到44ZB。
如此海量數(shù)據(jù)的增長,勢必需要更**的數(shù)據(jù)解決方案。
長期以來,企業(yè)數(shù)據(jù)處理的**結(jié)果往往就是商務(wù)智能,但一張所謂的智能報表由于無法實(shí)現(xiàn)實(shí)時計算,并不能真正代表企業(yè)的運(yùn)營情況。其次,數(shù)據(jù)存儲的成本并不低,倘若無法從數(shù)據(jù)中挖掘出核心價值,那么數(shù)據(jù)不但不會是企業(yè)發(fā)展的動能,還將成為企業(yè)的重要成本。第三,即便是Hadoop平臺出現(xiàn)之后,雖然擁有了開放、廉價、基于普通商業(yè)硬件的平臺,但大數(shù)據(jù)應(yīng)用的開發(fā)成本,無論是技術(shù)門檻還是價格都讓很多普通開發(fā)者望而卻步。
在這樣的產(chǎn)業(yè)發(fā)展背景之下,“數(shù)加”這樣一個分布式大數(shù)據(jù)開發(fā)平臺的推出引人關(guān)注。
首先,作為“一個數(shù)據(jù)公司”(馬云語),阿里巴巴擁有著處理大數(shù)據(jù)的豐富經(jīng)驗。單就2015年的雙十一來說,淘寶/天貓訂單的創(chuàng)建峰值能力突破了每秒鐘14萬筆,支付寶的支付峰值達(dá)到了每秒8.59萬筆,遠(yuǎn)高于Visa實(shí)驗室測試數(shù)據(jù)的每秒5.6萬筆以及MasterCard實(shí)驗室測試數(shù)據(jù)的每秒4萬筆,這些數(shù)據(jù)處理經(jīng)驗都將反映到“數(shù)加”的產(chǎn)品中。
其次,“數(shù)加”并非一款單獨(dú)的產(chǎn)品,而是一條完整的大數(shù)據(jù)開發(fā)鏈條。當(dāng)天發(fā)布的20款產(chǎn)品,覆蓋了數(shù)據(jù)采集、計算引擎、數(shù)據(jù)加工、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)、數(shù)據(jù)應(yīng)用等數(shù)據(jù)生產(chǎn)全鏈條。
其中,由大數(shù)據(jù)計算服務(wù)(MaxCompute)、分析型數(shù)據(jù)庫(Analytic DB)、流計算(StreamCompute)共同組成的底層計算引擎,速度快且成本低。測算數(shù)據(jù)顯示,自建Hadoop集群的成本是“數(shù)加”的1.5倍,國外計算廠商AWS 的EMR成本更是“數(shù)加”的5倍。
另外,“數(shù)加”的云端數(shù)據(jù)開發(fā)套件,包括數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、調(diào)度系統(tǒng)、數(shù)據(jù)管理、運(yùn)維視屏、數(shù)據(jù)質(zhì)量、任務(wù)監(jiān)控,能夠幫助開發(fā)者快速部署相關(guān)產(chǎn)品。則通過視化產(chǎn)品DataV的數(shù)據(jù)分析,開發(fā)者可以一星期做出阿里雙十一的數(shù)據(jù)監(jiān)控大屏。同樣基于DataV,“數(shù)加”還發(fā)布了面向政府的行業(yè)應(yīng)用產(chǎn)品“郡縣圖治”。通過這款產(chǎn)品,縣長可以在一個屏幕下統(tǒng)覽全縣各項經(jīng)濟(jì)民生數(shù)據(jù),為政府決策提供輔助。
“數(shù)加”推出的機(jī)器學(xué)習(xí)工具,可基于海量數(shù)據(jù)實(shí)現(xiàn)對用戶行為、行業(yè)走勢、天氣、交通等的預(yù)測。圖形化編程讓用戶無需編碼、只需用鼠標(biāo)拖拽標(biāo)準(zhǔn)化組件即可完成開發(fā)。產(chǎn)品還集成了阿里巴巴核心算法庫,包括特征工程、大規(guī)模機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等。
而在應(yīng)用層面,支撐阿里巴巴客服系統(tǒng)的智能語言交互和文字識別OCR也即將上線。開發(fā)者可以利用這兩個應(yīng)用開發(fā)更具人工智能的大數(shù)據(jù)產(chǎn)品,比如搭建智能化的客服體系,利用文字識別OCR快速推出掃描類的應(yīng)用,保障用戶體驗,節(jié)約成本。
**,在一個軟件即服務(wù)的時代,“數(shù)加”要做的也不僅僅是完整的數(shù)據(jù)開發(fā)工具,而是一項數(shù)據(jù)增值服務(wù)。大數(shù)據(jù)行業(yè)的進(jìn)步不僅需要底層技術(shù)尤其是開發(fā)技術(shù)的發(fā)展,以降低技術(shù)門檻和資金門檻,還需要大量數(shù)據(jù)分析人才、數(shù)據(jù)科學(xué)家。
阿里云大數(shù)據(jù)事業(yè)部**總監(jiān)徐常亮表示,阿里云將通過天池大數(shù)據(jù)競賽的平臺,發(fā)現(xiàn)、培養(yǎng)更多數(shù)據(jù)分析人才,比如在2015年就發(fā)掘出一位年齡僅有15歲的數(shù)據(jù)分析的獲獎?wù)?。同時計劃與各大高校合作,合辦數(shù)據(jù)相關(guān)的課程等。同時,徐常亮還透露,“數(shù)加”平臺將計劃在3年內(nèi)吸引1000家合作伙伴加入,共同構(gòu)筑大數(shù)據(jù)生態(tài)圈。
正如科幻小說家威廉·吉布森所言:未來已經(jīng)到來,只是分布還不均衡。我們已經(jīng)看到整個社會都在轉(zhuǎn)向數(shù)據(jù)層面的運(yùn)作。據(jù)
石家莊網(wǎng)站建設(shè)了解,而當(dāng)互聯(lián)網(wǎng)成為像水、電一樣的基礎(chǔ)設(shè)施時,產(chǎn)生于互聯(lián)網(wǎng)(包括但不限于桌面互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等)的數(shù)據(jù)也成為一種新型的生產(chǎn)資料,在云計算的大背景下,分布式的數(shù)據(jù)分析計算平臺將創(chuàng)造更多的創(chuàng)業(yè)機(jī)會,讓數(shù)據(jù)能夠互聯(lián)互通,數(shù)據(jù)驅(qū)動的創(chuàng)業(yè)變革也已在發(fā)生。正如阿里云總裁胡曉明曾預(yù)測的:2016年將成為數(shù)據(jù)創(chuàng)業(yè)的**年,這將是創(chuàng)業(yè)領(lǐng)域的全新的一個開始。