12月13日,阿里云計(jì)算平臺(tái)負(fù)責(zé)人賈揚(yáng)清在Flink Forward Asia 2020峰會(huì)上指出,擁抱“融合”是大數(shù)據(jù)演進(jìn)的新方向,大數(shù)據(jù)和人工智能一體化是必然趨勢(shì),而人工智能是大數(shù)據(jù)業(yè)務(wù)發(fā)展的終極出口。同時(shí),他從不同角度討論了Flink的開(kāi)源技術(shù),以及云時(shí)代下開(kāi)源技術(shù)的發(fā)展和未來(lái)思考。
Flink開(kāi)源社區(qū) “漸入佳境”
從一個(gè)普通開(kāi)源技術(shù)愛(ài)好者視角,賈揚(yáng)清將2020年Flink發(fā)展定義為“漸入佳境”,主要體現(xiàn)在三大方面:
● 技術(shù)。今年Flink在技術(shù)方面取得兩大新突破:一是Flink流批一體技術(shù)在阿里雙11核心數(shù)據(jù)業(yè)務(wù)場(chǎng)景規(guī)模化成功應(yīng)用; 二是Flink實(shí)時(shí)計(jì)算峰值首次突破40億條/秒。同比去年,不增加集群規(guī)模情況下提升了一倍的計(jì)算性能。
● 應(yīng)用。Flink不再是一個(gè)居廟堂之高的技術(shù),而是成為開(kāi)源流式處理的事實(shí)標(biāo)準(zhǔn),飛入“尋常百姓家”。比如中國(guó)信通院使用了Flink作為技術(shù)藍(lán)本設(shè)計(jì)流式處理標(biāo)準(zhǔn),云計(jì)算公司包括阿里云等均使用Flink作為流式處理的底層引擎。
● 社群。Flink開(kāi)源社區(qū)高速增長(zhǎng),登頂Apache最活躍的郵件列表; Flink項(xiàng)目是Github提交次數(shù)最多的Apache頂級(jí)項(xiàng)目之一。去年Flink Forward Asia 參會(huì)人數(shù)達(dá)2000人,Flink 極客挑戰(zhàn)賽吸引了4000+開(kāi)發(fā)者參與;今年大會(huì)切換到線上、線下同時(shí)舉辦,Flink 極客挑戰(zhàn)賽的頒獎(jiǎng)更讓大家看到了越來(lái)越多開(kāi)發(fā)者對(duì)于開(kāi)源技術(shù)的熱情以及勇于挑戰(zhàn)的精神。
開(kāi)源讓云更標(biāo)準(zhǔn)化
賈揚(yáng)清認(rèn)為:開(kāi)源讓云更標(biāo)準(zhǔn)化。他提到,云計(jì)算越來(lái)越趨于標(biāo)準(zhǔn)化對(duì)其自身發(fā)展非常有利。云上大量的開(kāi)發(fā)技術(shù)體系日趨一致,這意味著大量云計(jì)算開(kāi)發(fā)者熟悉這套體系后更容易把自己的應(yīng)用變成云的一部分。
開(kāi)源有助于阿里云打破自有技術(shù)體系,在充分尊重用戶原有使用習(xí)慣基礎(chǔ)上,形成標(biāo)準(zhǔn)、開(kāi)放、公共的技術(shù)體系。單靠一家公司去制定標(biāo)準(zhǔn)非常難。
阿里云對(duì)于開(kāi)源意味著什么?賈揚(yáng)清提到以下三點(diǎn):
● 從組織來(lái)看,去年阿里巴巴集團(tuán)成立開(kāi)源技術(shù)委員會(huì),從集團(tuán)層面統(tǒng)一梳理和推進(jìn)阿里巴巴開(kāi)源技術(shù)戰(zhàn)略的執(zhí)行。
● 從參與度來(lái)看,阿里巴巴集團(tuán)一開(kāi)始就廣泛采用開(kāi)源技術(shù)構(gòu)建自己的技術(shù)體系。以阿里云計(jì)算平臺(tái)事業(yè)部大數(shù)據(jù)產(chǎn)品為例,比如實(shí)時(shí)計(jì)算 Flink都在大量使用Hadoop/K8S生態(tài)的技術(shù);機(jī)器學(xué)習(xí)PAI同樣使用TensorFlow等開(kāi)源深度學(xué)習(xí)框架。
● 從貢獻(xiàn)度來(lái)看,阿里巴巴集團(tuán)持續(xù)為開(kāi)源社區(qū)貢獻(xiàn)力量。以Flink技術(shù)社區(qū)為例,僅去年一年阿里云就貢獻(xiàn)百萬(wàn)行代碼給Apache Flink社區(qū)。當(dāng)前,集團(tuán)開(kāi)源項(xiàng)目數(shù)已超過(guò)1000個(gè),覆蓋大數(shù)據(jù)、AI、云原生、數(shù)據(jù)庫(kù)、中間件、硬件等多個(gè)領(lǐng)域,全世界有70多萬(wàn)開(kāi)發(fā)者為阿里點(diǎn)亮GitHub Star,成千上萬(wàn)的愛(ài)好者參與到項(xiàng)目貢獻(xiàn)之中。
擁抱“融合”是大數(shù)據(jù)演進(jìn)的新方向
賈揚(yáng)清表示,云的三大發(fā)展趨勢(shì)主要是IT基礎(chǔ)設(shè)施的云化、核心技術(shù)的互聯(lián)網(wǎng)化、應(yīng)用的數(shù)據(jù)化和智能化,這也是云的核心價(jià)值所在。
企業(yè)在IT上云和業(yè)務(wù)互聯(lián)網(wǎng)化之后,其應(yīng)用必將從流程驅(qū)動(dòng)變?yōu)閿?shù)據(jù)智能驅(qū)動(dòng),實(shí)現(xiàn)數(shù)據(jù)化和智能化。云計(jì)算、底層IaaS技術(shù)在比拼基礎(chǔ)設(shè)施的成熟度、穩(wěn)定性和價(jià)格,而上層PaaS技術(shù)要比的是數(shù)據(jù)能力、智能能力。
目前包括數(shù)據(jù)庫(kù)、IOT等泛大數(shù)據(jù)仍然處于大數(shù)據(jù)最基礎(chǔ)的使用方式,需要整合更多大數(shù)據(jù)和AI能力。
所以,擁抱“融合”是大數(shù)據(jù)演進(jìn)的新方向,大數(shù)據(jù)+人工智能一體化是大數(shù)據(jù)發(fā)展的必然方向,而人工智能是大數(shù)據(jù)業(yè)務(wù)發(fā)展的終極出口 。
只有AI化,大數(shù)據(jù)才能發(fā)揮真正的業(yè)務(wù)價(jià)值。阿里云大數(shù)據(jù)之所以有核心競(jìng)爭(zhēng)力,就是因?yàn)榇髷?shù)據(jù)是結(jié)合AI能力的大數(shù)據(jù),是智能化升級(jí)的大數(shù)據(jù)。比如Flink+Alink,Flink不僅能夠提供流批一體的處理能力,還能借助已開(kāi)源的Alink機(jī)器學(xué)習(xí)算法庫(kù),實(shí)現(xiàn)Flink的大數(shù)據(jù)+人工智能一體化。
未來(lái),社會(huì)經(jīng)濟(jì)將與互聯(lián)網(wǎng)更加融合,企業(yè)機(jī)構(gòu)的業(yè)務(wù)也將全面轉(zhuǎn)變?yōu)榛ヂ?lián)網(wǎng)業(yè)務(wù)。一個(gè)企業(yè)僅僅有IT基礎(chǔ)設(shè)施并不夠,企業(yè)應(yīng)用也將實(shí)現(xiàn)從流程驅(qū)動(dòng)變?yōu)閿?shù)據(jù)智能驅(qū)動(dòng),阿里云計(jì)算平臺(tái)將輸出全棧大數(shù)據(jù)技術(shù)能力,并提供全球頂尖的AI技術(shù),一起實(shí)現(xiàn)數(shù)據(jù)化和智能化。
