數(shù)據(jù)開發(fā)工作是推動各領(lǐng)域大數(shù)據(jù)應用落地的必要環(huán)節(jié),是將數(shù)據(jù)生產(chǎn)要素轉(zhuǎn)化成社會生產(chǎn)力的關(guān)鍵過程。
6月9日,由中國信息通信研究院、大數(shù)據(jù)技術(shù)標準推進委員會舉辦的“2021大數(shù)據(jù)前沿技術(shù)與產(chǎn)業(yè)論壇”在北京舉行,論壇聚焦集成化大數(shù)據(jù)平臺、流計算、數(shù)據(jù)開發(fā)平臺、數(shù)據(jù)可視化等爆點新概念,邀請業(yè)內(nèi)知名專家學者共論大數(shù)據(jù)前沿技術(shù)發(fā)展方向,探尋技術(shù)產(chǎn)品在產(chǎn)業(yè)界的落地實踐。
云徙科技數(shù)據(jù)智能部總經(jīng)理蒲繼強受邀參加論壇,發(fā)表“數(shù)據(jù)開發(fā)平臺發(fā)展趨勢與實踐案例”在線主題演講,與行業(yè)同仁共同溝通、交流大數(shù)據(jù)開發(fā)平臺在企業(yè)建設(shè)數(shù)據(jù)方面的一些思考。
以下為蒲繼強演講內(nèi)容整理分享:
一、數(shù)字中臺:解決企業(yè)數(shù)據(jù)建設(shè)困局
大數(shù)據(jù)技術(shù)的推陳出新、演變非常快速,也給企業(yè)帶來了在建設(shè)數(shù)據(jù)方面的一些困局。
這些到底用什么樣的架構(gòu)比較適合自身企業(yè),并不是說最新的架構(gòu)就一定是適合的,需要根據(jù)場景或者企業(yè)現(xiàn)有的人員去進行一個最優(yōu)的組合。
我們認為數(shù)據(jù)中臺就是解決大數(shù)據(jù)技術(shù)以及大數(shù)據(jù)技術(shù)應用到數(shù)據(jù)場景的一攬子解決方案,它是數(shù)字化建設(shè)的一個基建工程。
數(shù)據(jù)中臺是從技術(shù)層面上去屏蔽大數(shù)據(jù)底下的技術(shù)能力。從業(yè)務上整合企業(yè)的全場景的數(shù)據(jù),以數(shù)據(jù)能力形式統(tǒng)一為企業(yè)數(shù)字化的變革或者是創(chuàng)新提供服務,可以有效地去解決企業(yè)在大數(shù)據(jù)建設(shè)方面技術(shù)方面遇到的一些困境。
二、大數(shù)據(jù)研發(fā)平臺經(jīng)歷的4個階段
大數(shù)據(jù)研發(fā)平臺是數(shù)據(jù)中臺的一個建設(shè)利器。在大數(shù)據(jù)研發(fā)平臺的發(fā)展過程當中,可以把它歸納為四個階段。
第一個階段是純編碼階段,大數(shù)據(jù)開發(fā)人員需要有一邊去理解大數(shù)據(jù)技術(shù)的能力,一邊要去做數(shù)據(jù)應用場景的開發(fā)。
第二個階段2012-2015,以互聯(lián)網(wǎng)為代表的企業(yè),開始基于大數(shù)據(jù)技術(shù)封裝開發(fā)工具,但也僅僅實現(xiàn)了一些數(shù)據(jù)的ETL可視化開發(fā)。
第三個階段2015-2018,大數(shù)據(jù)研發(fā)平臺開始逐步產(chǎn)品化,基于企業(yè)數(shù)據(jù)中臺建設(shè)全場景實現(xiàn)了數(shù)據(jù)采、存、通、服的可視化開發(fā),真正提升大數(shù)據(jù)建設(shè)生產(chǎn)力。
第四個階段,隨著數(shù)據(jù)種類的繁多、質(zhì)量的低下,數(shù)據(jù)治理越來越受到重視,數(shù)據(jù)建設(shè)與數(shù)據(jù)治理并行解決也被提上了日程。
三、大數(shù)據(jù)研發(fā)平臺分享
在大數(shù)據(jù)研發(fā)平臺方面,云徙做了什么工作?簡單一句話,云徙的數(shù)據(jù)中臺,讓數(shù)據(jù)從DOS時代進了windows 時代。
整個數(shù)據(jù)中臺里的一個核心產(chǎn)品,就是大數(shù)據(jù)研發(fā)平臺,從數(shù)據(jù)的接入到最后的數(shù)據(jù)的運維,數(shù)據(jù)資產(chǎn)管理,都可以在這個平臺上進行一站式的開發(fā)。
具體層面上我們可以支持多種的異構(gòu)數(shù)據(jù)源接入。比如說流數(shù)據(jù),離線的結(jié)構(gòu)化的數(shù)據(jù),非結(jié)構(gòu)化的數(shù)據(jù),包括實時接入以及物聯(lián)網(wǎng)傳感器,智能化IDE編程環(huán)境,開發(fā)、生產(chǎn)環(huán)境的聯(lián)動可以一鍵發(fā)布等等。
四、大數(shù)據(jù)研發(fā)平臺實踐案例
在此分享一個醫(yī)藥行業(yè)醫(yī)藥集團公司成功案例,本案例中的醫(yī)藥集團覆蓋了醫(yī)藥制造、生產(chǎn)、研發(fā)、營銷、銷售,包括售后服務,整個全鏈路的業(yè)務。數(shù)據(jù)業(yè)務化,一直是企業(yè)里面的一個老大難的問題。
云徙在參與到此個醫(yī)藥集團數(shù)據(jù)中臺建設(shè)過程當中,利用云徙的大數(shù)據(jù)研發(fā)平臺,為它梳理并采集了包含IOT爬蟲數(shù)據(jù),以及它自身內(nèi)部的業(yè)務系統(tǒng),多種數(shù)據(jù)源,實現(xiàn)包括集團的管理駕駛艙、營銷、商業(yè)、連鎖、醫(yī)生、終端、客戶、供應鏈等8個主題域的數(shù)據(jù),形成了六大類的數(shù)據(jù)應用賦能到智慧研發(fā)、智慧生產(chǎn)、智慧供應鏈、智慧營銷和智慧管理。
在實施整個項目交付過程當中,利用云徙的研發(fā)平臺,大大提升了研發(fā)效率。僅僅是由1位技術(shù)經(jīng)理+2位客戶研發(fā)人員+3位云徙研發(fā)人員+1位算法工程師,七個人的團隊就基本實現(xiàn)了一個數(shù)據(jù)中臺的建設(shè)。
在數(shù)據(jù)中臺把基礎(chǔ)搭好之后,云徙還幫其做了很多這種數(shù)據(jù)的智能應用,比如智能補貨,醫(yī)生的精準畫像,精準地圖等這些功能,為整個醫(yī)藥集團數(shù)據(jù)業(yè)務化打下了堅實的基礎(chǔ)。