騰訊云副總裁蔣杰:騰訊大數據將全面開源 向批流融合、ABC融合演進

???????????更多資訊可登錄運營商財經網(telworld.com.cn),也可關注微信公眾號tel_world

?運營商財經網 秦佰鈴/文

11月6日,騰訊Techo開發者大會期間,騰訊云副總裁、騰訊數據平臺部總經理蔣杰接受了運營商財經網等媒體的采訪,就云計算、大數據的發展前景以及當下騰訊大數據的發展布局做了解讀。

 

全部開源是為了回饋社區

對于將騰訊大數據全面開源,蔣杰表示,開源是為了更好的回饋社區,希望開源生態能有大的繁榮,也希望能有更多的開發者和團隊能加入到這么一個生態來。

“這對騰訊來說也有好處”,蔣杰指出,一方面是能帶給騰訊更大的平臺影響力,吸引更多的開發者加入,另一方面是開源生態下,開發者共建能夠讓技術功能更加完善,更好的支撐到騰訊的業務。

據了解,騰訊大數據一直都在投入開源,在2017年就已經把第三代計算平臺Angel開源出來了,到了2019年,新開發的Angel3.0平臺也已開源,現在已經有像華為、小米、新浪微博等公司在使用這一平臺。

此次在大會上,騰訊云宣布資源管理容器平臺TKE和分布式數據庫TBase也面向開發者開源。蔣杰表示,未來,還會開放漂移計算、聯邦學習數據庫等這樣的能力。在其看來,這個開源的融合可以加入到更好的開源生態。

“將騰訊的大數據全面開源,是我們現在追求的一個方向。在整個騰訊云上至少有數百萬開發者,我們希望更多的開發者能夠參與我們,一起共建云的生態。”

未來騰訊大數據將向批流融合、ABC融合方向演進

據了解,目前騰訊的整個算力彈性資源池規模已經達到了20萬臺,每日運行數據任務有1500萬,每日接入數據條數已經接近35萬億條,每日實時計算量達到30萬億次,可支持1萬億級別維度的模型訓練。

蔣杰介紹,隨著技術的不斷演進,騰訊大數據正在由機器學習向批流融合、ABC融合方向演進,必須具備混合部署的能力,未來將形成數據湖和聯邦學習架構演進。

騰訊大數據目前主要的發展方向是“大數據+AI”雙引擎發展,深耕游戲、社交、金融、廣告、內容等領域。

在數據采集方面,騰訊大數據團隊在開始階段主要引入和使用開源軟件,經常會出現數據重復和數據丟包問題,后來自研了TubeMQ來解決,蔣杰進一步解釋說,“從2013年到現在整整6年的時間,TubeMQ上的數據規模翻了幾千倍,從百億到35萬億”據蔣杰表示,這就要求解決十萬億規模數據消費的延時問題,“業務對我們的要求是5個毫秒,TubeMQ要在如此大規模之下達到平均5毫秒的延時要求,這對我們來說是巨大的挑戰,我們通過軟硬結合的技術來解決整個流程的暢通”。

開源帶來的數據價值將為運營商提供強大助力

“開源本身并沒有直接的商業價值,但間接帶來的價值很大。”蔣杰表示,因為首先互聯網公司最大的價值是人才,開源會聚集很多的人才,而研發和開發只有高端人才云集,才能做出高價值的產品,服務高價值的業務。  

談及開源給運營商的助力時,蔣杰指出,現在的運營商都在做云,包括電信、聯通、移動在內,互聯網公司做的云的架構,將對運營商本身的基礎建設有很大的幫助。

“5G會帶來非結構化數據大規模的增加,包括AI能力的實現,需要更多去尋找數據本身的價值,通過數據的價值去回填于運營商自身業務的發展。” 蔣杰介紹,騰訊云目前所有數據相關的動作,都是跟業務強關聯的,有商業價值的,才有長期發展的空間。

(責任編輯:康玲華)

???????????運營商財經網(官方微信公眾號tel_world)—— 主流財經媒體,一家全面覆蓋科技、金融、證券、汽車、房產、食品、醫藥及其他各種消費品報道的原創資訊網站。

0
分享至:
文章關鍵詞: 騰訊云蔣杰
網友評論文明上網理性發言,請遵守新聞評論服務協議
0條評論
全部評論
彩票大赢家双色球图表