Grab 是東南亞最大的互聯(lián)網(wǎng) O2O 平臺，業(yè)務(wù)由剛開始的打車業(yè)務(wù)，擴展到涵蓋了打車、支付、送餐、地圖、物流、生鮮等諸多領(lǐng)域。

如此快速變化的業(yè)務(wù)發(fā)展給數(shù)據(jù)工程團隊帶來了很多挑戰(zhàn)，上游的數(shù)據(jù)快速增長和變化，數(shù)據(jù)團隊需要快速支持數(shù)據(jù)流的變化。同時，數(shù)據(jù)量的快速增長和數(shù)據(jù)模型逐漸復(fù)雜化，我們支持下游數(shù)據(jù)分析團隊可以快速的分析處理。這些驅(qū)動著我們設(shè)計端到端自助的大數(shù)據(jù)處理平臺，把各類數(shù)據(jù)需求模塊化，自動化，給數(shù)據(jù)用戶自助服務(wù)的平臺。給上下游提供平臺每個環(huán)節(jié)的可見度，聯(lián)通數(shù)據(jù)生產(chǎn)者和數(shù)據(jù)消費者。

提綱：

1、Grab 的數(shù)據(jù)架構(gòu)的演化

數(shù)據(jù)平臺的迭代
存儲與計算引擎的挑戰(zhàn)

2、數(shù)據(jù)平臺自助化的原動力

大數(shù)據(jù)遇到微服務(wù)
多元化自助 BI 的需求

3、數(shù)據(jù)平臺自助化的實踐

自助數(shù)據(jù)導(dǎo)入平臺
自助數(shù)據(jù)分析平臺
自助數(shù)據(jù)導(dǎo)出平臺

4、數(shù)據(jù)治理的思考和實踐

數(shù)據(jù)質(zhì)量監(jiān)管平臺
元數(shù)據(jù)管理

成峰，Grab Data Engineering Lead，主導(dǎo) Grab 大數(shù)據(jù)平臺開發(fā)和維護。8 年 Data Geek，經(jīng)歷了 Oracle RAC，MPP，Hadoop 到如今 Spark/Presto 儲存與計算分離的架構(gòu)演變。

現(xiàn)在就職 Grab 新加坡，專注于的 Data Lake，數(shù)據(jù)平臺，數(shù)據(jù)治理的研發(fā)工作。參與并主導(dǎo)了數(shù)據(jù)平臺的端到端自助平臺化的研發(fā)。

 

 

 

標(biāo)簽： 大數(shù)據(jù)自助平臺 數(shù)據(jù)平臺

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請與原作者聯(lián)系。