崗位職責:
1. 參與公司數(shù)據(jù)中臺、大數(shù)據(jù)平臺及數(shù)據(jù)倉庫的整體規(guī)劃,架構設計和研發(fā);
2. 參與建設統(tǒng)一的數(shù)據(jù)體系,制定并推動數(shù)據(jù)治理體系的落地;
3. 對數(shù)據(jù)采集、數(shù)據(jù)融合、數(shù)據(jù)質量、數(shù)據(jù)應用鏈路有深入理解,并能協(xié)助業(yè)務數(shù)據(jù)集市建設,搭建業(yè)務領域模型。
任職資格:
1. 計算機相關專業(yè)碩士學歷,3年及以上相關工作經歷;
2. 精通大數(shù)據(jù)技術生態(tài)相關技術(例如:Hadoop、MapReduce、Hive、Hbase等),并具備豐富的數(shù)據(jù)倉庫、數(shù)據(jù)中臺架構設計和實施經驗,有落地的項目;
3. 從事大數(shù)據(jù)領域至少2年以上,熟悉數(shù)據(jù)倉庫模型設計與ETL開發(fā)經驗 ,掌握Kimbal的維度建模設計方法,具備海量數(shù)據(jù)加工處理(ETL)相關經驗;
4. 有實時ETL研發(fā)經驗,對分布式實時大數(shù)據(jù)處理系統(tǒng)有深入理解,包括但不限于Spark streaming、Flink;
5. 熟悉數(shù)據(jù)治理、數(shù)據(jù)質量管理等相關理念和方法;
6. 熟悉Kubernetes/Docker開發(fā)及原理,熟悉Kubernetes各組件的工作流程,對Kubernetes有豐富的部署調優(yōu)實踐經驗。