崗位職責:
1、負責各種資源數據的采集、清洗、存儲、分析流程;
2、負責大數據類產品的系統分析與架構設計,配合產品經理完成產品的快速研發與交付;
3、承擔建設基于Hadoop/Flink生態的大數據離線/實時處理平臺;
4、參與數據中臺產品的系統設計及開發工作,參加及支持數據中臺運維工作;
5、跟進大數據前沿技術的發展,將合適的技術方案適時引入業務場景。
任職要求:
1、本科及以上學歷或研究生及以上學歷,計算機科學等相關專業;
2、3年以上的大數據開發經驗;
2、熟悉Hadoop、Hive、Hbase、ELK等框架組件;
3、熟悉Spark、Storm、Flink、Impala、Presto等計算和數據處理引擎的環境搭建、開發和管理;
4、熟悉消息隊列的原理,熟練使用Kafka、rocketmq等常用的消息隊列;
5、熟悉java、python等語言,編碼能力優秀,有良好的編碼習慣和風格,重視代碼質量和工程實踐