1. 數據平臺建設,包括:物聯數據/業務數據接入、數據計算(實時流、批處理等)、數據存儲(結構化、非結構化、秒級實時數據等)、數據治理(數據清洗、質量監控等)、數據分析平臺的部署和定制化開發,為應用和用戶提供統一的數據服務。
2. 數據平臺管理,包括需求管理、權限管理、安全管理以及數據資產管理(主數據、元數據、數據門戶等)。
3. 根據業務需求變化,持續優化平臺的功能和性能。
4. 分析和解決數據平臺存在的問題,并協助基于數據平臺的應用開發。
1、大學本科及以上學歷,計算機、軟件工程等相關專業。
2、2年及以上大數據、中臺領域工作經驗;有電力行業大數據平臺建設或管理經驗者優先。
3、專業技能要求
(1)熟悉數據庫技術,掌握主流關系事務數據庫(如Oracle、MySQL、PostgreSQL等)的使用和管理。
(2)熟悉數據倉庫技術,如ETL工具及流程,有OLAP、BI、數據看板等經驗,熟悉OLAP數據庫(如GreenPlum、Doris、Clickhouse等)。
(3)熟悉常用的大數據技術棧例如Hadoop生態(HDFS、Hive、Hbase、Spark、Flink等)和常用的數據庫MongoDB、MySQL、ElasticSearch等;了解數據湖存儲技術。
(4)具備扎實的編程能力,掌握Java、Python、Go等至少一種主流編程語言。
(5)了解微服務開發,例如消息隊列、高并發、任務編排等,熟悉相關技術棧例如K8s、Docker容器等。
4、有較強學習能力和創新能力;責任心強,工作認真細致;具有良好的團隊合作精神;有強烈的自驅力,對新技術敏感。