崗位職責:
1、負責設計并優化數據處理系統的整體架構,確保系統能夠高效、穩定地支持大數據存儲、處理和分析;
2、負責根據業務需求和技術趨勢,選擇合適的技術棧和工具,構建可擴展、高性能的數據處理平臺;
3、負責評估和優化系統性能,解決系統瓶頸,確保數據處理和查詢的響應速度滿足業務需求;
4、負責制定數據安全策略,確保數據處理過程中的數據安全和隱私保護;
5、負責與開發團隊緊密合作,提供架構設計和技術支持,推動項目的順利進行;
6、負責跟蹤最新的數據處理技術和架構趨勢,不斷提升系統的技術水平和競爭力;
7、負責參與處室系統的規劃和需求分析,為系統的發展提供戰略性的建議和方向。
任職要求:
1、計算機科學、軟件工程或相關領域本科及以上學歷;
2、精通Java/Python/Scala等至少一種編程語言,熟悉Hadoop、Spark、Flink、Kafka等大數據處理框架,具備分布式系統架構設計與開發經驗;
3、具有3年以上大規模數據處理平臺(如數據倉庫、實時計算平臺)的設計與優化經驗,熟悉ETL流程及數據建模方法論(如維度建模);
4、掌握高并發、高吞吐場景下的性能分析與調優經驗,熟悉Linux性能監控工具(如iostat、vmstat)及分布式系統瓶頸診斷方法;
5、了解數據安全法律法規(如《數據安全法》《個人信息保護法》),具備數據加密、訪問控制、脫敏等安全技術的實施經驗。
6、具備良好的溝通能力與團隊協作精神,能夠與業務部門、開發團隊及運維團隊高效協同,推動復雜項目落地。
7、關注大數據領域前沿技術(如云原生架構、邊緣計算、實時分析等),有技術預研能力并能結合業務場景推動創新實踐。
8、熟悉數據從采集、存儲、處理到應用的全生命周期管理,具備從0到1搭建數據平臺或核心模塊的項目經驗。
9、有保險行業大數據研發經驗者優先考慮。