職位描述
1.負責網絡安全業務系統復雜分布式計算規則業務、實時數倉和離線數倉的建設
2.架構設計、平臺擴容方案設計等
3.實時流分析引擎設計、平臺性能優化等
任職要求:
1.掌握java/scala,了解jvm的調優方式,能夠快速定位問題
2.掌握Flink、Spark等其中一種實時流處理框架,有五年以上開發、性能調優經驗
3.熟悉Hadoop生態體系下相關技術,如hdfs、hive、hbase等
4.熟練使用ClickHouse數據庫、并能夠性能優化和部署, 掌握ElasticSearch,了解HDP或者CDH大數據套件優先。
5.有大數據平臺架構設計部署經驗,有k8s、docker使用優先
6.具有網絡安全行業大數據流量分析經驗優先
7.有網絡安全行業數據挖掘算子設計經驗優先
8.有相關工作經驗和行業從業經驗