職位描述
PythonETL數據庫開發Sparkhive
核心職責：
1. 為調度系統構建數據預處理流水線，保障輸入數據質量
2. 開發自動化清洗工具，處理缺失/異常/重復數據，實施標準化
3. 設計數據質量監控規則（完整性/一致性校驗）
4. 集成調度系統（Airflow等），優化ETL流程銜接
5. 編寫技術文檔，支持跨團隊數據需求
6.本科及以上學歷， 3-5年工作經驗
必備技能：
1.熟悉Python（Pandas/NumPy）及SQL
2.數據清洗開發經驗，熟悉正則/字符串處理
3.了解數據治理框架（DAMA/DCMM）
4.掌握ETL工具（PySpark/Great Expectations）
5.熟悉Linux環境與基礎Shell腳本
加分項：
1.調度系統（Airflow）或云平臺（AWS/Azure）經驗
2.數據血緣追蹤/元數據管理實踐
3.大數據生態（Spark/Hive）基礎
工作地點
通州區長鑫集電(北京)存儲技術有限公司
相似職位
- 高級大數據開發工程師1.1-1.6萬
北京 - 朝陽
誠通互聯(北京)科技有限公司 - 數據開發工程師1.5-1.8萬
北京 - 朝陽
中電金信軟件有限公司 - 數據開發1.3-1.5萬
北京 - 海淀
博彥科技承德有限公司 - 大數據開發工程師（PySpark）1.5-2.2萬
北京 - 海淀
同方鼎欣科技股份有限公司 - 大數據開發工程師2-3.5萬
北京 - 朝陽
華能信息技術有限公司 - 軟件工程師1-1.6萬
北京 - 海淀
中超偉業
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節跳動招聘
- 新華網招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業銀行招聘
- 交通銀行招聘
- 建發集團招聘
- 中國移動招聘
- 中國聯通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發布者
隋巖/人事經理
三日內活躍立即溝通
北京源于信科技有限公司北京源于信科技有限公司擁有雄厚的資金基礎、人才濟濟的研發陣容和具有先進創新理念的運營團隊。公司倡導團隊協作，公平公正，強調員工與企業共成長的企業文化，鼓勵創新，致力于為員工營造充分展示自我才智、發揮潛能的舞臺。除了為員工提供極具競爭力的薪酬福利待遇外，公司還建立了一整套與員工的職業生涯發展相結合的合理晉升體系，針對不同特點的員工設置不同的晉升通道，專業技能優秀的員工可以按照技術路線晉升，管理才能卓越的員工可以按照職能體系晉升。員工晉升以績效考核結果為基礎，同時又作為薪酬調整的依據。公司內部空缺崗位優先考慮內部競聘人員，為員工提供廣闊的發展空間。
公司主頁