欧美在线视频,乱熟女高潮一区二区在线 ,女厕精品toilet,免费看成人啪啪

該職位已失效,看看其他機(jī)會(huì)吧

數(shù)據(jù)開(kāi)發(fā) 基于Azure & Databricks

1.5-2.5萬(wàn)
  • 上海浦東新區(qū)
  • 3-5年
  • 大專
  • 全職
  • 招1人

職位描述

數(shù)據(jù)庫(kù)開(kāi)發(fā)AzureDATABRICKS零售
?崗位要求梳理(基于Azure & Databricks的數(shù)據(jù)開(kāi)發(fā)崗)? ?一、崗位職責(zé)(核心工作內(nèi)容)? ?1、ETL開(kāi)發(fā)與優(yōu)化? 基于 ?Azure Data Factory? 和 ?Databricks? 設(shè)計(jì)并實(shí)現(xiàn)高效的數(shù)據(jù)抽取、清洗、轉(zhuǎn)換、加載(ETL/ELT)流程。 使用 ?Delta Lake? 管理數(shù)據(jù)版本和事務(wù),確保數(shù)據(jù)一致性。 ?2、數(shù)倉(cāng)搭建與數(shù)據(jù)建模? 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)分層設(shè)計(jì)(ODS/DWD/DWS/ADS)及維度建模(星型/雪花模型)。 通過(guò) ?Spark SQL? 或 ?T-SQL? 實(shí)現(xiàn)復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)加工與聚合。 ?3、性能調(diào)優(yōu)與數(shù)據(jù)治理? 針對(duì)大規(guī)模數(shù)據(jù)場(chǎng)景優(yōu)化 ?Spark作業(yè)性能?(如分區(qū)策略、緩存機(jī)制、并行度調(diào)整)。 使用 ?Unity Catalog? 管理元數(shù)據(jù),保障數(shù)據(jù)血緣可追溯性。 ?二、硬性要求(必須項(xiàng))? ?1. SQL與數(shù)倉(cāng)能力? 1.1?SQL基本功?: 熟練編寫(xiě)復(fù)雜嵌套查詢、窗口函數(shù)、CTE表達(dá)式,能通過(guò)執(zhí)行計(jì)劃分析性能瓶頸。 掌握索引優(yōu)化、統(tǒng)計(jì)信息更新、查詢重寫(xiě)等調(diào)優(yōu)方法。 1.2?數(shù)倉(cāng)設(shè)計(jì)?: 熟悉 ?Kimball維度建模? 或 ?Inmon范式建模?,具備實(shí)際分層設(shè)計(jì)經(jīng)驗(yàn)(如ODS→DWD→DWS)。 理解數(shù)據(jù)湖倉(cāng)(Lakehouse)架構(gòu),能結(jié)合 ?Delta Lake? 實(shí)現(xiàn)ACID事務(wù)支持。 ?2. Azure & Databricks開(kāi)發(fā)能力? ?2.1Azure生態(tài)工具鏈?: 熟練使用 ?Azure Data Factory? 編排ETL管道,配置觸發(fā)器與數(shù)據(jù)流。 熟悉 ?Azure Databricks? 的集群管理(自動(dòng)縮放、Spot實(shí)例優(yōu)化)、Notebook開(kāi)發(fā)及作業(yè)調(diào)度。 2.2?Databricks核心技術(shù)棧?: 掌握 ?Spark SQL? 和 ?PySpark? 進(jìn)行數(shù)據(jù)轉(zhuǎn)換,熟悉 ?Delta Live Tables? 實(shí)現(xiàn)增量數(shù)據(jù)處理。 具備數(shù)據(jù)湖倉(cāng)一體化實(shí)施經(jīng)驗(yàn)(如 ?Azure Data Lake Storage Gen2 + Databricks? 集成)。 ?三、加分項(xiàng)(優(yōu)先考慮)? 1、?行業(yè)經(jīng)驗(yàn)? 快消/零售行業(yè)背景,熟悉銷售分析、庫(kù)存預(yù)測(cè)、用戶行為分析等典型場(chǎng)景。 2、?技術(shù)擴(kuò)展能力? ?API開(kāi)發(fā)?:能通過(guò) ?Azure Functions? 或 ?Databricks Jobs API? 實(shí)現(xiàn)服務(wù)化數(shù)據(jù)接口。 ?Python能力?:熟悉 ?Pandas?、?PySpark? 進(jìn)行數(shù)據(jù)清洗,或使用 ?MLflow? 輔助模型部署。 ?3、多云經(jīng)驗(yàn)? 有阿里云 ?MaxCompute?、?DataWorks? 或其他云平臺(tái)數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先。
查看全部

工作地點(diǎn)

上海浦東新區(qū)環(huán)林東路270弄4號(hào)

職位發(fā)布者

王女士/人事經(jīng)理

立即溝通
大連檸檬樹(shù)科技有限公司
大連檸檬樹(shù)科技有限公司成立于2018年4月,主要經(jīng)營(yíng)包括:計(jì)算機(jī)技術(shù)軟硬件技術(shù)開(kāi)發(fā)、技術(shù)咨詢、技術(shù)服務(wù)、技術(shù)轉(zhuǎn)讓、技術(shù)維護(hù)、計(jì)算機(jī)系統(tǒng)集成、人才信息咨詢。我們能帶給你:·工作氛圍超nice,能力提升UP UP·績(jī)效獎(jiǎng)金拿到手軟,每一分付出都能看見(jiàn)回報(bào)…我們期待:馳騁多年身經(jīng)百戰(zhàn)的你;初出茅廬充滿干勁的你;尋求轉(zhuǎn)型渴望突破的你;讓千里馬和伯樂(lè),不再千載難逢;更懂你的價(jià)值!
公司主頁(yè)
主站蜘蛛池模板: 阳高县| 南岸区| 昭苏县| 宜君县| 大安市| 苍溪县| 长沙市| 兴城市| 县级市| 微山县| 拉萨市| 莆田市| 南皮县| 濮阳县| 黄龙县| 潞城市| 肇源县| 仙居县| 龙川县| 嘉黎县| 大姚县| 蒲城县| 张掖市| 阿合奇县| 资溪县| 含山县| 海门市| 偃师市| 神农架林区| 庆城县| 镇沅| 武山县| 灌阳县| 上虞市| 岱山县| 广州市| 江山市| 囊谦县| 宿迁市| 扶沟县| 柯坪县|