數(shù)據開發(fā)工程師
1.2-1.5萬元/月崗位職責:
1、負責數(shù)據倉庫、數(shù)據湖及湖倉一體化架構的規(guī)劃、開發(fā)與運維,搭建面向主題域的數(shù)據模型與分層體系(如ODS/DWD/DWS/ADS);
2、構建并維護離線與實時數(shù)據鏈路,實現(xiàn)數(shù)據的采集、清洗、轉換、整合與加載(ETL/ELT),確保數(shù)據產出的及時性與準確性;
3、對接業(yè)務及分析團隊的數(shù)據訴求,輸出結構規(guī)范、高效可用的數(shù)據集、數(shù)據接口或數(shù)據服務能力;
4、協(xié)同數(shù)據產品經理,參與數(shù)據平臺、報表系統(tǒng)及相關數(shù)據應用的功能研發(fā)與持續(xù)優(yōu)化;
5、關注大數(shù)據技術演進方向,評估并落地契合業(yè)務需求的新工具、新技術(如Flink、dbt、Iceberg等)。
崗位要求:
1、具備4年以上數(shù)據分析相關工作經驗,本科及以上學歷;
2、熟練掌握大數(shù)據開發(fā)技術棧(Spark/Flink/Hadoop/Hive/HBase/Kafka),擁有大規(guī)模數(shù)據ETL處理與實時流式計算經驗,精通SQL與數(shù)倉建模,熟悉Python/Scala/Java編程及自動化腳本開發(fā);
3、有運營商數(shù)據項目實施背景,具備在大數(shù)據平臺上開展數(shù)據開發(fā)的實際經驗,具有中移互聯(lián)網業(yè)務支持經歷者優(yōu)先;
4、具備數(shù)據平臺與架構設計能力,理解分布式系統(tǒng)工作機制,掌握實時與離線數(shù)據架構,擅長計算性能、存儲效率、任務調度優(yōu)化以及高可用與容災方案設計;
5、掌握數(shù)據倉庫理論與設計方法論,能依據業(yè)務場景設計合理的數(shù)據模型與ETL流程;
6、熟悉常用數(shù)據分析方法,可基于業(yè)務需求快速完成數(shù)據加工與可視化開發(fā);
7、具備良好的溝通協(xié)作素養(yǎng),能提供有效的數(shù)據支持與解決方案,并結合用戶反饋、現(xiàn)網運行數(shù)據及業(yè)務變化,對系統(tǒng)能力與處理機制進行敏捷迭代與持續(xù)優(yōu)化。