崗位職責:
1. 負責大數(shù)據(jù)平臺的設計與優(yōu)化,確保數(shù)據(jù)架構與業(yè)務需求相匹配,支持業(yè)務決策和創(chuàng)新。
2. 指導大數(shù)據(jù)項目的技術選型和架構設計,推動技術方案的實施和落地。
3. 管理和維護大數(shù)據(jù)生態(tài)系統(tǒng),包括數(shù)據(jù)存儲、處理、分析工具的集成與優(yōu)化。
4. 與業(yè)務部門緊密合作,識別數(shù)據(jù)價值點,制定數(shù)據(jù)驅(qū)動的業(yè)務策略。
5. 持續(xù)關注大數(shù)據(jù)領域的技術發(fā)展趨勢,推動技術革新和創(chuàng)新應用。
任職要求:
1.本科及以上學歷,計算機相關專業(yè);
2.具有5年以上大數(shù)據(jù)架構經(jīng)驗;
3.熟悉HADOOP大數(shù)據(jù)平臺架構:HDFS/HBase/Hive/MapReduce,熟練學握Mapeduce程序開發(fā),了解實時計算,有使用過Fink,Spark streaming等開源實時流引擎
4.對數(shù)據(jù)倉庫系統(tǒng)架構具有良好的認知,理解數(shù)據(jù)分層、數(shù)據(jù)傾斜、錯峰調(diào)度等理念,并具有相關實戰(zhàn)經(jīng)驗
附加項(加分項):
1、參與過大型開源項目,尤其是在Flink/Spark、Kafka等引擎方面或者云原生開源項目貢獻過社區(qū)代碼;
2、完整參與過企業(yè)級數(shù)倉建設,或有數(shù)倉平臺化的經(jīng)歷;
3、熟悉java、python等開發(fā)語言。