崗位職責(zé):
1.核心功能模塊的開(kāi)發(fā)和維護(hù):包括統(tǒng)一數(shù)據(jù)集成(實(shí)時(shí)、離線)、數(shù)據(jù)研發(fā)(實(shí)時(shí)、離線)、統(tǒng)一作業(yè)調(diào)度(調(diào)度引擎、調(diào)度編排)、數(shù)據(jù)分析(adhoc、batch、混合引擎)、數(shù)據(jù)地圖(元數(shù)據(jù)采集、全鏈路血緣)、數(shù)據(jù)治理(數(shù)據(jù)質(zhì)量評(píng)測(cè)體系,質(zhì)量指標(biāo)、監(jiān)控告警)等。
2.數(shù)據(jù)架構(gòu)設(shè)計(jì):參與研發(fā)過(guò)程中的數(shù)據(jù)架構(gòu)及存儲(chǔ)方案設(shè)計(jì)評(píng)審,協(xié)同規(guī)劃企業(yè)業(yè)務(wù)數(shù)據(jù)體系架構(gòu)設(shè)計(jì),數(shù)據(jù)領(lǐng)域模型建設(shè)。
3.數(shù)據(jù)標(biāo)準(zhǔn)制定:制定數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型、數(shù)據(jù)安全等大數(shù)據(jù)領(lǐng)域相關(guān)標(biāo)準(zhǔn),并推動(dòng)落地。
任職要求:
1.本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè),10年以上數(shù)據(jù)研發(fā)領(lǐng)域經(jīng)驗(yàn)。
2.精通數(shù)據(jù)平臺(tái)和倉(cāng)庫(kù)相關(guān)理論,有企業(yè)級(jí)的數(shù)據(jù)倉(cāng)庫(kù)建設(shè)經(jīng)驗(yàn),有數(shù)據(jù)治理相關(guān)經(jīng)驗(yàn)。
3.對(duì)批流一體、數(shù)據(jù)湖、數(shù)據(jù)治理等業(yè)內(nèi)前沿方向有深刻理解,有實(shí)際團(tuán)隊(duì)落地經(jīng)驗(yàn)者優(yōu)先。
4.熟悉大數(shù)據(jù)相關(guān)組建運(yùn)維優(yōu)化,如Doris、iceberg、HBase、ES、Spark、Kafka、Flink等,熟練掌握其中若干項(xiàng)。
5.良好的業(yè)務(wù)理解力,能從業(yè)務(wù)視角看問(wèn)題,從技術(shù)角度解決業(yè)務(wù)問(wèn)題。