崗位職責(zé)：
1、進(jìn)行數(shù)據(jù)模型邏輯開(kāi)發(fā)工作；
2、負(fù)責(zé)業(yè)務(wù)模型設(shè)計(jì)工作;
3、進(jìn)行場(chǎng)景服務(wù)開(kāi)發(fā)工作；
4、協(xié)助進(jìn)行接口聯(lián)調(diào)工作；
5、熟悉數(shù)據(jù)加工實(shí)時(shí)技術(shù)棧優(yōu)先;
【崗位要求】
1、掌握大數(shù)據(jù)存儲(chǔ)組件（如Hive/HBase/HDFS），熟悉數(shù)倉(cāng)分層設(shè)計(jì)（ODS→DWD→DWS→ADS）與維度建模（星型/雪花模型）;
2、具備完整數(shù)據(jù)鏈路開(kāi)發(fā)經(jīng)驗(yàn)，覆蓋數(shù)據(jù)采集（Flume/Kafka Connect）、清洗（Spark SQL/Flink SQL）、轉(zhuǎn)換（UDF/UDAF開(kāi)發(fā)）、加載（批量/實(shí)時(shí)）全流程；
3、熟練使用Spark（Core/SQL/Streaming）或Flink（DataStream/Table API）進(jìn)行離線/實(shí)時(shí)數(shù)據(jù)處理，熟悉窗口函數(shù)、狀態(tài)管理、Checkpoint容錯(cuò)機(jī)制；
4、掌握數(shù)據(jù)質(zhì)量管控（如校驗(yàn)規(guī)則設(shè)計(jì)、臟數(shù)據(jù)處理）、元數(shù)據(jù)管理（如Atlas）及數(shù)據(jù)血緣追蹤