一、職位描述
1、數(shù)據(jù)架構(gòu)設(shè)計與優(yōu)化?主導(dǎo)大數(shù)據(jù)平臺的整體架構(gòu)設(shè)計,包括數(shù)據(jù)存儲、計算資源分配及性能優(yōu)化方案,確保系統(tǒng)可擴展性和高效性;評估并引入新技術(shù),提升數(shù)據(jù)處理效率;
2、核心數(shù)據(jù)管道開發(fā)?開發(fā)高吞吐量的數(shù)據(jù)采集與處理管道,支持多源異構(gòu)數(shù)據(jù)整合,并設(shè)計容錯機制保障數(shù)據(jù)完整性;使用公司大數(shù)據(jù)平臺構(gòu)建自動化調(diào)度系統(tǒng),實現(xiàn)任務(wù)依賴管理、優(yōu)先級控制及異?;謴?fù)流程;
3、業(yè)務(wù)賦能與模型落地?:與數(shù)據(jù)模型師協(xié)作,將數(shù)據(jù)倉庫模型轉(zhuǎn)化為可執(zhí)行的開發(fā)方案,優(yōu)化查詢性能以支持分析需求;為數(shù)據(jù)分析師提供高效的數(shù)據(jù)接口,加速業(yè)務(wù)洞察落地;
4、編寫架構(gòu)設(shè)計文檔、接口規(guī)范及性能優(yōu)化報告,推動技術(shù)方案標(biāo)準(zhǔn)化;
5、探索前沿技術(shù),推動數(shù)據(jù)平臺能力升級。
二、任職要求
1、35歲以下,本科及以上學(xué)歷,計算機/軟件工程等相關(guān)專業(yè),3年以上大數(shù)據(jù)工作經(jīng)驗;
2、編程語言?:精通Java/Scala/Python/Sql,具備分布式系統(tǒng)開發(fā)經(jīng)驗;
3.大數(shù)據(jù)生態(tài)?:熟練使用Hadoop/Spark/Flink等框架,熟悉Hive、Doris查詢優(yōu)化,了解Kafka、Redis等消息與緩存中間件;
4.開發(fā)工具?:掌握Git、Maven/Gradle,有Docker/Kubernetes經(jīng)驗者優(yōu)先;
5.經(jīng)驗要求?3年以上大數(shù)據(jù)開發(fā)經(jīng)驗,主導(dǎo)過復(fù)雜數(shù)據(jù)管道項目,熟悉全流程開發(fā);有交通、醫(yī)療、工業(yè)或物聯(lián)網(wǎng)行業(yè)背景者優(yōu)先。
職位福利:帶薪年假、補充醫(yī)療保險、節(jié)日福利、定期體檢、交通補助、餐補、通訊補助、員工食堂