国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 12月29日

大數(shù)據(jù)平臺開發(fā)工程師

1.4-2萬
  • 聊城東昌府區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

HadoopFlinkSparkSql數(shù)據(jù)架構(gòu)數(shù)據(jù)倉庫數(shù)據(jù)庫開發(fā)
一、崗位招聘要求
1. 基礎(chǔ)條件:本科及以上學(xué)歷,軟件工程、數(shù)據(jù)科學(xué)、計算科學(xué)、信息管理等相關(guān)專業(yè);具備6年以上軟件開發(fā)經(jīng)驗,且擁有3年及以上大數(shù)據(jù)項目實戰(zhàn)開發(fā)經(jīng)驗,需具備大型數(shù)據(jù)平臺從0到1搭建的完整項目經(jīng)驗。
2. 核心架構(gòu)能力:熟練掌握基于Hadoop/Spark/Flink等生態(tài)的企業(yè)級大數(shù)據(jù)平臺架構(gòu)設(shè)計與開發(fā),能獨立負(fù)責(zé)數(shù)據(jù)全鏈路(采集、存儲、處理、分析)的方案設(shè)計與落地實施。
3. 數(shù)據(jù)倉庫能力:精通企業(yè)級離線與實時數(shù)據(jù)倉庫的設(shè)計規(guī)范、分層建模(如星型/雪花模型)及研發(fā)全流程,能主導(dǎo)數(shù)據(jù)倉庫的搭建、優(yōu)化與迭代工作。
4. 技術(shù)工具能力:熟練使用SQL(含HiveQL/Spark SQL等大數(shù)據(jù)場景SQL)及主流NoSQL數(shù)據(jù)庫(如HBase、MongoDB);具備扎實的數(shù)據(jù)建模能力;掌握容器化部署(Docker/Kubernetes)或BI可視化工具(Tableau、Quick BI等)的使用。
二、崗位工作內(nèi)容
1. 平臺與架構(gòu)搭建:主導(dǎo)或核心參與企業(yè)級大數(shù)據(jù)平臺、數(shù)據(jù)倉庫及數(shù)據(jù)湖的架構(gòu)設(shè)計與開發(fā)工作,負(fù)責(zé)Hadoop、Spark、Flink等核心組件的選型、部署配置與技術(shù)落地。
2. 數(shù)據(jù)處理全流程管控:設(shè)計并搭建高可用的數(shù)據(jù)采集鏈路,基于Kafka、Flume等組件實現(xiàn)多源異構(gòu)數(shù)據(jù)(日志、業(yè)務(wù)數(shù)據(jù)庫、第三方接口等)的高效采集;開發(fā)、維護(hù)核心ETL任務(wù),完成數(shù)據(jù)清洗、轉(zhuǎn)換、加載全流程;構(gòu)建穩(wěn)定的實時/離線數(shù)據(jù)處理流水線,支撐業(yè)務(wù)報表生成、AI建模訓(xùn)練等核心業(yè)務(wù)場景,保障數(shù)據(jù)鏈路的穩(wěn)定與高效。
3. 數(shù)據(jù)建模與治理:主導(dǎo)數(shù)據(jù)倉庫分層架構(gòu)(ODS/DWD/DWS/ADS)及數(shù)據(jù)模型的設(shè)計與優(yōu)化;推動企業(yè)數(shù)據(jù)治理體系建設(shè),覆蓋元數(shù)據(jù)管理、數(shù)據(jù)血緣追蹤、數(shù)據(jù)質(zhì)量監(jiān)控與告警等核心模塊,確保數(shù)據(jù)的準(zhǔn)確性、一致性、完整性與可追溯性。
4. 系統(tǒng)優(yōu)化與問題排查:持續(xù)監(jiān)控大數(shù)據(jù)平臺性能及數(shù)據(jù)處理任務(wù)運行狀態(tài),針對SQL查詢、Spark/Flink作業(yè)進(jìn)行性能調(diào)優(yōu),解決數(shù)據(jù)傾斜、任務(wù)延遲、資源瓶頸等核心問題;快速響應(yīng)并處理線上故障(如Executor丟失、Kafka分區(qū)異常、數(shù)據(jù)質(zhì)量問題等),保障系統(tǒng)7×24小時穩(wěn)定運行。

工作地點

東昌府區(qū)聊城市開發(fā)區(qū)

職位發(fā)布者

蘇傳林/招聘經(jīng)理

昨日活躍
立即溝通
公司Logo山東煜鑫工程安裝有限公司
公司主頁