職位描述
數(shù)據(jù)架構(gòu)JavaPythonFlinkHadoop數(shù)據(jù)庫開發(fā)
職位概述
具備大數(shù)據(jù)處理經(jīng)驗的Java開發(fā)工程師，專注于Flink流處理框架的開發(fā)和優(yōu)化。
能夠設(shè)計、實現(xiàn)和維護(hù)基于Flink的大數(shù)據(jù)處理管道。
同時熟練掌握Hadoop生態(tài)系統(tǒng)、MySQL數(shù)據(jù)庫和Elasticsearch技術(shù)棧。
具備大數(shù)據(jù)處理經(jīng)驗的Java開發(fā)工程師，專注于Flink流處理框架的開發(fā)和優(yōu)化。
能夠設(shè)計、實現(xiàn)和維護(hù)基于Flink的大數(shù)據(jù)處理管道。
同時熟練掌握Hadoop生態(tài)系統(tǒng)、MySQL數(shù)據(jù)庫和Elasticsearch技術(shù)棧。
核心技能要求
Flink技術(shù)棧
熟練掌握Flink流處理API（DataSet/DataStream）
能夠?qū)崿F(xiàn)復(fù)雜事件處理（CEP）和窗口操作
具備Flink作業(yè)調(diào)優(yōu)和故障排查經(jīng)驗
熟悉Flink與Kafka的集成開發(fā)
Flink技術(shù)棧
熟練掌握Flink流處理API（DataSet/DataStream）
能夠?qū)崿F(xiàn)復(fù)雜事件處理（CEP）和窗口操作
具備Flink作業(yè)調(diào)優(yōu)和故障排查經(jīng)驗
熟悉Flink與Kafka的集成開發(fā)
Java開發(fā)能力
JVM調(diào)優(yōu)經(jīng)驗優(yōu)先
精通集合框架、多線程編程和IO操作
熟悉設(shè)計模式在分布式系統(tǒng)中的應(yīng)用
具備良好的代碼規(guī)范和單元測試習(xí)慣
JVM調(diào)優(yōu)經(jīng)驗優(yōu)先
精通集合框架、多線程編程和IO操作
熟悉設(shè)計模式在分布式系統(tǒng)中的應(yīng)用
具備良好的代碼規(guī)范和單元測試習(xí)慣
Hadoop生態(tài)系統(tǒng)
掌握HDFS文件系統(tǒng)操作
熟悉YARN資源管理機(jī)制
掌握HDFS文件系統(tǒng)操作
熟悉YARN資源管理機(jī)制
數(shù)據(jù)庫技術(shù)
精通MySQL數(shù)據(jù)庫設(shè)計和優(yōu)化
能夠編寫復(fù)雜SQL查詢和存儲過程
了解分庫分表策略和讀寫分離方案
精通MySQL數(shù)據(jù)庫設(shè)計和優(yōu)化
能夠編寫復(fù)雜SQL查詢和存儲過程
了解分庫分表策略和讀寫分離方案
搜索技術(shù)
熟練使用Elasticsearch進(jìn)行全文檢索
能夠設(shè)計搜索索引和優(yōu)化查詢性能
掌握相關(guān)性評分和排序算法
熟練使用Elasticsearch進(jìn)行全文檢索
能夠設(shè)計搜索索引和優(yōu)化查詢性能
掌握相關(guān)性評分和排序算法
崗位職責(zé)
負(fù)責(zé)基于Flink的實時數(shù)據(jù)處理平臺開發(fā)
設(shè)計并實現(xiàn)高吞吐、低延遲的數(shù)據(jù)處理管道
與數(shù)據(jù)倉庫團(tuán)隊合作構(gòu)建ETL流程
優(yōu)化現(xiàn)有數(shù)據(jù)處理作業(yè)的性能和資源利用率
開發(fā)數(shù)據(jù)質(zhì)量監(jiān)控和告警機(jī)制
負(fù)責(zé)基于Flink的實時數(shù)據(jù)處理平臺開發(fā)
設(shè)計并實現(xiàn)高吞吐、低延遲的數(shù)據(jù)處理管道
與數(shù)據(jù)倉庫團(tuán)隊合作構(gòu)建ETL流程
優(yōu)化現(xiàn)有數(shù)據(jù)處理作業(yè)的性能和資源利用率
開發(fā)數(shù)據(jù)質(zhì)量監(jiān)控和告警機(jī)制
加分項
有容器化部署（Docker/K8s）經(jīng)驗
熟悉CI/CD流水線建設(shè)
具備監(jiān)控系統(tǒng)（Prometheus/Grafana）使用經(jīng)驗
有Python開發(fā)能力
項目經(jīng)驗要求
至少參與過1個完整的實時流處理項目
具備性能調(diào)優(yōu)和瓶頸定位的實際案例
有復(fù)雜數(shù)據(jù)處理邏輯的實現(xiàn)經(jīng)驗
有容器化部署（Docker/K8s）經(jīng)驗
熟悉CI/CD流水線建設(shè)
具備監(jiān)控系統(tǒng)（Prometheus/Grafana）使用經(jīng)驗
有Python開發(fā)能力
項目經(jīng)驗要求
至少參與過1個完整的實時流處理項目
具備性能調(diào)優(yōu)和瓶頸定位的實際案例
有復(fù)雜數(shù)據(jù)處理邏輯的實現(xiàn)經(jīng)驗
工作地點
北京朝陽區(qū)建國路91號金地中心A座
相似職位
- 數(shù)據(jù)治理工程師1-2萬
北京 - 朝陽
金航數(shù)碼科技有限責(zé)任公司 - 大數(shù)據(jù)開發(fā)1.5-2.2萬
北京 - 海淀
博彥科技承德有限公司 - 數(shù)據(jù)處理工程師1-1.3萬
北京 - 通州
河北起聘信息科技有限責(zé)任公司 - 中級數(shù)據(jù)開發(fā)工程師1.6-2萬
北京 - 豐臺
盛和(北京)資訊科技有限公司 - 高級大數(shù)據(jù)開發(fā)工程師1.6-2萬
北京 - 海淀
中電金信軟件有限公司 - 大數(shù)據(jù)開發(fā)實習(xí)生180-220元/天
北京 - 海淀
華廷集團(tuán)有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
孫女士/人事行政主管
今日活躍立即溝通
美通社美通社（PR Newswire）1954年開創(chuàng)了企業(yè)新聞稿發(fā)布行業(yè)的先河，于2016年成為Cision旗下公司。在過去六十多年里，美通社不斷拓展，逐步打造了遍及全球一百七十多個國家、覆蓋著數(shù)十萬家各類傳統(tǒng)和新興的媒體的信息發(fā)布網(wǎng)絡(luò)?，F(xiàn)在，美通社服務(wù)著全球七萬多家企業(yè)和機(jī)構(gòu)，每天以四十多種語言，幫助客戶把他們的最新文字，圖片和視頻資訊發(fā)布給世界各地的目標(biāo)受眾，幫助他們和媒體，業(yè)界，投資者，有影響力人群以及普通公眾溝通，為他們提高知名度，打造品牌、推動銷售，吸引投資。此外，美通社還提供全球媒體數(shù)據(jù)，監(jiān)測和分析服務(wù)，為客戶的傳播策略制定，效果評估，競爭分析，公關(guān)危機(jī)等日常傳播工作提供數(shù)據(jù)，技術(shù)等專業(yè)支持。
公司主頁