雇員點評標簽
職位描述
FlinkPYSPARK大數(shù)據(jù)遷移華為云大數(shù)據(jù)Java
以下技術(shù)棧都在棧：Spark、Nifi、CDM、flink
主要職責：
1、負責大數(shù)據(jù)搬遷和系統(tǒng)集成。
2、利用華為云數(shù)據(jù)遷移工具搬遷數(shù)據(jù)倉庫并進行數(shù)據(jù)核對。
3、處理海量數(shù)據(jù)，進行實時和批處理分析，支持業(yè)務需求。
4、負責Nifi作業(yè)的遷移和調(diào)測。
5、具備良好的SQL優(yōu)化能力；能夠完成數(shù)據(jù)比對工作，具備數(shù)據(jù)追溯并定位出問題能力。
6、參與方案調(diào)研，能夠做詳細的方案設(shè)計，負責分配、管理開發(fā)任務，技術(shù)攻關(guān)，代碼評審等，需要有較豐富的大數(shù)據(jù)項目經(jīng)驗。
任職資格：
1、8年大數(shù)據(jù)開發(fā)經(jīng)驗，熟悉大數(shù)據(jù)相關(guān)技術(shù)棧。
2、精通kafka、fink、spark、hive等大數(shù)據(jù)組件，能夠獨立完成fink作業(yè)、spark作業(yè)、數(shù)據(jù)質(zhì)量作業(yè)的遷移/開發(fā)，能夠端到端的進行調(diào)測。能夠配合業(yè)務用戶完成集成測試。
3、精通apache nifi開源組件，能夠獨立完成Nifi作業(yè)的遷移和調(diào)測。
4、精通掌握 Java、SQL、Scala 或 Python 等語言。
5、參與方案調(diào)研，能夠做詳細的方案設(shè)計，負責分配、管理開發(fā)任務，技術(shù)攻關(guān)，代碼評審等，需要有較豐富的大數(shù)據(jù)項目經(jīng)驗
6、具備良好的SQL優(yōu)化能力，熟悉關(guān)系型數(shù)據(jù)庫和NoSQL數(shù)據(jù)庫。
7、具備大數(shù)據(jù)平臺性能優(yōu)化的經(jīng)驗。
8、優(yōu)秀的溝通能力和書面表達能力。
9、熟悉華為大數(shù)據(jù)平臺MRS、DataArt studio、Data Lake、Gaussdb(DWS)優(yōu)先。
10、統(tǒng)招大專以上學歷。
11、熟悉華為大數(shù)據(jù)平臺MRS、DataArt studio、Data Lake、Gaussdb(DWS)優(yōu)先、具備大數(shù)據(jù)遷移工作經(jīng)驗優(yōu)先。。
主要職責：
1、負責大數(shù)據(jù)搬遷和系統(tǒng)集成。
2、利用華為云數(shù)據(jù)遷移工具搬遷數(shù)據(jù)倉庫并進行數(shù)據(jù)核對。
3、處理海量數(shù)據(jù)，進行實時和批處理分析，支持業(yè)務需求。
4、負責Nifi作業(yè)的遷移和調(diào)測。
5、具備良好的SQL優(yōu)化能力；能夠完成數(shù)據(jù)比對工作，具備數(shù)據(jù)追溯并定位出問題能力。
6、參與方案調(diào)研，能夠做詳細的方案設(shè)計，負責分配、管理開發(fā)任務，技術(shù)攻關(guān)，代碼評審等，需要有較豐富的大數(shù)據(jù)項目經(jīng)驗。
任職資格：
1、8年大數(shù)據(jù)開發(fā)經(jīng)驗，熟悉大數(shù)據(jù)相關(guān)技術(shù)棧。
2、精通kafka、fink、spark、hive等大數(shù)據(jù)組件，能夠獨立完成fink作業(yè)、spark作業(yè)、數(shù)據(jù)質(zhì)量作業(yè)的遷移/開發(fā)，能夠端到端的進行調(diào)測。能夠配合業(yè)務用戶完成集成測試。
3、精通apache nifi開源組件，能夠獨立完成Nifi作業(yè)的遷移和調(diào)測。
4、精通掌握 Java、SQL、Scala 或 Python 等語言。
5、參與方案調(diào)研，能夠做詳細的方案設(shè)計，負責分配、管理開發(fā)任務，技術(shù)攻關(guān)，代碼評審等，需要有較豐富的大數(shù)據(jù)項目經(jīng)驗
6、具備良好的SQL優(yōu)化能力，熟悉關(guān)系型數(shù)據(jù)庫和NoSQL數(shù)據(jù)庫。
7、具備大數(shù)據(jù)平臺性能優(yōu)化的經(jīng)驗。
8、優(yōu)秀的溝通能力和書面表達能力。
9、熟悉華為大數(shù)據(jù)平臺MRS、DataArt studio、Data Lake、Gaussdb(DWS)優(yōu)先。
10、統(tǒng)招大專以上學歷。
11、熟悉華為大數(shù)據(jù)平臺MRS、DataArt studio、Data Lake、Gaussdb(DWS)優(yōu)先、具備大數(shù)據(jù)遷移工作經(jīng)驗優(yōu)先。。
工作地點
深圳龍崗區(qū)平湖智造園平湖智造園
相似職位
- 大數(shù)據(jù)開發(fā)工程師3-3.5萬
深圳 - 南山
合肥凱捷技術(shù)有限公司 - 大數(shù)據(jù)開發(fā)工程師1.6-2.2萬
深圳 - 龍崗
軟通動力信息技術(shù)(集團)股份有限公司 深圳 - 龍崗
軟通動力信息技術(shù)(集團)股份有限公司- 數(shù)據(jù)開發(fā)1-1.5萬
深圳 - 龍崗
軟通動力信息技術(shù)(集團)股份有限公司 - 數(shù)據(jù)開發(fā)工程師1.2-1.8萬
深圳 - 龍崗
深圳市龍崗區(qū)智城大數(shù)據(jù)有限公司 深圳 - 龍崗
軟通動力信息技術(shù)(集團)股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
陶女士/招聘顧問
當前在線立即溝通
軟通動力信息技術(shù)(集團)股份有限公司軟通動力信息技術(shù)（集團）股份有限公司（以下簡稱“軟通動力”）是中國領(lǐng)先的全棧智能化產(chǎn)品與服務提供商，2005年成立于北京，始終堅持創(chuàng)新，致力于成為一家具有全球影響力的科技企業(yè)。公司提供軟件與數(shù)字技術(shù)服務、計算產(chǎn)品與智能電子、數(shù)字能源與智算服務以及國際化服務，員工90000人。目前，公司在10余個重要行業(yè)服務超過2600家國內(nèi)外客戶，其中超過230家客戶為世界500強或中國500強企業(yè)。公司位列2024年中國 IT服務市場第一，入選2025年財富中國 500強企業(yè)，位列429。軟通動力擁有軟通咨詢、軟通金科、軟通國際、軟通工業(yè)互聯(lián)、軟通華方、機械革命、恒悅等業(yè)務子品牌，北京、江蘇兩大智能制造基地，布局北美、日韓、亞太、中東四大區(qū)域市場，在全球60余個城市構(gòu)建完善的全球業(yè)務網(wǎng)絡(luò)。公司錨定AI前沿，以人工智能工程能力為基礎(chǔ)，科學智能（AI for Science）為引領(lǐng)，布局智能制造、ICT軟硬基礎(chǔ)能力和具身智能等領(lǐng)域，打造新產(chǎn)業(yè)鏈閉環(huán)，為客戶提供場景智能（AIAgent）、終端智能（AI Terminal）、計算智能（AIInfra）的全棧智能服務。軟通動力設(shè)立30個能力中心，擁有1個國家級工程實驗室，6個省市政府認定的工程、技術(shù)實驗室及研發(fā)中心，1個博士后科研工作站，依托全球軟硬生態(tài)協(xié)同創(chuàng)新體系，不斷探索前沿技術(shù)應用潛力。公司旗下教育品牌軟通教育，擁有一家全日制本科學院——鄭州西亞斯學院數(shù)字技術(shù)產(chǎn)業(yè)學院；全國合作院校700多所，設(shè)有70多個校企聯(lián)合人才培養(yǎng)基地，通過校企合作、協(xié)同育人，為社會培養(yǎng)高素質(zhì)應用型人才。軟通動力先后榮獲“2024新經(jīng)濟企業(yè)500強”、“2024年中國軟件和信息技術(shù)服務競爭力百強企業(yè)”、“中國軟件產(chǎn)業(yè)40年貢獻企業(yè)”、“2024年信創(chuàng)領(lǐng)軍企業(yè)”、“省級科技進步獎”，入選滬深300、中證A500、創(chuàng)業(yè)板50等核心指數(shù)，深交所信息披露最高“A”級評價，連續(xù)三年獲得Wind ESG評級AA級等權(quán)威認可；擁有專利380+項、全球軟件工程領(lǐng)域最高級別CMMI V2.0成熟度5級評估認證、信息系統(tǒng)建設(shè)和服務能力最高等級——杰出級（CS5）、信息技術(shù)服務標準（ITSS）運維能力成熟度一級認證等專業(yè)資質(zhì)，支撐公司更優(yōu)質(zhì)的服務體系。
公司主頁