崗位職責:1、負責利用公司自研平臺進行數(shù)據(jù)治理交付、數(shù)據(jù)分析、服務開發(fā)和維護工作;
2、在數(shù)據(jù)治理過程中收集新需求,反饋給產(chǎn)品解決;
3、負責平臺與大數(shù)據(jù)組件對接調試工作;
4、主導項目數(shù)據(jù)治理交付工作,參與數(shù)據(jù)治理架構設計;
5、在平臺框架內進行數(shù)據(jù)治理UDF函數(shù)開發(fā);
6、負責與其他部門之間數(shù)據(jù)對接工作;
7、完成領導交辦的其他任務;
崗位要求:
1、本科學歷,計算機相關專業(yè),3年以內數(shù)據(jù)開發(fā)、分析相關經(jīng)驗,具備獨立開發(fā)能力優(yōu)先;
2、熟悉Java、Python、Shell任何一門語言優(yōu)先;
3、熟悉使用mysql、posgresql、oracle等關系型數(shù)據(jù)庫,熟悉 SQL 語法和 Linux 系統(tǒng)基本操作;
4、熟悉使用ssm框架,熟悉使用springboot以及springcloud全家桶開發(fā);
5、熟練使用Hadoop、Spark、Hive、Flink、Hbase、Kafak、ES、Mpp等大數(shù)據(jù)框架,理解大數(shù)據(jù)組件底層工作原理,具備部署、調優(yōu)和數(shù)據(jù)備份遷移能力;
6、具備利用大數(shù)據(jù)組件的開源功能進行數(shù)據(jù)ETL的能力;
7、熟悉流式數(shù)據(jù)處理框架以及離線數(shù)倉架構;
8、熟悉DAMA數(shù)據(jù)治理理論;
9、了解華為云、騰訊云、阿里云大數(shù)據(jù)組件的使用優(yōu)先;
10、具備良好的業(yè)務理解能力,對數(shù)據(jù)敏感,有較強邏輯分析能力;
11、有極強的自我驅動力、較強的提煉能力/組織能力/溝通能力與情緒管理能力,具備強烈的責任心與良好的溝通能力和團隊合作精神。