崗位職責(zé)
1、需求分析、概要/詳細設(shè)計、需求實現(xiàn)，功能開發(fā)；
2、負責(zé)公司大數(shù)據(jù)體系建設(shè)，參與公司內(nèi)部大數(shù)據(jù)平臺、大數(shù)據(jù)應(yīng)用系統(tǒng)的建設(shè)及日常運維；
3、參與基于Doris生態(tài)的統(tǒng)一數(shù)倉的規(guī)劃、架構(gòu)及研發(fā)，大數(shù)據(jù)處理、高性能分布式計算架構(gòu)設(shè)計，參與各類面向內(nèi)外部用戶的數(shù)據(jù)產(chǎn)品研發(fā)，并支持各種業(yè)務(wù)查詢、取數(shù)需求；
4、負責(zé)大規(guī)模分布式批(spark)、流(flink)計算，并保證數(shù)據(jù)質(zhì)量，負責(zé)實時/離線/調(diào)度等數(shù)據(jù)計算平臺的建設(shè)；負責(zé)元數(shù)據(jù)管理平臺、數(shù)據(jù)模型平臺的研發(fā)；
5、構(gòu)建強大的OLAP系統(tǒng)，提供實時、離線的分析數(shù)據(jù)以及數(shù)據(jù)服務(wù)。
任職要求
1、統(tǒng)招本科學(xué)歷及以上，計算機、數(shù)學(xué)相關(guān)專業(yè)；
2、具備扎實計算機編程基礎(chǔ)，包括算法、數(shù)據(jù)結(jié)構(gòu)、計算機網(wǎng)絡(luò)等領(lǐng)域基礎(chǔ)知識；
3、熟悉Oracle、MySQL等數(shù)據(jù)庫，靈活運用SQL實現(xiàn)數(shù)據(jù)ETL加工處理，熟練使用OGG、Informatica ETL配置及開發(fā)；
4、熟悉Hadoop、Hive、HBase、Spark、Flink、Kafka、Kudu、doris等常用組件的一種或幾種，了解其中的架構(gòu)與技術(shù)原理；
5、熟悉Java開發(fā)，具備良好的面向?qū)ο蠛秃瘮?shù)式編程思想，了解常用的設(shè)計模式，掌握springboot、springCloud、mybatis等開發(fā)框架；熟悉Linux操作系統(tǒng)，掌握shell腳本編寫；
6、具備良好的溝通技巧和意識，具備團隊協(xié)作精神，學(xué)習(xí)能力強，善于思考鉆研，認真嚴謹，主動積極，具有高度責(zé)任心及抗壓能力。