国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 11月26日

高級(jí)ETL工程師

1-1.6萬
  • 北京豐臺(tái)區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

DataStageDataXOracleMySQLPostgreSQLDB2PythonJavaShell計(jì)算機(jī)軟件保險(xiǎn)
崗位職責(zé):
1、技術(shù)架構(gòu)與規(guī)劃
(1)負(fù)責(zé)企業(yè)級(jí)ETL體系架構(gòu)設(shè)計(jì)和優(yōu)化,制定ETL開發(fā)規(guī)范和標(biāo)準(zhǔn)
(2)主導(dǎo)大型數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目的技術(shù)方案設(shè)計(jì)和實(shí)施路線規(guī)劃
(3)基于企業(yè)級(jí)框架如:PDFC框架,評(píng)估和引入新技術(shù)、新工具,推動(dòng)ETL技術(shù)棧的升級(jí)和演進(jìn)
2、復(fù)雜數(shù)據(jù)處理
(1)解決超大規(guī)模數(shù)據(jù)(TB級(jí)以上)處理的技術(shù)挑戰(zhàn)和性能瓶頸
(2)設(shè)計(jì)和實(shí)現(xiàn)復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)轉(zhuǎn)換和處理流程
(3)處理跨系統(tǒng)、跨平臺(tái)的數(shù)據(jù)集成和同步問題
3、性能優(yōu)化與監(jiān)控
(1)建立和完善ETL作業(yè)性能監(jiān)控體系,制定性能優(yōu)化策略
(2)主導(dǎo)關(guān)鍵ETL流程的性能調(diào)優(yōu),確保數(shù)據(jù)處理效率
(3)構(gòu)建數(shù)據(jù)質(zhì)量監(jiān)控框架,保障數(shù)據(jù)的準(zhǔn)確性和一致性
4、團(tuán)隊(duì)與技術(shù)領(lǐng)導(dǎo)
(1)指導(dǎo)初、中級(jí)工程師解決技術(shù)難題,進(jìn)行代碼review和技術(shù)培訓(xùn)
(2)負(fù)責(zé)技術(shù)難點(diǎn)攻關(guān)和系統(tǒng)故障的應(yīng)急處理
(3)培養(yǎng)團(tuán)隊(duì)技術(shù)能力,傳承最佳實(shí)踐和經(jīng)驗(yàn)
技術(shù)要求:
硬技能要求:
(1)5年以上ETL開發(fā)經(jīng)驗(yàn),3年以上大型數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)湖/數(shù)據(jù)中臺(tái)的項(xiàng)目架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)
(2)精通至少兩種主流關(guān)系型數(shù)據(jù)庫(kù)(Oracle、MySQL、Postgresql、DB2等)
(3)深入掌握多種ETL工具(DataX、DataStage、Kettle等)的高級(jí)特性
(4)具備數(shù)據(jù)庫(kù)高級(jí)優(yōu)化能力,精通執(zhí)行計(jì)劃分析、索引優(yōu)化、分區(qū)技術(shù)等
(5)熟練掌握調(diào)度工具,如Linux定時(shí)調(diào)度、海豚調(diào)度器、Airflow、Moia等
(5)熟悉或了解數(shù)據(jù)治理體系,有實(shí)際的數(shù)據(jù)質(zhì)量管理、元數(shù)據(jù)管理經(jīng)驗(yàn)
(6)掌握基礎(chǔ)Python/Java/Shell開發(fā)能力,有進(jìn)行二次開發(fā)和工具定制經(jīng)驗(yàn)優(yōu)先
(7)掌握BI工具的使用,如SmartBI、帆軟、觀遠(yuǎn)
架構(gòu)能力:
(1)具備大型分布式系統(tǒng)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)
(2)熟悉傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)與大數(shù)據(jù)平臺(tái)的融合架構(gòu)
(3)有批次/實(shí)時(shí)數(shù)據(jù)管道設(shè)計(jì)和實(shí)施經(jīng)驗(yàn)
(4)掌握高可用、容災(zāi)備份等技術(shù)方案
優(yōu)先條件:
(1)有金融行業(yè)尤其是保險(xiǎn)行業(yè)經(jīng)驗(yàn)
(2)持有相關(guān)技術(shù)認(rèn)證(OCM、CDMP等)
(3)有技術(shù)團(tuán)隊(duì)管理經(jīng)驗(yàn)或項(xiàng)目負(fù)責(zé)人經(jīng)驗(yàn)
(4)具備良好的技術(shù)文檔編寫和方案宣講能力
(5)大數(shù)據(jù)組件使用經(jīng)驗(yàn),如Hadoop體系相關(guān)組件

工作地點(diǎn)

北京豐臺(tái)區(qū)六里橋人保后援中心

職位發(fā)布者

劉女士/人事

昨日活躍
立即溝通
公司Logo北京久勝云數(shù)科技有限公司
北京久勝信誠(chéng)科技發(fā)展有限公司位于北京市朝陽區(qū),成立于2005年,是一家從事于lT技術(shù)綜合應(yīng)用服務(wù)的企業(yè),公司匯聚了一批有理想有經(jīng)驗(yàn)的IT技術(shù)工程師,致力于商業(yè)智能(Business Intelligence)和數(shù)據(jù)管理在中國(guó)的推廣,技術(shù)團(tuán)隊(duì)?wèi){借在數(shù)據(jù)治理創(chuàng)新層面的突出表現(xiàn)受到客戶的高度評(píng)價(jià)。久勝信誠(chéng)以大數(shù)據(jù)技術(shù)、數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)挖掘?yàn)榛A(chǔ),專注提供商業(yè)智能、數(shù)據(jù)治理、大數(shù)據(jù)戰(zhàn)略咨詢及應(yīng)用、以及ERP建設(shè)等技術(shù)咨詢服務(wù)。秉承“專業(yè)、優(yōu)質(zhì)、誠(chéng)信、共贏”的理念,擁有一支服務(wù)于政府及大型企業(yè)的專業(yè)技術(shù)團(tuán)隊(duì)。我們的數(shù)據(jù)治理團(tuán)隊(duì)骨干成員擁有10年以上國(guó)有大行數(shù)據(jù)管理及治理經(jīng)驗(yàn),有洞察數(shù)據(jù)領(lǐng)域最前沿發(fā)展趨勢(shì)能力。我們的保險(xiǎn)行業(yè)技術(shù)團(tuán)隊(duì)擁有10年以上行業(yè)經(jīng)驗(yàn),曾服務(wù)于多家主流大型保險(xiǎn)公司,如PICC、中國(guó)人壽、新華、泰康、安邦、華泰等等。我們的合作伙伴有甲骨文、SAP、IBM、EMC、聯(lián)想、浪潮、華為、華三等世界著名的IT公司,我們的客戶主要有:政府、中信集團(tuán)、理工大學(xué)、北京大學(xué)、國(guó)家電網(wǎng)、南方電網(wǎng)、PICC、中國(guó)人壽以及多家保險(xiǎn)經(jīng)紀(jì)公司和城市農(nóng)商銀行。久勝信誠(chéng)的企業(yè)愿景是:成為一流的IT技術(shù)應(yīng)用服務(wù)商。我們高度重視技術(shù)支持和售后服務(wù),以我們更加專業(yè)的服務(wù)為客戶提供價(jià)值最大化的數(shù)據(jù)決策,做到讓客戶更方便、更安心、更滿意;為員工打造最佳的能力提升空間和職業(yè)發(fā)展平臺(tái),實(shí)現(xiàn)客戶、員工和企業(yè)共贏。
公司主頁