国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 今天

爬蟲(chóng)工程師 (MJ001158)

1.5-2.2萬(wàn)
  • 南昌南昌縣
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)采集爬蟲(chóng)開(kāi)發(fā)分布式爬蟲(chóng)
崗位職責(zé) 1. 負(fù)責(zé)設(shè)計(jì)、開(kāi)發(fā)和維護(hù)高效、穩(wěn)定的爬蟲(chóng)系統(tǒng),滿足公司各類(lèi)數(shù)據(jù)采集需求,涵蓋市場(chǎng)數(shù)據(jù)、行業(yè)動(dòng)態(tài)、競(jìng)品信息等; 2. 綜合運(yùn)用Python、Java、Node.js等編程語(yǔ)言進(jìn)行爬蟲(chóng)程序開(kāi)發(fā),根據(jù)不同網(wǎng)站的結(jié)構(gòu)和反爬策略,選擇合適的技術(shù)方案,確保代碼具備良好的質(zhì)量、性能和可擴(kuò)展性; 3. 深入分析網(wǎng)頁(yè)結(jié)構(gòu),熟練運(yùn)用HTML、CSS、JavaScript知識(shí),精準(zhǔn)解析和提取目標(biāo)數(shù)據(jù),處理復(fù)雜的動(dòng)態(tài)網(wǎng)頁(yè)內(nèi)容,如AJAX加載、JavaScript渲染數(shù)據(jù)等; 4. 與數(shù)據(jù)分析師、算法工程師等團(tuán)隊(duì)緊密協(xié)作,理解數(shù)據(jù)需求,提供精準(zhǔn)、完整的數(shù)據(jù)抓取解決方案,保障數(shù)據(jù)的準(zhǔn)確性和及時(shí)性,為公司的業(yè)務(wù)決策和算法訓(xùn)練提供有力支持; 5. 實(shí)時(shí)監(jiān)控爬蟲(chóng)運(yùn)行狀態(tài),及時(shí)發(fā)現(xiàn)并解決性能瓶頸、數(shù)據(jù)丟失、反爬限制等問(wèn)題,通過(guò)優(yōu)化代碼、調(diào)整抓取策略等方式,持續(xù)提升爬蟲(chóng)的抓取效率和穩(wěn)定性; 6. 研究并應(yīng)對(duì)各類(lèi)反爬機(jī)制,如IP封鎖、驗(yàn)證碼識(shí)別、用戶行為檢測(cè)等,運(yùn)用代理池、驗(yàn)證碼識(shí)別技術(shù)、模擬用戶行為等手段,實(shí)現(xiàn)有效的反反爬策略,確保爬蟲(chóng)能夠穩(wěn)定運(yùn)行; 7. 定期維護(hù)和更新現(xiàn)有爬蟲(chóng)系統(tǒng),根據(jù)網(wǎng)站結(jié)構(gòu)變化和業(yè)務(wù)需求調(diào)整,及時(shí)優(yōu)化抓取邏輯,保證數(shù)據(jù)的持續(xù)獲取和有效性; 8. 編寫(xiě)詳細(xì)、規(guī)范的技術(shù)文檔,記錄爬蟲(chóng)系統(tǒng)的設(shè)計(jì)架構(gòu)、開(kāi)發(fā)流程、關(guān)鍵代碼邏輯以及維護(hù)要點(diǎn),方便團(tuán)隊(duì)成員進(jìn)行技術(shù)交流和后續(xù)維護(hù)。 任職要求 1、計(jì)算機(jī)科學(xué)、軟件工程、數(shù)學(xué)等相關(guān)專(zhuān)業(yè)本科及以上學(xué)歷; 2、4年以上爬蟲(chóng)開(kāi)發(fā)工作經(jīng)驗(yàn),具備多個(gè)完整爬蟲(chóng)項(xiàng)目的開(kāi)發(fā)和維護(hù)經(jīng)驗(yàn); 3、有過(guò)處理反爬策略的成功案例,如繞過(guò)驗(yàn)證碼、突破IP封鎖等,能夠分享有效的反反爬經(jīng)驗(yàn)和技術(shù)手段; 4、熟練掌握Python、Java、Node.js中至少兩種編程語(yǔ)言;精通HTML、CSS、JavaScript;熟悉HTTP/HTTPS協(xié)議;擁有數(shù)據(jù)庫(kù)使用經(jīng)驗(yàn),熟練掌握SQL(如MySQL、Oracle)和NoSQL(如MongoDB、Redis)數(shù)據(jù)庫(kù)的基本操作,能夠設(shè)計(jì)合理的數(shù)據(jù)存儲(chǔ)結(jié)構(gòu);熟悉分布式爬蟲(chóng)技術(shù),如Scrapy - Redis等框架,能夠構(gòu)建大規(guī)模、高性能的分布式爬蟲(chóng)系統(tǒng),提升數(shù)據(jù)采集效率; 5、具備較強(qiáng)的問(wèn)題分析和解決能力,能夠快速定位和解決爬蟲(chóng)開(kāi)發(fā)過(guò)程中遇到的各種技術(shù)難題,如數(shù)據(jù)抓取異常、性能優(yōu)化等,善于通過(guò)調(diào)試工具和技術(shù)手段進(jìn)行問(wèn)題排查; 6、對(duì)新技術(shù)保持敏銳的學(xué)習(xí)熱情和好奇心,能夠快速掌握并應(yīng)用新的爬蟲(chóng)技術(shù)和工具,適應(yīng)不斷變化的技術(shù)環(huán)境和業(yè)務(wù)需求。

工作地點(diǎn)

南昌南昌縣江西濟(jì)民可信集團(tuán)有限公司(總部)

職位發(fā)布者

蔡先生/招聘配置經(jīng)理

三日內(nèi)活躍
立即溝通
公司Logo濟(jì)民可信
濟(jì)民可信創(chuàng)建于1999年,制藥歷史可追溯至上世紀(jì)五十年代,現(xiàn)有員工12000余名,總部位于中國(guó)南昌,在江西、北京、上海、江蘇、浙江多地設(shè)有產(chǎn)業(yè)平臺(tái)和研發(fā)機(jī)構(gòu)。2017年,集團(tuán)營(yíng)業(yè)收入突破237億元,躋身中國(guó)制藥工業(yè)100強(qiáng)第6位、中國(guó)醫(yī)藥工業(yè)100強(qiáng)第10位。秉承創(chuàng)新驅(qū)動(dòng)的戰(zhàn)略方針,公司專(zhuān)注于現(xiàn)代中藥、化學(xué)藥、生物制劑、保健品的研發(fā)、生產(chǎn)和銷(xiāo)售,擁有7家制藥基地、1座國(guó)際級(jí)博士后工作站、1個(gè)獲CNAS認(rèn)證的國(guó)家級(jí)實(shí)驗(yàn)室、2個(gè)省級(jí)工程技術(shù)中心,并在海外設(shè)立新藥研發(fā)團(tuán)隊(duì)。當(dāng)前,集團(tuán)在心腦血管科、腎科、腫瘤科、抗感染及急救藥物領(lǐng)域取得豐碩成果,核心產(chǎn)品“金水寶”、“醒腦靜”、“康萊特”、“悉能”、“立幸”、“黃氏響聲丸”、“九華痔瘡栓”等在全國(guó)細(xì)分品類(lèi)擁有較高市場(chǎng)份額。濟(jì)民可信始終堅(jiān)持“濟(jì)世惠民、信待天下”的企業(yè)使命,積極投身社會(huì)公益慈善事業(yè),各項(xiàng)慈善捐助累計(jì)3.17億元,并榮獲中華慈善總會(huì)“中華慈善突出貢獻(xiàn)獎(jiǎng)”。展望未來(lái),濟(jì)民可信將繼續(xù)提供值得信賴的醫(yī)藥產(chǎn)品與診療服務(wù),為提高人類(lèi)的健康水平和生命質(zhì)量而不懈努力!
公司主頁(yè)